数据处理 客户端 客户 服务器

有限资源下如何实现最高效的数据处理?四个“智慧城市”项目寻找“最优解”

随着 5G 基站等通信工程的加快建设,城市治理、城市安全管理成为热门话题,物联设备在我们的社会中扮演的角色也变得越来越重要,智慧燃气、智能电表、智能井盖、智能交通等项目在众多城市开始布局,随着一众智慧城市项目的深入落地,海量时序数据的高效处理和成本管控也成为一个待解的难题。 为帮助大家寻找解决上述问 ......
数据处理 智慧 项目 数据 城市

LOTO示波器电源环路增益分析客户实测

我们在之前有文章介绍过LOTO示波器+信号源扫频测电源环路增益稳定性的方法和过程,可以参考演示视频如下: https://www.ixigua.com/7135738415382790663?logTag=a843d537a27090d5117b 或者阅读对应的文章:《LOTO示波器 实测 开环增益 ......
环路 示波器 电源 客户 LOTO

如何搭建自己的Nuget服务器

如何搭建自己的Nuget服务器 背景 在很多时候我们是有这样的需求的,我们很多的代码不需要对外公开源码,比较适合将编译好的动态库做成Nuget包,然后在VisualStudio中通过Nuget包管理器来进行添加引用,而且通过这种方式能很好的进行代码的版本管理,从而使代码的结构更加的合理,本篇文章就如 ......
服务器 Nuget

虹科干货| 虹科Redis企业版数据库:告别游戏卡顿,让快乐加速!

没有任何玩家希望游戏中出现卡顿掉线,也没有任何企业希望数据成为游戏创新的桎梏,快速响应是玩家尽情畅玩游戏所必须满足的条件!虹科Redis企业版数据库是为游戏开发人员提供的全新的数据处理和存储方案,在业界被广泛应用,它可以处理实时数据、存储玩家数据、缓存游戏资源,为游戏开发人员提供无限创意空间。 ......
干货 游戏卡 数据库 数据 Redis

数据开发提效有秘诀!离线开发BatchWorks 六大典型场景拆解

回顾大数据的发展历程,一句话概括就是海量数据的高效处理。在当今快节奏、不断变化的市场环境下,优秀的开发效率已经成为企业数字化转型的必备条件。 数栈离线开发BatchWorks 是一款专注离线数据ELT开发的产品,采用先进的大数据生态底层技术,具备高性能且功能丰富的大数据处理能力,对大数据离线计算、数 ......
BatchWorks 秘诀 场景 典型 数据

C# JToken.Parse与json对象中的日期处理踩坑记录

###json可以转换为JObject 并通过SelectToken来获取这个对象中的某个属性 某个节点 将json解析为JObject JObject o = JObject.Parse(@"{ 'Stores': [ 'Lambton Quay', 'Willis Street' ], 'Man ......
对象 日期 JToken Parse json

数据结构和算法笔记

目录 1.汉诺塔问题 2.顺序查找 3.二分查找 4.冒泡排序 5.选择排序 6.插入排序 7.快速排序 8.堆排序 1.汉诺塔问题 汉诺塔问题可以分为三步(假设有n个盘子): 1.将n-1个盘子从a经过从移动到b 2.将第n个盘子从a移动到c 3.将n-1个盘子从b经过a移动到c 参数意义: 1. ......
数据结构 算法 结构 笔记 数据

玖章算术CEO叶正盛在数据技术嘉年华分享NineData AIGC的应用实践

ChatGPT 掀起了 AIGC 的浪潮。NineData,是玖章算术来自前阿里云、华为等多位资深专家联手打造的多云数据管理 SaaS 服务,提供了云原生的智能SQL开发服务。本次主题重点是分享 NineData 在 AIGC 的应用实践,带大家一起来体验新一代企业级 SQL 开发平台,让程序员和 ... ......
算术 嘉年华 NineData 数据 技术

手动搭建自己的nuget服务器及使用

手动搭建自己的nuget服务器及使用 这篇文章的主要目的: 1.搭建自己的私有的nuget服务器 2.打包代码为nuget包 3.在其他项目中使用私有服务器上的nuget包 一. 搭建自己的nuget服务器 1. 创建一个空的ASP.NET Web 应用程序 2.使用nuget管理器,添加nuget ......
手动 服务器 nuget

oracle 常用数据字典表说明

常用数据字典表 数据字典表是 oracle 存放数据库信息的地方,其用途是用来描述数据的。 数据字典表分类 数据字典主要可分为四部分 (1) 内部RDBMS表:x$,用于跟踪内部数据库信息,维持DB的正常运行。是加密命名的,不允许sysdba以外的用户直接访问,显示授权不被允许。 (2) 数据字典表 ......
字典 常用 数据 oracle

常用的多边形处理库记录

GeoPands Shapely pyproj Fiona rasterio 目前就收集到上面五个,详情见Python处理时空数据常用库案例及练习-CSDN博客。 下面为它们的中文文档说明: shapely:Shapely用户手册 — Shapely 1.8.0 文档 (osgeo.cn) fion ......
多边形 常用

记一次kvm虚机mysql数据库磁盘扩容操作步骤及其问题小坑

背景: 业务量持续增加,原来规划的1T磁盘空间不足以支撑业务发展存储使用,需要对数据库磁盘进行扩容。目前物理机有新增了2块3.5Tssd的数据盘用于数据库虚机磁盘扩容使用。需要安排时间对其进行操作扩容。 操作思路: 1、完成磁盘raid1操作,将新磁盘挂载到物理机上并添加到kvm的存储空间中,创建好 ......
小坑 虚机 磁盘 步骤 数据库

解决linux系统的kdump服务无法启动的问题

问题:项目麒麟系统服务器的kdump服务无法启动,没有相关日志无法定位问题。 1、查看服务状态是关闭的,重启系统也无法启动 systemctl status kdump 2、修改grub参数,修改“crashkernel”为“512M(有的机器数值太大太小都会导致报错,建议从128M开始试,或者加个 ......
问题 系统 linux kdump

跨域与解决跨域 (前端的处理)

一、什么叫跨域 ??? 跨域,是指浏览器不能执行其他网站的脚本。 它是由浏览器的同源策略造成的,是浏览器对JavaScript实施的安全限制。 浏览器的同源策略: 简单来说 同源 就是 指 协议、域名、端口号 均相同 二、解决跨域 1、CORS 下面是MDN对于CORS的定义: 跨域资源共享(COR ......
前端

python从shp文件中读取经纬度数据

python从shp文件中读取经纬度数据 没有接触过GIS的人来说shp文件很陌生而且很难打开查看,好在python可以从中提取出自己想要的数据 pyshp库的安装 python的pyshp库可以实现shp文件的读写功能。 pyshp的官方文档:https://pypi.org/project/py ......
经纬度 经纬 文件 数据 python

VMware ESXi6.7服务器,确认用户名密码正确,但是web管理界面无法正常登陆

VMware ESXi6.7服务器,确认用户名密码正确,但是web管理界面无法正常登陆。 修改完成密码后,连接显示器键盘,操作没有问题。但是远程通过web管理界面访问时,提示: “由于用户名火密码不正确,无法完成登陆” 确认用户名密码没错,连接显示器键盘,操作没有问题。 需要restart mana ......
界面 用户名 密码 服务器 用户

性能测试了解服务架构

软件架构与部署 性能测试软件服务架构一般分为,最外层lvs-nginx-tomcat-redis-mysql mermaid graph LR lvs-->nginx主1-->tomcat1-->redis1-->mysql1 nginx主1-->tomcat2-->redis1 lvs-->ngi ......
架构 性能

【AGC】崩溃服务数据上报常见的几个问题

最近开发者使用崩溃服务遇到的一些数据异常问题,我在这里汇总一下,以后遇到相似的问题可以以此为参考。 【问题描述1】 iOS崩溃数据“按用户搜索”页,“过去7天” 是有数据的,但“统计”页没有。 ​ ​ 【解决方案】 查询了后台上报日志,发现没有上报应用的启动事件,只上报了$HA_ERROR事件,所以 ......
几个问题 常见 数据 AGC

mysql安装和nodejs连接数据库

mysql下载地址 https://dev.mysql.com/downloads/installer/ 第一步,安装自定义 2. 添加这三个产品 3. 下一步 4. 默认端口 3306,如果被占用了就自己改下 5. 强密码认证 6,添加密码和用户,密码12345678 ......
数据库 数据 nodejs mysql

【Serverless】云数据库端云一体化问题

【关键字】 AGC、HarmonyOS、端云一体化 【问题描述】 开发者反馈在鸿蒙应用集成了AGC 云数据库服务,在引入AGC服务时遇到了一些问题。具体如下所述: 1、HarmonyOS ArkTS语言开发,参数是number类型,但是查询的云数据库字段是Integer类型,这要怎么处理。 2、样例 ......
Serverless 一体 数据库 数据 问题

PHP连接MYSQL数据库参数设置机器增删查改操作

1.param.php <?php session_start(); if(!$_SESSION["user"]->poststuno) exit('你的工号不正确'); if($_SESSION["user"]->juese=='001') exit('未知错误,请联系管理员 0001'); $d ......
机器 参数 数据库 数据 MYSQL

请封装⼀个⽅法,将以下树形数据转换成期望的格式

转化前 const list = [ {id:1}, {pid:1,id:2}, {id:3}, {pid:3,id:4}, {pid:4,id:5} ] 转化后 [{ id:1, children:[{ pid:1, id:2 }] }, { id:3, children:[{ pid:3, id ......
树形 格式 数据

Hive元数据配置到Mysql

1. 将mysql的JDBC驱动拷贝到Hive的lib目录下 [root@hadoop1 lib]# ls mysql-connector-java-5.1.34.jar 2. 配置MetaStore到Mysql [root@hadoop1 conf]# vi hive-site.xml <conf ......
数据 Mysql Hive

Redis - 底层数据结构

Redis 构造了多种底层数据结构供使用,不同的数据类型有可能使用到多种底层数据结构存储,因此,需要理解为何 Redis 会有这样的设计,理解每个底层数据结构的概念之后,就能知晓在极端性能上如何做取舍。 ......
数据结构 底层 结构 数据 Redis

支付宝定时任务怎么做?三层分发任务处理框架介绍

本文将从单机定时调度开始,循序渐进地带领大家了解五福定制三层分发任务处理框架。 一、背景介绍 技术同学对定时任务肯定不陌生。定时任务一般用来定时批量进行业务处理。支付宝卡包券到期提醒、删除过期失效券,五福大促批量给用户发放添福红包等场景,都是通过定时任务触发来完成的。 作者有幸参与了2023兔年五福 ......
任务 框架

如何抓住重点,系统高效地学习数据结构与算法?

如何抓住重点,系统高效地学习数据结构与算法? 因为看不懂数据结构和算法,而一度怀疑是自己太笨?实际上,很多人在第一次接触这门课时,都会有这种感觉,觉得数据结构和算法很抽象,晦涩难懂,宛如天书。正是这个原因,让很多初学者对这门课望而却步。 我个人觉得,其实真正的原因是你没有找到好的学习方法,没有抓住学 ......
数据结构 算法 重点 结构 数据

为什么要学习数据结构和算法?

基础知识就像是一座大楼的地基,它决定了我们的技术高度。而要想快速做出点事情,前提条件一定是基础能力过硬,“内功”要到位。 技术人究竟都需要修炼哪些“内功”呢?我觉得,无外乎就是大学里的那些基础课程,操作系统、计算机网络、编译原理等等,当然还有数据结构和算法。 数据结构和算法如何应用到实际的编码中? ......
数据结构 算法 结构 数据

odoo Dockerfile 处理

1. linux软件源配置 # debian软件源 RUN sed -i 's/deb.debian.org/repo.huaweicloud.com/g' /etc/apt/sources.list apt update 2. pip源配置 pip install -i https://repo. ......
Dockerfile odoo

客户端技术访谈-声网

前言本期「声网开发者 x 人物专访」的受访者,是声网高级架构师 @高纯。高纯是 W3C 组织的 AC REP(Advisory Committee Representative),还是一名管乐爱好者,陆陆续续的吹过几年的小号。在加入声网前,纯哥曾在被戏称为“上海三大养老院”之一的英特尔工作了 7 年 ......
客户端 客户 技术

大数据常见架构

经典离线数仓架构(业界主流) ODS 数据准备区 DW 数据仓库层(DMI公共维度,DWD数据明细,DWS轻度数据汇聚) ADS 应用层 分层原因:1、简化问题2、明细血缘3、减少重复开发、计算4、适应业务的快速变化 Lambda架构(当前业界主流) batch Layer 批处理层(离线) 处理全 ......
架构 常见 数据