数据处理 客户端 客户 服务器
（一）pandas读取excel数据
import pandas xlsfile = pandas.read_excel('config.xlsx') #默认读取excel中的第一个sheet表，所有列 data = xlsfile.values.tolist()#将字典转换成列表print（data） 输出结果： [[1, '注册模块 ......
顶象uni-app版设备指纹上线，满足企业多平台服务需求
某旅游公司，在短视频平台上发布了自己的小程序服务。用户观看精彩旅游直播或视频时，可以转到视频平台的小程序上查阅详细路线套餐。该旅游公司想详细了解来访者的更多情况，以便于进行深度营销，为用户提供个性化服务。经过多番比较，他们选用了顶象uni-app版设备指纹。 顶象uni-app版设备指纹，通过用户上 ......
oracle数据库改字段数据类型造成索引失效的bug
问题说明： oracle的varchar2最大长度为4000，由于某个字段长度超过4000，所以就将其数据类型改成了CLOB，结果报错： java.sql.SQLException: ORA-01502: 索引 'DEV.SYS_C0019380' 或这类索引的分区处于不可用状态 问题解决： 查看索 ......
SchemaRegestry组件原生的类和方法无法实现flink消费kafka的数据动态调整schema的情况--未彻底解决
0、前提知识储备 Conflurent公司的SchemaRegestry组件的基本了解和使用 一、背景： 0.组件版本 flink：1.14 1.链路调整情况 原先链路：oracle-->OGG-->kafka-->flink-->数据库\湖\仓 实现链路：oracle-->OGG-->kafka（ ......
Unity- 数据与网络（占坑）
一、常用数据格式 1.轻量数据格式JSON 1.1对象 1.2数组 1.3SON的创建和解析 2.可扩展标记语言XML 1.使用XML语法进行解析 2.使用XPath语法进行解析 CSV与Excel SQLite 1.创建表 2.删除表 3.增加数据 4.查找数据 5.删除数据 6.修改数据 二、多 ......
MySQL 查看数据库表容量大小
1.查看所有数据库容量大小 select table_schema as '数据库', sum(table_rows) as '记录数', sum(truncate(data_length/1024/1024, 2)) as '数据容量(MB)', sum(truncate(index_length ......
Halcon形态学处理初级
开运算opening 以输入的参数形成的区域为基准，对目标区域进行模拟放置，能将参数形成的区域填满的保留，填不满开掉去除 先腐蚀后膨胀 作用 祛杂点 扩展链接：https://blog.csdn.net/qq_31671139/article/details/113184854 算子：opening ......
Halcon图像处理的思维
观察图像->确定目标区域->去除不相关的干扰->缩小目标范围->找到目标 缩小目标区域时保证其稳定性 不被变换的图像干扰 算子只是工具 会使用即可 不必追究根底 研究算子是算法工程师的活 我们捡现成的就行 任何工具只有用的多了才会熟练 正所谓熟练生巧 唯熟尔 关键就是要多练习 切记勿眼高手低 想要达 ......
【获奖案例巡展】信创先锋之星——中信证券基于国产图数据库构建企业图谱的应用实践
为表彰使用大数据、人工智能等基础软件为企业、行业或世界做出杰出贡献和巨大创新的标杆项目，星环科技自2021年推出了“新科技 星力量” 星环科技科技实践案例评选活动，旨在为各行业提供更多的优秀产品案例，彰显技术改变世界的力量，目前已成功举办两届，收到了来自各界的积极参与。 第二届星环科技科技实践案例评 ......
搭建rsyncd服务
前言 rsync常用来做文件传输和同步。本文示例中客户端通过rsync同步服务端的/home/tmp目录到本地（不是将客户端的文件同步到服务端）。 环境信息 | IP | 系统版本 | rsync版本 | 说明 | | : : | : : | : : | : : | | 192.168.0.10 | ......
DML(对表中的数据进行增删改)
DML(对表中的数据进行增删改) 添加（insert） 给指定列添加数据它 INSERT INTO 表名(列名1,列名2,.….)VALUES(值1,值2,...); 给全部列添加数据 INSERT INTO 表名VALUES(值1,值2.…); 批量添加数据 INSERT INTO 表名(列名1, ......
在 Linux 上配置一个 syslog 服务器
Syslog服务器可以用作一个网络中的日志监控中心，所有能够通过网络来发送日志的设施（包含了Linux或Windows服务器，路由器，交换机以及其他主机）都可以把日志发送给它。 通过设置一个syslog服务器，可以将不同设施/主机发送的日志，过滤和合并到一个独立的位置，这样使得你更容易地查看和获取重 ......
SQL 跨数据库处理 语句
1.插入数据 SET IDENTITY_INSERT 数据库A.dbo.FI_FloExpenseDaily ON --设置为允许手动插入值 INSERT INTO 数据库A.[dbo].[表1] (ID,[FlowNo] ) SELECT ID,ExpenseNo FROM 数据库B.[dbo]. ......
MySQL InnoDB存储引擎选择B+树作为索引数据结构的原因
MySQL InnoDB存储引擎选择B+树作为索引数据结构的原因在于其特点与性能。B+树相比红黑树和B树，更适用于关系型数据库的特点，具体体现在以下几个方面： 磁盘I/O效率：数据库的数据通常存储在磁盘上，磁盘I/O操作相对较慢。B+树的一个重要特点是它能减少磁盘I/O次数。B+树是一种多路平衡查找 ......
MySQL InnoDB存储引擎选择B+树作为索引数据结构的原因
MySQL InnoDB存储引擎选择B+树作为索引数据结构的原因在于其特点与性能。B+树相比红黑树和B树，更适用于关系型数据库的特点，具体体现在以下几个方面： 磁盘I/O效率：数据库的数据通常存储在磁盘上，磁盘I/O操作相对较慢。B+树的一个重要特点是它能减少磁盘I/O次数。B+树是一种多路平衡查找 ......
数据治理实践 | 网易某业务线的计算资源治理
本文从计算资源治理实践出发，带大家清楚认识计算资源治理到底该如何进行，并如何应用到其他项目中。 01前言 由于数据治理层面可以分多个层面且内容繁多（包括模型合规、数据质量、数据安全、计算/存储资源、数据价值等治理内容），因此需要单独拆分为6个模块单独去阐述其中内容。 笔者作为数仓开发经常会收到大量集 ......
【FAQ】关于华为推送服务因营销消息频次管控导致服务通讯类消息下发失败的解决方案
一． 问题描述 使用华为推送服务下发IM消息时，下发消息请求成功且code码为80000000，但是手机总是收不到消息； 在华为推送自助分析（Beta）平台查看发现，消息发送触发了频控。 二． 问题原因及背景 2023年1月05日起，华为推送服务对咨询营销类消息做了单个设备每日推送数量上限管理，具体 ......
云时代，MySQL到ClickHouse数据同步产品对比推荐
ClickHouse 在执行分析查询时的速度优势很好的弥补了MySQL的不足，但是对于很多开发者和DBA来说，如何将MySQL稳定、高效、简单的同步到 ClickHouse 却很困难。本文对比了 NineData、MaterializeMySQL（ClickHouse自带）、Bifrost 三款产品... ......
mysql中对于 GROUP_CONCAT 函数的长度限制处理
今天才知，原来 GROUP_CONCAT 函数返回的长度默认是有限制的： mysql> SHOW VARIABLES LIKE "group_concat_max_len"; 可见，默认是最长不超过 1024。 修改mysql的配置参数增加限制： vi /etc/my.cnf [mysqld] gr ......
Cesium中的地图服务
09-Cesium中的地图服务 Cesium最基本的功能就是构建地球场景，这就离不开地图服务功能，Cesium能提供方便的地图服务。可以在初始化的时候就加载地图，也可以在后期调用。 在Cesium中，ImageryProvider是用于提供地球表面图像的接口。Cesium支持多种类型的Imagery ......
VMware 主机(宿主)电脑访问虚拟机的服务---配置网络连接方式
一、讲解网络配置 VMware的网络适配器中网络连接方式 桥接模式：该模式下，guest主机表现为同host主机同一局域网并且同一网段的独立主机(相当于和host主机一样)，可以与host主机互通，host主机以外的其它主机能访问guest主机，host主机里的多台guest主机之间可以互通。使用场 ......
实验3 控制语句与组合数据类型应用编程
1.实验任务1 task1.py 实验源码： import random print('用列表存储随机整数: ') lst = [random.randint(0, 100) for i in range(5)] print(lst) print('\n用集合存储随机整数: ') s1 = {ran ......
UDS之19服务中04子服务：读取快照数据
背景介绍 在车载诊断中常用的诊断协议有ISO 14229等，在协议中主要定义了诊断请求、诊断响应的报文格式及ECU该如何处理诊断请求的应用。其中ISO 14229系列标准协议定义了用于行业内诊断通信的需求规范，也就是UDS。UDS主要应用于OSI七层模型的第七层——应用层，它支持的汽车总线包括：CA ......
批处理按日期备份文件夹
@echo off set YYYYmmdd=%date:~0,4%%date:~5,2%%date:~8,2% set "filename=E:\download\bak\%YYYYmmdd%" if not exist %filename% mkdir %filename% xcopy.exe ......
极光笔记 | 让运营“从心”出发，打造身临其境的客户体验！
在数字化时代，用户对于个性化、实时和多元化的互动体验需求越来越高。作为中国领先的客户互动和营销科技服务商，极光一直致力于满足客户不断变化的需求。现在，我们很高兴宣布，极光推送富媒体功能全新改造升级，“从心”出发，推出“应用内消息”功能啦！ 下面我们将详细介绍极光推送“应用内消息”功能的特点，以及如何 ......
关于dev report 报表模版数据源过滤的一点技巧
有了报表, 能使用保存展示模版,能加载数据源了.能正常展示了. 我们可能还有个需求,想在窗体上加个下拉 ,过滤 报表内的数据,比如只显示某类.经过多次测试失败,最后发现数据源应该是下边的操作方法 public static List<xxx> infos = new List<xxx>(); 我们不 ......
sql 分页展示数据
sql 是的，SQL 语句可以实现分页展示数据的功能。不同的数据库系统实现方式可能略有不同，以下是一些常见的 SQL 实现分页的方式： ### MySQL MySQL 可以使用 `LIMIT` 子句实现分页，语法如下： ```sql SELECT * FROM table_name LIMIT of ......
Oracle使用expdp数据泵导出多张表
由于需要导出的表数量较多，这里要用到include参数。 一、exclude/include参数用法： EXCLUDE=[object_type]:[name_clause],[object_type]:[name_clause] -->排出特定对象 INCLUDE=[object_type]:[n ......
级联接口查询组装表结构数据
表1 接口文件--attend.js 1 import request from '@/utils/request' 2 3 export function attendList(query){ 4 return request({ 5 url:'/system/activity/list', 6 ......