词频mapreduce数据
使用EasyExcel对excel数据进行相似度判断
@Data public class ExeclDto { /** * execl表 */ private String filename; /** * 需要匹配的工作表名 */ private String name1; /** * 需要匹配的工作表名 */ private String name ......
redis学习十二：数据类型命令及落地运用 （Stream）
redis流（Stream）：就是redis版本的MQ，消息中间件 作用：实现消息队列，它支持消息的持久化，支持自动生成全局唯一id，支持ack确认消息的模式，支持消费组模式等，让消息队列更加的稳定和可靠。 1.xadd key */id field value 添加消息到队列末尾，id必须比上个i ......
史上最全Hadoop面试题：尼恩大数据面试宝典专题1
文章且持续更新，建议收藏起来，慢慢读！[**疯狂创客圈总目录 博客园版**](https://www.cnblogs.com/crazymakercircle/p/9904544.html) 为您奉上珍贵的学习资源 ： 免费赠送 :[**《尼恩Java面试宝典》**](https://www.cnb ......
iftop 和 nethogs 的数据比对
## 流量监控工具 - iperf3 - nethogs - iftop ## 环境准备 两台服务器： - 10.20.137.42, 网卡 em1 - 10.20.137.41, 网卡 em1 在服务器 42 上跑 iperf 服务端，用于接收数据；在服务器 41 上跑 iperf 客户端，用来发 ......
mysql数据库循环插入数据
1，每次运行只需改类名称，就是把test改成其他名称 #创建存储过程 CREATE PROCEDURE test() BEGIN #定义变量i，用来循环。类似于for(int i = 0; i<=2; i++)中的i DECLARE i INT DEFAULT 1; #类似于for(int i = ......
衔尾法解决当无法使用空闲中断以及DMA中断时配置DMA接收串口不定长数据
##[Ooonly新人贴]记录工作中遇到的问题，话不多说先上干货 问题：类似K线与蓝牙接收部门模块，要求由原来的接收串口中断改为DMA接收。据说要用到空闲中断与DMA中断，但是经仿真发现DMA每完成传输一个数据(比如1BYTE)就会进入空闲中断(k线发现这种情况)，考虑到这样进入中断的频率和以前串口 ......
EasyCVR开启接口鉴权，调用接口仍能获取到数据是什么原因？
将EasyCVR与智能分析网关结合使用，可以实现基于云、边、端架构的AI智能检测分析及算力的精细化调度等能力，该方案的应用场景也十分广泛，包括：通用安防、智慧安监、明厨亮灶、智慧景区、区域安全监测等。感兴趣的用户可以前往演示平台进行体验或部署测试。 ......
redis学习十一：数据类型命令及落地运用 （GEO）
redis之地理空间GEO 1.geoadd key longitude latitude 名称 ； zrange key 0 -1 查看 如果出现乱码问题登录时候加上--raw 2.geopos key 名称 获取对应经纬度 3.用geohash表示 4.geodist距离多少km/m 5.geo ......
JPA在事务结束时自动更新查询数据
[toc] # 现象 最近解决了一个困惑几天的bug，数据库里的某一些记录莫名其妙的被刷新了，排查过代码跟应用日志，可以确定不是代码执行的更新。直到今天看到了一条日志，在事务提交时报错“Column 'user_name' cannot be null”，在出错的事务中，针对这一个表只会执行quer ......
还在为丢数据发愁吗？OM302完美解决问题
前一阵，东东和好友看到了一辆非常帅气的小车，两人就此是哪款车型展开了激烈的讨论，最后好友靠着某度的搜索结果给予东东一记强烈打击取得了胜利，但是为此，他也付出了惨烈的代价，那就是在那一段时间，对应车型的销售们疯狂的对他进行电话轰炸，问他是不是要买车... 之后好友所在的企业又因为邻近高校，在中高考期间 ......
淘宝API接口：让数据分析变得更简单
淘宝API接口是淘宝平台提供的一项重要服务，它为开发者提供了全面、高效、安全的数据访问接口，便于开发者开发出更多的淘宝应用。下面我将为你介绍淘宝API接口及其优势。 一、淘宝API接口是什么？ 淘宝API接口是指通过编程的方式，让开发者能够通过HTTP协议直接访问淘宝平台的数据，包括商品信息、店铺信 ......
数据指纹的生成，hashlib.md5的使用
content = li.xpath('./div[1]/text()').extract_first() title = li.xpath('./div[2]/a/text()').extract_first() all_data = title+content #生成该数据的数据指纹 impor ......
Dempster/Shafer 证据理论(D-S证据理论) 用于异构数据融合方面的笔记
Dempster/Shafer 证据理论(D-S证据理论)的大体内容如下： 一、简介： 在理论中，由互不相容的基本命题组成的完备集合Θ称为识别框架，表示对于某一问题的所有可能答案，但是只有一个答案是正确的。 其中，θj 称为识别框架 Θ 的一个事件或元素。接着引入幂集的概念，即识别框架 Θ 全部子集 ......
jmeter连接mysql数据库
1、下载mysql的jar驱动 下载地址：https://dev.mysql.com/downloads/ 下载后，解压缩，将mysql-connector-j-XXXX.jar复制到jmeter的安装目录的./lib/下面，重启jmeter即可 ......
CSR格式如何更新？ GES图计算引擎HyG揭秘之数据更新
摘要：HyG图计算引擎采用CSR格式来存储图的拓扑信息，CSR格式可以将稀疏矩阵的存储空间压缩，进而大大降低图的存储开销，同时具备访问效率高、格式易转化等优点。 本文分享自华为云社区《CSR格式如何更新？ GES图计算引擎HyG揭秘之数据更新》，作者： π 。 HyG图计算引擎采用CSR格式来存储图 ......
sql server查询表结构字段以及数据类型可用来写文档
#查询数据库中所有的表名字 select namefrom DB2020..sysobjectswhere XType = 'U'orDER BY Name;#查询所有表名以及表的注释 SELECT tbs.name 表名,ds.value 描述FROM sys.extended_propertie ......
检测数据类型instanceof || typeof || Object.prototype.toString.call()
typeof会返回一个运算数的基本类型，instanceof 返回的是布尔值 instanceof 可以准确判断引用数据类型，但是不能正确判断原始数据类型 typeof虽然可以判断原始数据类型（null 除外），但是无法判断引用数据类型（function 除外） instanceof 检测数据类型的 ......
软件测试|数据处理神器pandas教程（六）
 ## 前言 之前我们介绍了pandas读写csv文件，json文件，本篇文章我们来介绍一下pandas读写Excel文件。 ### [获取更多 ......
软件测试|数据处理神器pandas教程（七）
 ## 前言 当进行数据分析时，我们会遇到很多带有日期、时间格式的数据集，在处理这些数据集时，可能会遇到日期格式不统一的问题，此时就需要对日期时 ......
软件测试|数据处理神器pandas教程（五）
 ## 前言 上一篇文章我们介绍了pandas读写CSV文件的有关方法，本篇文章我们介绍pandas读取JSON文件的方法。pandas同样可以 ......
软件测试|数据处理神器pandas教程（四）
 ## 前言 很多时候，我们使用pandas进行数据处理的时，并不是将数据写在脚本里，而是使用pandas读取数据文件，pandas可以很便捷地 ......
欧姆龙PLC数据读写工具。 支持FinsTCP实测好用打开欧姆龙P
欧姆龙PLC数据读写工具。支持FinsTCP实测好用打开欧姆龙PLC读写软件，输入IP地址和端口号，连接成功后即可读写各类寄存器数据。支持FinsTCP协议网口连接的CS/CJ系列PLC，适合个人学习了解PLC数据读写操作。(提供源码，VS2010下C#开发)。欧姆龙PLC数据读写工具是一个功能强大 ......
CAD二次开发之XData扩展数据
TypedValue[] typedValues = { new TypedValue(1001, "huxiaohui"),new TypedValue(1000, "作者：huxiaohui") }; 其中，TypedValue的key,value需要参考下面表格 DXF 组码值 扩展数据内容 ......
Mysql数据导出---select into outfile
## select ... into outfile语法 ``` select * from students order by score limit 100 into outfile '/database/mysql/tmp/students.csv' FIELDS TERMINATED BY ......
关于linq Where中的”或者“运算只查询出来满足一种条件的数据的问题，本质是IEnumerable和IQuerable之间的区别
如下代码所示，其中的"query"返回值类型为IQuerable var query = _deviceRepository.GetAll().AsNoTracking() .Where(a=>a.status = 1); if(ture){ query = query.Where(a=>(a.na ......
Fanuc数据控机床数据采集Focus2基于c#的数据采集，基于Focus2开发版，可以采集发那科数据机床信息，应用于M
Fanuc数据控机床数据采集Focus2基于c#的数据采集，基于Focus2开发版，可以采集发那科数据机床信息，应用于MES数据采集，SCADA系统，提供源码及开发文档。Fanuc数据控机床数据采集Focus2是一种基于C#开发的数据采集工具。它可以用来获取发那科数据机床的信息，并应用于MES数据采 ......
快手数据中台建设 - 大数据服务化之路
快手数据中台建设 - 大数据服务化之路 2021-01-07 21:58 本文是围绕着快手的数据服务化中台进行介绍。第一部分是背景介绍，包括数据开发的痛点，第二部分是介绍大数据服务化平台，包括平台架构以及关键细节详解，第三部分是经验总结和未来思考。（ 本文内容已经在2020 年 Top 100 全球 ......
5. 域对象共享数据
在SpringMVC中，域对象（也称为作用域对象）是一种可以在请求处理过程中共享数据的机制。SpringMVC提供了多种类型的域对象，包括request域、session域和application域。 通过在控制器方法中定义方法参数，SpringMVC可以自动将数据绑定到域对象中，从而在请求处理过程 ......