数据库 数据mysql平台
HBase-通过外部表将Hive数据写入到HBase
a) 准备测试数据 这里准备的csv文件data_test.csv,内容没用''包裹,逗号作为列分隔符 171301,燕青,男,27,发展部 171207,武松,男,39,开发部 171307,李逵,男,41,开发部 320812,宋江,男,45,战略部 321009,顾大嫂,女,38,后勤部 17 ......
debian12安装mysql5.7
出于某些原因，不得不捏着鼻子在debian12上安装mysql5.7 这里 下载debian格式的包，选第一个bundle的 安装步骤 sudo gdebi -n xxx 安装的顺序 common common-client client common-server server ......
Oracle查询一表中当天生成的数据效率比较
查询一表中当天生成的数据 -- 原表mobilefrends中的cdate字段上有索引，创建索引语句是：create index mobilefrends_cdate_idx on mobilefrends(cdate); -- 方法一：用to_char()函数，耗时17.18秒，逻辑读为36896 ......
mysql 运行没错，在mybatis中报错 druid 报错 syntax error, expect RPAREN, actual IDENTIFIER DAY
您遇到的问题可能是由于Druid版本较旧导致的。在Druid 1.0.19中，对于某些语法结构的处理存在一些限制和问题。 针对您的具体情况，可以尝试以下解决方案： 1. 确保SQL语句的括号匹配正确。错误消息"expect RPAREN, actual IDENTIFIER DAY"表明Druid期 ......
【Python&RS】基于GDAL栅格数据/图片位深度（bit）转换
最近在用OpenCv库处理图片时发现cv库无法读取64位的tif影像，所有想通过Python将64位的图片转换成8位的。今天就跟大家分享一下如何利用Python的GDAL库，实现栅格数据/图片的位深度转换。 ......
2023数据采集与融合技术实践作业2
2023数据采集与融合技术实践作业2 目录2023数据采集与融合技术实践作业2作业1(1)代码1.1发送请求1.2解析数据1.3创建数据库1.4数据入库(2)心得体会作业2(1)代码2.1发送请求2.2解析json数据2.3连接数据库2.4数据入库(2)心得体会作业3(1)代码3.1发送请求3.2解 ......
2023数据采集与融合技术实践作业二
作业① 实验要求 ·在中国气象网（http://www.weather.com.cn）给定城市集的7日天气预报，并保存在数据库。 Gitee作业1链接 实验内容: from bs4 import BeautifulSoup from bs4 import UnicodeDammit import u ......
02_常见内置数据类型
常见内置数据类型 标签(tag): Python，数据类型，可变对象，不可变对象，可哈希对象，可迭代对象，可遍历对象 参考资料：Python 文档：内置类型(Build-in Types)Python 文档：数据模型 - 对象、值与类型Python 文档：术语对照表 - 可哈希Python 文档：属 ......
3.1-Pandas数据结构
3.1-Pandas数据结构 3.1.1 认识Pandas库¶ 基于Numpy的一种工具，为解决数据分析任务而创建的，纳入了大量库和一些标准的数据模型，提供了高效地操作大型数据集所需的工具 基本上你能用Excel或者Bi工具进行的数据处理，Pandas也都能实现，而且更快 In [ ]: pip i ......
将 Amazon EC2 到 Amazon S3 的数据传输推向100Gbps 线速
天下武功唯快不破，在很多应用场景中，如机器学习、数据分析、高性能计算等，应用需要高速加载大量数据后进行本地计算。 ......
RTSP流媒体服务器EasyNVR视频云平台之视频观感体验的优化配置
随着互联网基础设施建设的发展，4G/5G/NB-IoT等网络技术的广泛应用，视频监控需求越来越多，而传统监控行业和摄像机直播系统受到使用区域限制、实施成本高、入口门槛高等问题的困扰，无法有效利用优质云资源进行监控云平台的搭建。此时，EasyNVR产品应运而生，成为了解决以上痛点的完美方案。 摄像视频 ......
MySQL 8.0.34 tar包安装踩坑记录
环境概述 操作系统：Centos7.9 MySQL版本：8.0.34 错误提示 [root@s2 yum.repos.d]# /soft/mysql/bin/mysqld --initialize --user=mysql --basedir=/soft/mysql --datadir=/soft/ ......
arm平台上安装qt
如下图步骤选择源代码包（以5.12.12为例） 可以复制链接地址在迅雷上创建下载任务，下载速度会快些 qt的编译与安装需要先安装gcc与cmake 解压安装包将文件放置到文件夹下，解压（例如解压到/usr/local/qt） tar xvf qt-everywhere-src-5.12.12.tar ......
测试数据构造学习记录
1.使用场景：Windows环境下测试，构造上传数据达到某个临界值（比如不超过1G） 构造方法： ①管理员打开cmd命令窗口 ②输入命令： fsutil file createnew 创建路径\文件名称 文件大小（单位KB） 例如在C盘下创建一个名称叫2GB.txt的文件，大小2个G文件： cmd命 ......
一文讲透：低代码平台是什么？低代码平台应该如何挑选？
低代码平台是一种用于快速应用程序开发的软件开发工具。它通过简化和自动化开发过程，使非专业开发人员也能够轻松构建应用程序，减少了传统编码的需求。 在低代码平台上，开发者可以使用可视化的界面、拖放式的组件和预定义的模块来设计和定制应用程序。 选择合适的低代码平台对于企业来说非常重要。以下是一些建议的步骤 ......
关于一款软硬一体的RTSP/Onvif协议视频平台EasyNVR安防视频监控平台的介绍
EasyNVR是一种网络视频录像机（Network Video Recorder），属于软硬一体的产品，支持RTSP/ONVIF协议接入，体积小巧，通电连网即可成功运行，部署操作简单，低功耗，支持7x24小时不间断运行，省去自建视频服务器的高额费用，专属视频服务，免除了与其他硬件的相互影响，可云端运 ......
大数据-拉链表模型
拉链表是一种维护历史状态，以及最新状态数据的一种表。拉链表根据拉链粒度的不同，去除了一部分不变的记录，通过拉链表可以很方便的还原出拉链时点的客户记录，实际上相当于快照。 拉链表特征 1）记录一个事物从开始，一直到当前状态的所有变化的信息； 2）每次上报的都是历史记录的最终状态，是记录在当前时刻的历史 ......
使用ffmpeg将opencv捕获的摄像头数据推流到本地rtsp器上
首先，为什么使用opencv？答：方便对视频进行处理，各种深度学习网络就有了用物之地。 具体流程参考的FFmpeg/opencv + C++ 实现直播拉流和直播推流（对视频帧进行处理）_c++ ffmpeg拉流_酒神无忧的博客-CSDN博客，但是细节不同。 简述一下流程： 使用opencv从摄像头中 ......
数据可视化工具 ，不会写 SQL 代码也能做数据分析
数据可视化工具可以帮助人们以直观、易于理解的方式展现和分析数据。这些工具使得即使不会写 SQL 代码的人也能进行数据分析，并从中获得有价值的信息和见解。 本文将详细介绍几种常用的数据可视化工具及其功能和优点。 1. Datainside: Datainside是一款流行的数据可视化工具，它提供了丰富 ......
国内有哪些支持定制化开发的低代码平台？
在国内，有许多支持定制化开发的低代码平台。这些平台通过简化和加速软件开发过程，使企业能够快速构建和定制应用程序，而无需大量编码工作。下面将详细介绍其中几个具有代表性的低代码平台。 1. Datainside： Datainside是一款强大而灵活的低代码平台，可用于构建企业级应用程序。它提供了丰富的 ......
用jstack导出线程信息，用jmap导出线程信息和堆数据信息
jmap导出的*.hprof文件需要用jvisualvm.exe工具来查看（当然也有第三方的其他工具），jdk8之后的是不会自带了需要手动安装； jmap导出的文件里是包含了线程信息，但是没有jstack导出的多，比如jstack里还有具体等待哪个锁的信息，这个锁的对象类型； jmap使用方式：jm ......
linux centos7 安装mysql
home目录下新建安装包存放位置 cd home mkdir install_packet cd /home/install_packet 下载mysql5.7 rpm源 wget http://repo.mysql.com/mysql57-community-release-el7-8.noarc ......
提高三维模型数据的几何坐标精度需要采取方法浅析
三维工厂K3DMaker是一款三维模型浏览、分析、轻量化、顶层合并构建、几何校正、格式转换、调色裁切等功能专业处理软件。可以进行三维模型的网格简化、纹理压缩、层级优化等操作，从而实现三维模型轻量化。轻量化压缩比大，模型轻量化效率高，自动化处理能力高；采用多种算法对三维模型进行几何精纠正处理，精度高，... ......
华为云GaussDB亮相金融业数据库技术大会
2023金融业数据库技术大会上，华为云数据库服务产品部总经理苏光牛、华为云数据库服务产品部CTO庄乾锋受邀出席，分享了关于华为云GaussDB数据库的设计思考和关键技术能力。 ......
Pandas数据分组的函数应用（df.appy()、df.agg()、df.transform()、df.appymap()、df.groupby()）
apply()数据聚合agg()数据转换transform()applymap()groupby().apply()分组分组 - 可迭代对象其他轴上的分组通过字典或者Series分组通过函数分组分组计算函数方法多函数计算：agg() 将自己定义的或其他库的函数应用于Pandas对象： apply() ......
精彩回顾｜【ACDU 中国行·成都站】数据库主题交流活动成功举办！
【ACDU 中国行·成都站】中六位数据库资深专家从数据库性能管理、数据库中间件以及监控工具等热点话题进行分享，点击查看。 ......
数据采集与融合技术实践第二次作业
作业① 实验要求 ·在中国气象网（http://www.weather.com.cn）给定城市集的7日天气预报，并保存在数据库。 ·Gitee文件夹链接: [https://gitee.com/dong-qi168/sjcjproject/blob/master/作业2/天气] 实验内容 ·代码展示 ......
【MySQL】DATE_FORMAT，DATE_ADD函数用法
一、示例1 select * from bi.test where DATE_FORMAT(UPDATE_TIME, '%Y-%m-%d') = '2023-09-11'; 当然 '%Y-%m-%d'是可以根据实际需求调整的 二、示例22.1 给时间增加一小时 UPDATE bi.test SET ......
LAS Spark+云原生：数据分析全新解决方案
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 随着数据规模的迅速增长和数据处理需求的不断演进，云原生架构和湖仓分析成为了现代数据处理的重要趋势。在这个数字化时代，企业面临着海量数据的挑战和机遇，而构建可扩展、灵活且高效的数据分析平台成为了迫切的需求。 文章主要 ......