硬盘 数据linux
Linux离线安装jdk
1、官网下载相应的jdk https://www.oracle.com/ 2、将jdk包上传到服务器并解压 3、设置环境变量 vi /etc/profile export JAVA_HOME=/opt/jdk-20 export PATH=$PATH:$JAVA_HOME/bin source /e ......
支持多模型数据分析探索的存算分离湖仓一体架构解析（上）
当企业需要建设独立的数据仓库系统来支撑BI和业务分析业务时，有了“数据湖+数据仓库”的混合架构。但混合架构带来了更高的建设成本、管理成本和业务开发成本。随着大数据技术的发展，通过在数据湖层增加分布式事务、元数据管理、极致的SQL性能、SQL和数据API接口能力，企业可以基于统一的架构来同时支持数据湖 ......
python7 用于高级数据类型操作的公共方法
1.+，*，in ‘+’通过此方法可以连接两个数据 ‘*’通过此方法可以倍数型的复制数据 ‘in’通过此方法可以查询数据中是否有我们的目标查询数据，返回一个布尔值 strA='123'strB='456'print(strA+strB)print(strA*2)print('1' in strA) ......
mysql修改数据目录（datadir）
1. 修改配置文件 datadir=新目录 2. 数据迁移 systemctl stop mysqldcp -a /var/lib/mysql/* /data chown -R mysql.mysql /data 3. 重启服务 systemctl restart mysqld.service ......
Rocky Linux 9 安装 Ansible
1、Ansible安装 # 安装 dnf -y install ansible-core # 查看版本 ansible --version 2、修改配置文件 # 备份并从新生成配置文件 mv /etc/ansible/ansible.cfg /etc/ansible/ansible.cfg.org ......
secureCRT8.1 串口假数据生成相关接口和方法
secureCRT8.1 串口假数据生成相关接口和方法 上篇文章（https://www.cnblogs.com/xxhh-yue/p/17286611.html ）我们实践了如何向多个Tab窗口发送相同指令，今天来实践如何用串生成假数据的相关接口和方法咯~ 一、修改当前时间 在命令窗输入 “for ......
Seata：连接数据与应用
作者：季敏（清铭）Seata 开源社区创始人，分布式事务团队负责人。 本文主要介绍分布式事务从内部到商业化和开源的演进历程，Seata 社区当前进展和未来规划。 Seata 是一款开源的分布式事务解决方案，旨在为现代化微服务架构下的分布式事务提供解决方案。Seata 提供了完整的分布式事务解决方案， ......
pandas数据处理基础-数据读取/数据选择
数据读取 df=pd.read_csv("相对路径或者网址") 呈现的结果是一个二维数组，dataframe结构； df.head() 显示的是前5行数据 df.tail(7) 显示的是后7行数据 df.describe() 对数据进行描述 df.values 将dataframe转换为numpy数 ......
Linux 防止命令被记录
更新记录 2023年4月17日 初始化，内容截取自ChatGPT. 问题 在终端中输入的内容默认会被记录。 有时候输入敏感信息需要避免被记录。 解决 在 Linux 中防止命令记录主要有以下两种方式： 方法1：在命令前添加空格 在 Linux 中，命令历史记录保存在“~/.bash_history” ......
灵活、快捷、低运维成本的数据集成方法：数据联邦架构
在传统的企业数据运用中，企业使用多种系统，数据散落在各个存储设备中，数据分析需求往往是跨库的，数据入湖入仓在做分析会有安全问题，或影响业务系统性能。企业需要一种灵活、快捷、低运维成本的数据集成方法，就有了数据联邦架构。本文介绍数据联邦架构。 — 数据联邦概述— 在传统的企业数据运用中，常常会出现这样 ......
从此告别写 SQL！DataLeap 帮你零门槛完成“数据探查”
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 在日常数据处理工作中，产品、运营、研发或数据分析师经常会面临数据量大且混乱、质量参差不齐的问题，需要花费大量时间和精力校验表数据是否完整、是否有空值，表数据是否有异常、主键是否重复等。 这种校验工作也被称为“数据探 ......
【总结】盘点程序员必知必会的常见数据结构和算法
数据结构和算法，是软件组件的基本组成结构，是解决很多疑难编程问题的强有力的法宝，也是程序员装备自身编程技能的一件利器。 ......
非关系型数据库---Redis安装与基本使用
一、数据库类型 关系数据库管理系统（RDBMS） 非关系数据库管理系统（NoSQL） 按照预先设置的组织机构，将数据存储在物理介质上(即：硬盘上) 数据之间可以做无关联操作 (例如: 多表查询，嵌套查询，外键等) 主流的RDBMS软件：MySQL、MariaDB、Oracle、DB2、SQL Ser ......
Linux开机启动rc.local不生效的一般解决方案
给rc.local 添加可执行权限 sudo chmod +x /etc/rc.d/rc.local rc-local.service增加 install 节点配置 sudo vi /usr/lib/systemd/system/rc-local.service 在文件中添加以下内容 [Instal ......
数据类型分析
数据类型处理 #读取数据源 zz = reda_csv(r'XXX.csv') #获取某几行的数据 默认为5行 print(zz.head()) #数据类型查看 print(order.info()) #查看是否存在缺失值 print(zz.isna()) #时间戳转换为日期 zz['time'] ......
分析型数据库：分布式分析型数据库
分析型数据库的另外一个发展方向就是以分布式技术来代替MPP的并行计算，一方面分布式技术比MPP有更好的可扩展性，对底层的异构软硬件支持度更好，可以解决MPP数据库的几个关键架构问题。本文介绍分布式分析型数据库。 — 背景介绍— 目前在分布式分析型数据库领域，学术界今年的研究不多，主要是工业界在推动相 ......
MySQL 处理大数据表的 3 种方案，写的太好了，建议收藏！！
作者：马佩 链接：https://juejin.cn/post/7146016771936354312 场景 当我们业务数据库表中的数据越来越多，如果你也和我遇到了以下类似场景，那让我们一起来解决这个问题 数据的插入,查询时长较长 后续业务需求的扩展 在表中新增字段 影响较大 表中的数据并不是所有的 ......
Linux系统几个跟网络相关的文件和命令
其实，Linux的网络知识挺多的，阿铭在本节只把常用的一些技能教给大家。比如，如何设置IP、如何设置主机名、如何设置DNS等。 14.3.1 用ifconfig命令查看网卡IP 前面阿铭曾用过ip addr这个命令来查看系统的IP地址。其实在CentOS 7之前，我们使用最多的命令是ifconfig ......
Linux 自动杀死进程
https://mp.weixin.qq.com/s?__biz=Mzg2Mjc3MDAwMA==&mid=2247483708&idx=1&sn=e6f65549815a08cc15e256665dfaba6e&chksm=ce038703f9740e15b469c32aee3d531d060e2 ......
MySQL数据库DDL表结构操作
前言 本专栏内容将会详细讲解MySQL数据库技术。 数据库技术是Java开发中必不可少的一部分知识内容。也是非常重要的技术。本系列教程由浅入深, 全面讲解数据库体系。 非常适合零基础的小伙伴来学习。 全文大约 【1092】字， 不说废话，只讲可以让你学到技术、明白原理的纯干货！本文带有丰富案例及配图 ......
KingbaseES避免表的重写与数据类型二进制兼容
KingbaseES避免表的重写与数据类型二进制兼容 一、关于KingbaseES变更表结构表的重写： 1.修改表结构可能会导致表进行重写（表OID发生变化）。 2.修改表结构带有索引或者字段类型长度或者精度操作时，会触发索引重建。 3.不修改列内容且旧类型与新类型二进制兼容（binary coer ......
【机器学习入门与实践】合集入门必看系列，含数据挖掘项目实战，适合新人入门
【机器学习入门与实践】合集入门必看系列，含数据挖掘项目实战 项目链接合集（必看） 项目专栏合集https://www.heywhale.com/home/column/64141d6b1c8c8b518ba97dcc 必看 1. 【机器学习入门与实践】合集入门必看系列 A.机器学习系列入门系列[一] ......
线程池分批处理excel数据
一、场景 在开发excel处理数据时，因为数据库的卡顿，一次插入2000条数据速度可能需要1min左右，所以考虑使用线程池；每200个分组，有n组，就开(n+1)个线程去分批同时处理这些数据。 二、依赖 1. pom.xml <!--工具类hutool，java兵器库，用于读取excel--> <d ......
如何白嫖好用的防WEB攻击软件————只限linux
常见的WEB攻击一般为：SQL注入、xss攻击、恶意文件上传、远程命令执行、文件包含、恶意扫描拦截。 那如何不花钱能规避这些风险呢？在网上找了很多资源，经过对比，只有Web Application Firewall这款软件能做到有效直观的拦截。重点还是免费的。官网地址：http://www.supe ......
Linux工作常用命令
查看网络开通telnet 58.34.135.139 1521 查看本地IPifconfig -a 查看防火墙状态 firewall-cmd --state systemctl status firewalld 查看CPU信息cat /proc/cpuinfoless /proc/cpuinfo | ......
手动实现数据结构-栈结构
1.栈结构 是一种受限的线性结构。 特点：先进后出 2.使用TS实现 1 //封装一个栈 使用泛型类 2 class ArrayStack<T=any>{//给一个默认值为any类型 3 //定义一个数组，用于存储元素 4 private data:T[]=[] 5 //push:将元素压入栈中 6 ......
Linux安装Nginx
1、创建Nginx目录并进入 mkdir -p /usr/local/develop/nginx cd /usr/local/develop/nginx 2、下载Nginx 在创建的Nginx目录下执行下载命令 wget http://nginx.org/download/nginx-1.12.1. ......
安装Linux并且部署主从nginx的步骤（自己实践过的）
用板凳哥的方式最实在 一、 下载模块依赖性Nginx需要依赖下面3个包 提前安装好gc++ gcc-如果没有安装c++编译环境，还得安装，通过yum install gcc gcc-c++完成安装（得先执行这步） 1.gzip 模块需要 zlib 库 ( 下载: http://www.zlib.ne ......
Linux初体验
一、Linux安装 1.1 网卡设置 如果诸位在启动服务器时未加载网卡，则会导致 IP 地址初始化失败。 可以采用以下的方式来解决。 首先使用 ip addr 来查看服务器的 ip 地址。 修改网络初始化配置，设定网卡在系统启动时初始化。 cd / # 进入根目录 cd etc # 进入 etc 目 ......