数据处理 字符串 脚本 字符
聊聊HuggingFace如何处理大模型下海量数据集
翻译自： [Big data? 🤗 Datasets to the rescue!](https://huggingface.co/learn/nlp-course/chapter5/4?fw=pt#big-data-datasets-to-the-rescue "Big data? 🤗 Dat ......
使用Oracle命令进行数据库备份与还原
1.备份数据库 1.1 使用exp命令备份数据库 exp命令可以将整个Oracle数据库或者指定的用户/表空间备份到一个文件中。下面是使用exp命令备份整个数据库的操作步骤： 打开命令行窗口（Windows操作系统）或终端（Linux/Unix/MacOS操作系统）。 使用以下命令登录到数据库： s ......
7 字符串
* 1 驻留机制 * 2 查询 index()：查找子串substr第一次出现的位置,如果查找的子串不存在时，则抛出ValueError rindex()：查找子串substr最后一次出现的位置，如果查找的子串不存在时，则抛出ValueError find()：查找子串substr第一次出现的位置, ......
Excel多列数据转为一行数据
wps中filter+index+row+column+iferror函数组合使用 一、函数组合 在日常办公中，经常会使用到wps处理数据，在处理数据中会使用一些函数，可以事半功倍大大提高工作效率。 wps经典函数组合：filter+index+row+column+iferror filter函数 ......
火山引擎DataLeap数据血缘技术建设实践
DataLeap是火山引擎数智平台VeDI旗下的大数据研发治理套件产品，帮助用户快速完成数据集成、开发、运维、治理、资产、安全等全套数据中台建设，降低工作成本和数据维护成本、挖掘数据价值、为企业决策提供数据支撑。 ......
服务器资源监控告警处理方案总结
Linux系统-部署-运维系列导航 服务器监控指标 服务器日常监控巡检时，总会遇到不同服务器的不同告警，使用不同的监控工具，监控的指标有所不同，但最基础的服务器资源指标，基本都支持，比如zabbix + ，Prometheus + Grafana。 本文只针对服务器资源的相关告警，总结常用的处理方案 ......
MYSQL数据库 索引、事务
索引 定义： 索引是对数据库表中一列或多列的值进行排序的一种结构（类似书的目录）。MySQL索引的建立对于MySQL的高效运行是很重要的，索引可以大大提高MySQL的检索速度 索引的优点： 通过创建唯一性索引，可以保证数据库表中每一行数据的唯一性。 可以大大加快数据的检索速度，这也是创建索引的最主要 ......
pandas + excel : 数据存储
数据：data = [{1: 94, 3: 36, 7: 34}, {1: 96, 3: 34, 7: 46}, {1: 103, 3: 32, 7: 65}, {1: 61, 3: 16, 7: 7}, {1: 145, 3: 46, 7: 24}, {1: 210, 3: 81, 7: 34}, ......
通过商品数据API接口获取数据后的数据处理与利用
在电子商务时代，商品数据API接口为开发者提供了方便快捷的商品数据获取途径。本文将介绍如何利用商品数据API接口获取数据，并对获取的数据进行清洗、整理和利用，以便为电商企业或开发者提供有价值的信息和洞察。 一、获取商品数据API接口 首先，我们需要找到一个可靠的商品数据API接口。一些电商平台会 ......
NetSuite 数据分析 ODBC(SuiteAnalytics Connect) 和 新的Analytics Warehouse
背景 本文主要分享概念层面上的关于：NetSuite在ODBC上面的功能和演变。 Add-On模块 功能与收费情况 1. ODBC, JDBC and ADO.NET 这三个对应SuiteAnalytics Connect功能；免费 它有较长时间的发展历史和版本迭代，具体详见附录或Help中Conn ......
2分布式数据库
与集中式数据库有区别 特点： 数据独立性：分布独立性，逻辑独立性物理独立性 集中与自治共享结合的控制结构：各局部的DBMS可以独立地管理局部数据库，具有自治的功能，同时，系统又设有集中控制机制，协调各局部DBMS的工作，执行全局应用 适当增加数据冗余度：在不同的场地存储同一数据的多个副本，可以提高系 ......
1数据库模式
数据库分三级模式 外模式：用户试图应用程序（外模式与概念模式映射），数据库展示内容，用户视图 概念模式：基本表，逻辑模式，核心，外模式数据是从概念模式来的 内模式：物理存储文件（基本表存在内模式：概念模式与内模式映射） 关系有3中类型 基本关系 查询表 试图表：从基本表和其他视图导出来的表，虚表 数 ......
读SQL学习指南（第3版）笔记10_元数据与大数据
 # 1. 元数据 ## 1.1. metadata ## 1.2. 关于数据的数据 ## 1.3. 数据字典 ## ......
axios_axios发送application/x-www-form-usrl-encoded格式数据
- axios默认发送application/json格式数据, 使用application/x-www-form-usrl-encoded发送数据需要对数据进行处理, 处理为url字符串形式 - ```js // axios向http://127.0.0.1:3058/test发送请求 axios ......
开课吧前端1期.阶段2：ES6详解-2 解构赋值 数组 字符串
4、解构赋值 解构可以理解把东西拆了 比如小时候把家里闹钟拆了 解构复制：注意 1.左右两边结构必须一样 2.右边必须是个东西 3.声明和赋值不能分开（必须在一句话里完成） let arr=[1,2,3] //把数组里面的东西，分别放到3个变量里面，传统写法 let a = arr[0] let b ......
批量将字幕嵌入至MKV视频中的Python脚本
前言 当我们用MKVToolNix软件来对MKV视频嵌入字幕时，往往因为视频是一整季或者几季这样数量过多时，嵌入字幕就比较费事、麻烦。所以就写了这一个小脚本，解放双手。 原理 利用MKVToolNix的混流功能，当我们点击混流菜单下的显示命令行即可复制命令调用CMD来运行混流。 E:\mkvtool ......
BinaryWriter、BinaryReader写入、读取int型数据源码分析
一、背景 熟悉.NET的同学应该用过CLR 中的BinaryWriter、BinaryReader类对二进制流文件写入、读取int数据，写入和读取都非常简单，这是同一语言/平台写入与读取，实际还有其他语言/平台读写需求（如C++程序读取C#程序生成的二进制文件），由于int是4个字节数据，因此它的存 ......
LightDB数据库支持datetime类型
在MySQL中datetime存储包含日期和时间的值。 当从datetime列查询数据时，MySQL会以以下格式显示datetime值： YYYY-MM-DD HH:MM:SS。默认情况下，datetime的值范围为1000-01-01 00:00:00至9999-12-31 23:59:59。 当 ......
刷题[Leetcode]3. 无重复字符的最长子串
3. 无重复字符的最长子串 class Solution { public: int lengthOfLongestSubstring(string s) { if (s.size() == 0) return 0; unordered_set<int> unset; int maxLen = 0; ......
数据库的基本操作
## 1. 数据库的操作 ### 1. 打开数据库 -uroot:root为账号 -p123456：123456为密码 -h127.0.0.1：为地址 ```shell mysql -uroot -p123456 -h127.0.0.1 ``` ### 2. 退出数据库 ```shell exit ......
flask 实现数据流传递
1. flask返回流数据：https://blog.csdn.net/asdq2w3d/article/details/131432889 2. vue解析流数据：https://blog.csdn.net/qq_25741071/article/details/130137032 ......
如何将bat批处理文件固定到Win10的开始菜单磁贴中
要将一个批处理文件 (.bat) 放到 Windows 10 的磁贴中，可以通过以下步骤来实现： 1. **创建一个快捷方式**： - 找到你的 .bat 文件所在的位置，通常是在文件资源管理器中。 - 右键单击 .bat 文件，然后选择“创建快捷方式”。 2. **将快捷方式移动到开始菜单**： ......
电商类面试问题--01Elasticsearch与Mysql数据同步问题
在实现基于关键字的搜索时，首先需要确保MySQL数据库和ES库中的数据是同步的。为了解决这个问题，可以考虑两层方案。 1. 全量同步：全量同步是在服务初始化阶段将MySQL中的数据与ES库中的数据进行全量同步。可以在服务启动时，对ES库进行全量数据同步操作，以确保数据的一致性。而在停止服务时，可以清 ......
统计一个字符串的 k 子序列美丽值最大的数目
k 子序列指的是 s 的一个长度为 k 的 子序列 ，且所有字符都是唯一的，也就是说每个字符在子序列里只出现过一次。 定义 f(c) 为字符 c 在 s 中出现的次数。 k 子序列的 美丽值定义为这个子序列中每一个字符 c 的f(c)之和 ###1. 贪心 + 组合枚举 贪心选美丽值最大的字符，对于 ......
docker二进制安装脚本
##docker自动安装脚本 ###下载软件 ``` wget https://download.docker.com/linux/static/stable/x86_64/docker-24.0.5.tgz wget https://github.com/docker/compose/releas ......
手写RISC-V处理器--基础篇之理解处理器
**我们应该充分理解自己要做的东西才有可能把它做好。** # 计算机体系结构 主流的计算机体系结构分两种，一种是冯诺依曼结构，一种是哈佛结构。 ## 冯诺依曼结构 也称普林斯顿构，是一种将程序指令存储器和数据存储器合并在一起的存储器结构，程序和数据共用一个存储空间，程序指令存储地址和数据存储地址指向 ......
力扣数据库mysql 简单题
1.组合两张表 表: Person + + + | 列名 | 类型 | + + + | PersonId | int | | FirstName | varchar | | LastName | varchar | + + + 表: Address + + + | 列名 | 类型 | + + + | ......
大数据开发-解决Windows下，开发环境常遇的几个问题
# 发士大夫 # 大数据开发-解决Windows下，开发环境常遇的几个问题 # 1.背景 大数据开发的测试环境，很多人不以为然，其实重复的打包，上传，测试虽然每次时间大概也就几分钟，但是积累起了往往会花费很多的时间，但是一个完整的测试环境在生产环境下往往难形成闭环，抛开堡垒机权限不说，hadoop， ......
大数据开发-从Scala到Akka并发编程_jDW32G3c87fjEBtYNE7Z7f
# 大数据开发-从Scala到Akka并发编程 # 大数据开发-从Scala到Akka并发编程 [4-1 Scala作业.pdf](file/4-1 Scala作业_UVqqJLwoIp.pdf) # 1.递归实现瓶盖，瓶子换酒瓶的算法 ## 1.1 需求描述 每瓶啤酒2元，3个空酒瓶或者5个瓶盖可 ......
node_exporter+Prometheus+Grafana 的数据展示
对性能测试来说，操作系统资源的监控也是必不可少的。以 node_exporter+Prometheus+Grafana 为例来说下。 结构图： 一、node_exporter https://kgithub.com/prometheus/node_exporter/releases 下载安装包，解压 ......