指令 模型 语言 数据
怎么让英文大语言模型支持中文？（三）进行指令微调
前面已经讲过： 怎么让英文大语言模型支持中文？（一）构建中文tokenization 怎么让英文大语言模型支持中文？（二）继续预训练 这里是最后一部分了：怎么让英文大语言模型支持中文？（三）对预训练模型进行指令微调。 代码已上传到github： chinese_llm_sft Part1前言 在之前 ......
Kubernetes编程——client-go基础—— Go语言中的 Kubernetes 对象介绍
Go语言中的 Kubernetes 对象介绍 我们接下来更详细了解在 Go 语言的语境下的 Pod（或者其他任何 Kubernetes 资源）是什么样的？ Kubernetes 中的资源（或者更准确说是对象）都是某种类型的实例。 ......
U8备份账套恢复为不同账套号，进行删除操作数据时提示：当前对应的账套不存在处理方法
现象：U8备份账套恢复为不同账套号，进行删除操作数据时提示：当前对应的账套不存在 处理方法： 该账套的原始账套存在协同，我们在协同中添加一个账套协同即可解决，使用完成后可以删除 ......
盘古天气大模型
摘要：ERA5数据训练。创新：1. 三维transformer 2. 层级结构的时间聚合算法，能够缓解误差累积 硬件：华为云 192个英伟达 Tesla-V100，100epoch训15天 方法：预训练任务就是预测 和Climax一样，没有采用迭代预测，而是指定Δt，直接进行预测。但是前者使用的是时 ......
socket编程中将数据包大小拆分为字节传输
两端自定义网络协议时，需要对传输的数据包格式进行约定，比如TLV格式，约定数据包头部固定几个字节传的是包头，包头的内容也需要约定。 这里讲一种表示数据包大小的方式， 比如首先约定包最大长度只能为60KB，也就是uint16即可表示， 为什么？ 因为60KB = 60 * 1024B = 61440B ......
数据库基础知识
数据库设计范式：第一范式每一列不能在进行换划分，第二范式每一张表都有自己的使命，且做的事相近。 https://www.cnblogs.com/zl181015/p/9242699.html 查询执行顺序： from -> on -> join -> where -> group by -> hav ......
ChatGLM-6B第二代模型开源，拿下LLM模型中文能力评估榜单第一名
ChatGLM-6B 自3月14日发布以来，深受广大开发者喜爱。截至 6 月24日，来自 Huggingface 上的下载量已经超过 300w。 为了更进一步促进大模型开源社区的发展，我们再次升级 ChatGLM-6B，发布 ChatGLM2-6B 。在主要评估LLM模型中文能力的 C-Eval 榜 ......
【Python&RS】基于Python栅格数据/遥感影像投影转换
为了解放双手方便批量投影转换，最近同步研究了一下如何利用Python实现遥感影像的投影转换，主打的就是一个懒。博文基于GDAL实现了栅格数据的投影转换！ ......
如何将mp4文件解复用并且解码为单独的.yuv图像序列以及.pcm音频采样数据？
一.初始化解复用器 在音视频的解复用的过程中，有一个非常重要的结构体AVFormatContext,即输入文件的上下文句柄结构，代表当前打开的输入文件或流。我们可以将输入文件的路径以及AVFormatContext **format_ctx 传入函数avformat_open_input(),就可以 ......
C语言snprintf追加拼接字符串
原文地址：https://www.cnblogs.com/liqinglucky/p/snprintf.html 在使用log函数打印时想打印整个结构体的值出来，但是结构体比较大，如果用log函数一行一行打印显示效果不好。就想用snprintf追加拼接字符串到一个buffer里，最后再把整个buff ......
DataGrip 2023 mac版多引擎数据库管理工具
DataGrip 2023 mac版是一款功能非常强大的多引擎数据库管理工具(置顶文获取)，提供了强大的查询、备份、恢复、查询优化功能，能够让你轻松管理和调度数据库，而且软件还能够实时分析和报告你的数据，是一款非常不错的软件。DataGrip 2022版支持 SQL Server、 MySQL、 P ......
大语言模型的开发利器langchain
[toc] # 简介 最近随着chatgpt的兴起，人工智能和大语言模型又再次进入了人们的视野，不同的是这一次像是来真的，各大公司都在拼命投入，希望能在未来的AI赛道上占有一席之地。因为AI需要大规模的算力，尤其是对于大语言模型来说。大规模的算力就意味着需要大量金钱的投入。那么对于小公司或者个人来说 ......
Java语言学习1
# JavaSE1 ## 机器语言的发展史 ### 第一代语言(机器语言) - 机器语言 - 计算机的基本计算方式都是基于二进制的方式。 - 二进制： 0101010010110101001 - 这种代码是直接输入给计算机使用的，不经过任何转换 > 1 01 > > 2 10 > > 3 11 > ......
Java语言学习2
# JavaSE2 ## 面向对象（OOP）编程 ### 初始面向对象 #### 面向过程 & 面向对象 - **面向过程思想** - 步骤清晰简单，第一步做什么，第二步做什么.... - 面向过程适合处理一些简单的问题 - **面向对象思想** - 物以类聚，分类的思维模式，思考问题是否首先会解决 ......
ExcelJS 导入导出excel带下拉框筛选数据
import ExcelJS from "exceljs"; async function exportExcelTemplate(deptList: any) { const workbook = new ExcelJS.Workbook(); const worksheet = workbook ......
一种读取亿级doris数据库的方法
工作中，常常需要将线上doris同步至集市。读取doris数据同读取常规mysql基本相同。如果数据行小于千万，比较简单的方式直接单节点连接、读取和存储。 ......
怎么将所查数据进行汇总成一行：：
select s.name,s.dept_name from department d left outer join student s on d.dept_name=s.dept_name order by building; SELECT s.dept_name,GROUP_CONCAT(s. ......
一文总结高并发大数据量下MySQL开发规范【军规】
在互联网公司中，MySQL是使用最多的数据库，那么在并发量大、数据量大的互联网业务中，如果高效的使用MySQL才能保证服务的稳定呢？根据本人多年运维管理经验的总结，梳理了一些基础的开发规范，希望能给大家带来一些帮助。一、基础规范 数据库字符集默认使用utf8mb4，兼容utf8，并支持存储emoji ......
自然语言处理 Paddle NLP - 机器同传技术及应用-理论
视频：https://aistudio.baidu.com/aistudio/course/introduce/24177?sharedLesson=1490529&sharedType=2&sharedUserId=2631487&ts=1687144071539 课件：https://aistu ......
① Oracle数据库有多个实例，并且不知道sys密码情况下如何更新密码
##### ① Oracle数据库有多个实例，并且不知道sys密码情况下如何更新密码 ```sql sqlplus /@orcl as sysdba --@orcl 是实例名 ``` ##### ② 修改sys密码 ```sql alter user sys identified by 123456 ......
一文了解Go语言的I/O接口设计
# 1. 引言 I/O 操作在编程中扮演着至关重要的角色。它涉及程序与外部世界之间的数据交换，允许程序从外部，如键盘、文件、网络等地方读取数据，也能够将外界输入的数据重新写入到目标位置中。使得程序能够与外部环境进行数据交换、与用户进行交互、实现数据持久化和文件操作、进行网络通信等。因此，了解和掌握I ......
mpv player (Windows) Files x86_64和x86_64-v3之间的区别在于默认启用的指令集不同
mpv player (Windows) Files x86_64和x86_64-v3之间的区别在于默认启用的指令集不同。 x86_64-v3构建版本默认启用以下指令集： avx avx2 bmi bmi2 fma lzcnt movbe sse3 sse4 sse4.1 sse4.2 ssse3 ......
解密威胁！如何拯救被零日漏洞攻击的.locked勒索病毒的数据？
近日，国内多家公司服务器感染了后缀.locked勒索病毒，公司的服务器文件全部被加密，急需数据恢复，否则公司运作无法进行，部分企业经联系数据恢复工程师远程查看，并沟通协商了相应的解决方案，通过双方远程协同配合，最终在当天顺利完整恢复数据。 如果您在面对被.locked勒索病毒攻击导致的数据文件加 ......
Linux 可执行文件瘦身指令 strip 使用示例
在 Linux 系统下开发软件，输出的可执行文件可大可小，运行环境如果是在服务器那么可能资源比较充足，但如果是在嵌入式环境，那么存储资源是寸土必争的。所以会有对可执行文件进行瘦身的需求，比如使用指令 strip。 ......
解决Ubuntu开机后提示“不完整的语言支持”问题
Ubuntu系统开机后总是提示“不完整语言支持”是一个存在已久的bug，一直未被修复，表现为点击如图所示更新信息中的“现在执行此动作”并不会安装任何组件，每次开机自检后都会提示。 分析长沙气象因子、空气污染、PM2.5浓度、显著性检验、逐日变化可视化
全文链接：https://tecdat.cn/?p=32981 原文出处：拓端数据部落公众号 气候变化和空气污染对现代社会产生了越来越大的影响。在这种背景下，研究气象和空气污染之间的关系以及其对PM2.5浓度的影响变得非常重要。为了更好地理解和解释这些关系，广义加性混合模型（GAMM）成为一种强大的 ......