模型 杀手 领域 时代
LLaMA模型微调版本：斯坦福 Alpaca 详解
 项目代码： 博客介绍： ## Alpaca 总览 Alpaca ......
怎么让英文大语言模型支持中文？（三）进行指令微调
前面已经讲过： 怎么让英文大语言模型支持中文？（一）构建中文tokenization 怎么让英文大语言模型支持中文？（二）继续预训练 这里是最后一部分了：怎么让英文大语言模型支持中文？（三）对预训练模型进行指令微调。 代码已上传到github： chinese_llm_sft Part1前言 在之前 ......
盘古天气大模型
摘要：ERA5数据训练。创新：1. 三维transformer 2. 层级结构的时间聚合算法，能够缓解误差累积 硬件：华为云 192个英伟达 Tesla-V100，100epoch训15天 方法：预训练任务就是预测 和Climax一样，没有采用迭代预测，而是指定Δt，直接进行预测。但是前者使用的是时 ......
ChatGLM-6B第二代模型开源，拿下LLM模型中文能力评估榜单第一名
ChatGLM-6B 自3月14日发布以来，深受广大开发者喜爱。截至 6 月24日，来自 Huggingface 上的下载量已经超过 300w。 为了更进一步促进大模型开源社区的发展，我们再次升级 ChatGLM-6B，发布 ChatGLM2-6B 。在主要评估LLM模型中文能力的 C-Eval 榜 ......
大语言模型的开发利器langchain
[toc] # 简介 最近随着chatgpt的兴起，人工智能和大语言模型又再次进入了人们的视野，不同的是这一次像是来真的，各大公司都在拼命投入，希望能在未来的AI赛道上占有一席之地。因为AI需要大规模的算力，尤其是对于大语言模型来说。大规模的算力就意味着需要大量金钱的投入。那么对于小公司或者个人来说 ......
R语言使用多元AR-GARCH模型衡量市场风险|附代码数据
原文链接：http://tecdat.cn/?p=19118 最近我们被客户要求撰写关于GARCH的研究报告，包括一些图形和统计输出。 本文分析将用于制定管理客户和供应商关系的策略准则 假设： 贵公司拥有用于生产和分销聚戊二酸的设施，聚戊二酸是一种用于多个行业的化合物。 制造和分销过程的投入包括各种 ......
R语言JAGS贝叶斯回归模型分析博士生延期毕业完成论文时间|附代码数据
原文链接：http://tecdat.cn/?p=23652 最近我们被客户要求撰写关于贝叶斯回归的研究报告，包括一些图形和统计输出。 本文为读者提供了如何进行贝叶斯回归的基本教程。包括完成导入数据文件、探索汇总统计和回归分析 （ 点击文末“阅读原文”获取完整代码数据******** ）。 在本文中 ......
R语言广义加性混合模型(GAMM)分析长沙气象因子、空气污染、PM2.5浓度、显著性检验、逐日变化可视化
全文链接：https://tecdat.cn/?p=32981 原文出处：拓端数据部落公众号 气候变化和空气污染对现代社会产生了越来越大的影响。在这种背景下，研究气象和空气污染之间的关系以及其对PM2.5浓度的影响变得非常重要。为了更好地理解和解释这些关系，广义加性混合模型（GAMM）成为一种强大的 ......
AI在人力资源管理领域的应用前景
近日，Towards Data Science 平台一篇文章，详细探讨了AI对人力资源领域可能产生的影响，切入视角和观点都非常新颖！ 人力资源管理中，人才招聘和保留、员工敬业度、绩效管理等，都是非常大的挑战。传统的 HR 评估指标往往在量化分析中掺杂了大量人类的主观判断。 作者指出，借助 AI 可以 ......
行行AI人才直播第4期： 跟随占冰强老师走近《如何定制企业专属AI大模型？》
每个企业定制专属AI大模型的目的都不同，比如某企业希望通过AI技术提升其客户服务和销售效果。该企业面临着庞大的商品数据、用户评价和客户咨询等信息，传统的处理方法已经无法满足快速发展的需求。 ......
如何高度优化适用于企业的AI (三) 上传及微调模型
接下来, 我们就要上传我们的数据, 来训练我们自己的模型了 ```bash openai api fine_tunes.create -t XXXX_jsonl-m davinci ``` 这行命令的含义是, 我们调用openAI的api 通过微调的方式来创建一个模型, `-t`的含义是指定要使用的 ......
使用 Transformers 为多语种语音识别任务微调 Whisper 模型
本文提供了一个使用 Hugging Face 🤗 Transformers 在任意多语种语音识别 (ASR) 数据集上微调 Whisper 的分步指南。同时，我们还深入解释了 Whisper 模型、Common Voice 数据集以及微调等理论知识，并提供了数据准备和微调的相关代码。如果你想要一个 ......
yolov5实战之模型剪枝
续[yolov5实战之二维码检测](https://www.cnblogs.com/haoliuhust/p/15362819.html) [toc] # 前沿 在上一篇yolov5的博客中，我们用yolov5训练了一个二维码检测器，可以用来检测图像中是否有二维码，后续可以接一个二维码解码器，就可以 ......
Self-Instruct 论文解读：利用大模型自己给自己生成指令数据，指令数据自动生成
## 总览 大规模“指令调整”的语言模型，即**指令微调的LLM**，已经表现出非凡的**零样本能力**，尤其是推广**新任务上**。 然而，这些模型严重依赖于人类编写的指令数据，而这些数据通常在数量、多样性和创造力方面受到限制，因此阻碍了调整模型的通用性。 基于上述背景，作者提出了**Self-i ......
AIGC时代，基于云原生 MLOps 构建属于你的大模型（上）
为了满足企业在数字化转型过程中对更新迭代生产力工具的需求，灵雀云近日推出了云原生 MLOps 解决方案，帮助企业快速落地AI技术、实现智能化应用和服务。 为什么要打造云原生MLOps解决方案？ 随着信息化技术的不断发展，企业在数字化转型的过程中，需要不断地更新迭代生产力工具，从最早的将物理世界的主要 ......
AIGC时代，基于云原生 MLOps 构建属于你的大模型（下）
为了满足企业在数字化转型过程中对更新迭代生产力工具的需求，灵雀云近日推出了Alauda MLOps 解决方案，帮助企业快速落地AI技术、实现智能化应用和服务。 ......
浅谈“信创”时代，恒辉软件发展前景
随着中国的发展，很多技术因为一些原因越来越受制于人，尤其是上游核心技术。为了解决这个问题，中国明确了“数字中国”建设战略，抢占数字经济产业链制高点。 自主创新与国产化已成为我国实现科技强国、经济强国的发展趋势与行业共识，中国要逐步建立基于自己的 IT 底层架构和标准，促使信创产业加速升级。 这便提出 ......
端侧AI模型优化
LeNet，第一个可商用的神经网络，仅有5个卷积层，51K参数量。 MIT的韩松老师在2015年提出了一些观测：预先训练好的AlexNet、VGGNet模型中，去掉大约90%的参数，它的精度还是无损的。因此韩松老师开始提出一些模型压缩的技术。 模型蒸馏：去掉原始模型中的光流模块，帮助我们解决稳定性的 ......
关于在大模型战略资源储备的不同阶段，B端开发者的行动策略的一些思考
一、大模型产业链的终态猜想 我们先定义理想状态下，大模型应该具备哪些综合性能： 指令理解能力：能够理解并遵循指令，并按照指令完成相应的逻辑推理、知识抽取、概念总结、API调用等任务 多语言理解能力：能够同时理解包括中文、英文等主流语言 逻辑推理能力：能够将复杂任务分解为相互串联依赖的子任务，通过分治 ......
什么是软件开发领域的 in-house 模式？
在软件开发领域，"in-house"（内部开发）指的是组织或企业自身的员工在公司内部开发和维护软件，而不是将这些任务外包给第三方供应商或外部团队。这种内部开发模式通常适用于组织需要具有独特功能或专业知识的软件解决方案的情况。 以下是一些详细说明和举例，以更好地理解在软件开发领域中的"in-house ......
ABAP2UI5 项目里动态创建模型的特性介绍
这个特性使得开发人员不仅可以在 Design time 时定义模型，而且可以在运行时定义模型。 用户不需要做任何额外的工作，因为 abap2UI5 在每个 AJAX 请求期间在后台处理整个过程：  微软官方说明文档 FromForm：当请求属于表单提交，也就是 content-type 为 appli ......
论文插图也能自动生成了，用到了扩散模型，还被ICLR接收
前言 如果论文中的图表不用绘制，对于研究者来说是不是一种便利呢？有人在这方面进行了探索，利用文本描述生成论文图表，结果还挺有模有样的呢！ 本文转载自机器之心 仅用于学术分享，若侵权请联系删除 欢迎关注公众号CV技术指南，专注于计算机视觉的技术总结、最新技术跟踪、经典论文解读、CV招聘信息。 CV各大 ......
实用模型推荐(三)语音转文本模型:whisper
1.开原地址:https://github.com/openai/whisper https://github.com/guillaumekln/faster-whisper 2.使用场景:语音转文字 3.api封装: import os import uvicorn from fastapi im ......
实用模型推荐(二)中译英翻译模型:opus-mt-zh-en
1.开源地址:https://huggingface.co/Helsinki-NLP/opus-mt-zh-en 2.使用场景:中译英,多模型场景的中英转换 3.API封装 import uvicorn from fastapi import FastAPI from loguru import l ......
LLaMA模型微调版本 Vicuna 和 Stable Vicuna 解读
相似度,文本向量化:text2vec-base-chinese
1.开源地址:https://github.com/shibing624/text2vec 2.使用场景:文本相似度计算,文本转指令 3.API封装: import uvicorn from fastapi import FastAPI from loguru import logger from ......
phi-1：高质量小数据小模型逆袭大模型
人工智能的三个核心要素是算力、算法和数据，这是大多数人在初识人工智能时都会接触到的一个观点。不过，在深入阐述该观点时，很多材料都倾向于解释数据「大」的一面，毕竟当前的大模型一直在由不断增加的「大数据」来推动，而且这条路似乎还没有走到极限。 不过，随着数据获取难度增加以及算力增长出现瓶颈，单纯追求「大 ......
LangKit：大语言模型界的“安全管家”
ChatGPT等大语言模型一直有生成虚假信息、数据隐私、生成歧视信息等难题，阻碍了业务场景化落地。为了解决这些痛点并增强大语言模型的安全性，AI和数据监控平台WhyLabs推出了LangKit。（开源地址：https://github.com/whylabs/langkit） LangKit提供文本 ......