底层transformer架构 模型
C#中的List<T>和Dictionary<TKey, TValue>的底层原理
List<T>和Dictionary<TKey, TValue>本质上上是顺序表，用数组来存储数据，在添加和删除数据时，如果需要调整数组长度，则需要进行数组拷贝。 也可以理解成就是对数组的一种扩展，从而使开发者更方便的调用添加、删除、插入等操作。 所以，优化的思路是，对于大概知道元素的数量时，在实例 ......
模型层choice字段使用
1 模型表：Student表，写接口应该选择继承哪个视图类2 推荐使用自动生成路由的方式（继承ViewSetMixin及它的字类）3 但是目前来说，你先实现功能即可（至于选择哪个，慢慢体会） 4 choice的使用 -在模型类中使用 sex = models.SmallIntegerField(ch ......
LLM series: Transformer
🥥 Homepage Dataset, DataLoader, and Transforms Model Traning Model 🥑 Get Started! Import libraries: import torch import torch.nn as nn import torch. ......
【专题】2023年大语言模型综合评测报告PDF合集分享（附原数据表）
原文链接：https://tecdat.cn/?p=33624 原文出处：拓端数据部落公众号 自2022年年末以来，人工智能大模型已成为技术领域甚至全球创新领域最受关注的话题。以ChatGPT为代表的大模型产品发展迅速，预测数据显示，到2030年，AIGC市场规模有望超过万亿元。2023年，国内主要 ......
浦语书生大模型实战训练营03笔记和作业
1.1配置环境 进入命令行，安装pytorch环境 bash /root/share/install_conda_env_internlm_base.sh InternLM conda activate InternLM # 升级pippython -m pip install --upgrade ......
R语言PLS-DA模型分析不同中医组别患者间差异指标数据可视化
全文链接 :https://tecdat.cn/?p=34809 原文出处：拓端数据部落公众号 PLS-DA (Partial Least Squares Discriminant Analysis) 是一种多变量统计分析方法，常用于处理具有多个预测变量和多个响应变量的数据。在本文中，我们帮助客户使 ......
生成模型—VAE
生成模型—VAE(Variational Auto-Encoder) 为进一步了解面部反应生成模型的原理，故详细学习VAE。 Auto-encoder 感谢李宏毅老师的视频！ 自编码器是一种无监督学习的神经网络模型，可以用于数据降维、特征压缩、特征提取、数据生成等任务。其主要思想是尝试将输入数据通过 ......
Gorm 数据库表迁移与表模型定义
Gorm 数据库表迁移与表模型定义 一、Docker快速创建MySQL实例 1.1 创建 因为这里我们是测试学习使用，单独安装MySQL 比较费时费力，所以这里使用Docker方便快速掌握Gorm 相关知识。 如果你没有docker环境，可以参考：【一文搞定】Linux、Mac、Windows安装D ......
大龄码农的业余作品：升讯威在线客服系统：系统架构设计
本系列文章详细介绍使用 .net core 和 WPF 开发 升讯威在线客服与营销系统 的过程。本产品已经成熟稳定并投入商用，并提供了多国语言版本，服务了一些海外客户。本篇主要介绍系统的技术架构，从较高的抽象层次上解释我是怎样设计实现这样一套系统的。 ......
扩散模型
该模型是学习从噪音中如何去除噪音生成一个他已经学会的图片，所以一开始输入模型的是噪音，但是经过一次处理效果不会非常好，所以要循环迭代很多次，得到最终生成结果。 模型预测的实际上是噪音，也就是说要将输入图片减去模型预测的噪音，得到生成结果。 这里没有讲的太细，我的理解是神经网络需要的输入是正态分布的噪 ......
解析flywheel飞轮模型以及它的落地路径
Brian Halligan提出的flywheel飞轮模型，比RARRA模型更进了一步。不止关注用户留存，更关注的是现有用户如何推动企业增长。 HubSpot创始人Brian Halligan在Inbound2018大会上说，他们从此以后就彻底跟营销漏斗说再见了，要用flywheel飞轮模型。 我本 ......
大模型调优方法：提示工程、RAGs 与微调对比
每一个搭建大语言模型应用的AI工程师都会面临一个难题，如何选择一个合适调优方法。就算是强大的预训练LLM也可能无法直接满足项目中的特定需求。如项目需要一个特定结构的应用程序，如预训练缺失上下文的重要文件，再比如有特定术语和结构的高专业性的行业领域，面对这些问题，需要有特定的方法来调整LLM。 要决定 ......
大语言模型LLM幻觉的解决方法：检索增强生成RAG
当你向大语言模型LLMs集成的问答系统平台咨询医疗方面的问题，比如呼吸道感染应该怎么治疗，它可能直接给出答案，但不会提供这个答案的依据来源，这是因为大语言模型应用过程中还存在答案透明度不足的缺陷导致。此外，大语言模型还有知识更新的滞后性、在处理复杂任务时的准确性的问题。 为了解决这些问题，检索增强生 ......
Learning Dynamic Query Combinations for Transformer-based Object** Detection and Segmentation论文阅读笔记
Motivation & Intro 基于DETR的目标检测范式（语义分割的Maskformer也与之相似）通常会用到一系列固定的query，这些query是图像中目标对象位置和语义的全局先验。如果能够根据图像的语义信息调整query，就可以捕捉特定场景中物体位置和类别的分布。例如，当高级语义显示图 ......
[NLP复习笔记] Transformer
1. Transformer 概述 1.1 整体结构 \(\text{Transformer}\) 主要由 \(\text{Encoder}\) 和 \(\text{Decoder}\) 两个部分组成。\(\text{Encoder}\) 部分有 \(N = 6\) 个相同的层，每层包含 一个 \( ......
常见3D模型汇总
3D模型查看器： 3D查看器 (Windows自带) Blender MeshLab (基于VCGlib) 3D模型来源： 美工建模 (fbx) 三维重建 (ply/obj) 3D-AIGC 3D模型格式： obj fbx glb (glTF2.0)：https://github.com/Khron ......
软件生命周期模型定义与选择策略
 数据安全无小事，必须有一个完备的用户管理平台系统。 因为不同公司的主业务不同，个人用户管理的侧重点也会有不同，PowerDotNet这里介绍的个人用户管理平台，只是个人用户管理系统中很基 ......
基于先进云计算技术的云会议架构平台，实现音视频及数据共享
主要功能 音视频及数据共享 支持Man、PC、iPad和Phone在共享屏幕上进行标注 支持画线、矩形、椭圆、荧光笔 等各种工具协作标 最高支持1080P高清画质 录制与存储 本地和云端存储 视频及音频独立文件存储 支持电子交互白板及文件共享 支持会议的录制存储 会议管理 即时邀请：邮件、短信、微信 ......
vivo 海量微服务架构最新实践
vivo微服务平台为全球5亿+用户背后的全网十万级机器、万级微服务提供服务，在高效实践过程中，vivo中间件平台团队输出了一套业务适用的微服务架构最佳实践--架构能力矩阵、高效的开源中间件组件全生命周期管理策略，走出了一条从开源到开源+自研的技术演进路径，通过微服务引擎升级和统一平台建设较好解决了面... ......
听6位专家畅谈AI大模型落地实践：场景和人才是关键
回顾大模型技术在企业的应用过程中，我们不禁要问：大模型在落地方面带来了哪些改变？开发者如何应对大模型的变革？在AI大模型的驱动下，企业的未来又会走向何方？ ......