白鲸 数据分析 模型dataops
Java 反射+递归 实现数据聚合发布的配置化
大致是GraphQL的思路 分开配置接口数据结构和数据实体的元数据 支持列表查询，支持多层级的数据聚合 参数选叶子节点就行，后续可以把参数用JS实现一个选择树状结构的UI，生成出查询字符串来，或者按照字段分配权限给租户 异常处理的不太好，有待继续调试 不支持数据权限，只支持根据聚合根向下查，相当于跨 ......
LLMLingua:集成LlamaIndex，对提示进行压缩，提供大语言模型的高效推理
大型语言模型(llm)的出现刺激了多个领域的创新。但是在思维链(CoT)提示和情境学习(ICL)等策略的驱动下，提示的复杂性不断增加，这给计算带来了挑战。这些冗长的提示需要大量的资源来进行推理，因此需要高效的解决方案，本文将介绍LLMLingua与专有的LlamaIndex的进行集成执行高效推理。 ......
可观测性建设实践之 - 日志分析的权衡取舍
指标、日志、链路是服务可观测性的三大支柱，在服务稳定性保障中，通常指标侧重于发现故障和问题，日志和链路分析侧重于定位和分析问题，其中日志实际上是串联这三大维度的一个良好桥梁。 但日志分析往往面临成本和效果之间的权衡问题，没有完美的方案只有适合的方案，本文将结合实战经验，介绍一种日志分析的实现，分析如 ......
人工智能概述之06模型评估
机器学习模型评估是确保模型性能良好并能泛化到新数据的关键步骤。下面是一些机器学习模型评估的详解、最佳实践和示例： 1. 评估指标： 1.1 分类问题： 准确度（Accuracy）： 正确预测的样本数除以总样本数。 精确度（Precision）： 正类别预测正确的样本数除以所有被预测为正类别的样本数。 ......
【Django基础】操作数据库详解
django ORM简介 O(objects):类和对象。R(Relation):关系，关系数据库中的表格。M(Mapping):映射。 Django ORM框架的功能： 建立模型类和表之间的对应关系，允许我们通过面向对象的方式来操作数据库。 根据设计的模型类生成数据库中的表格。 通过方便的配置就可 ......
【行行AI公开课】AIGC从模型到落地：促进技术落地与产业变革
11月26日北京大学的北大创新学社将举行“AI-FUSION”系列活动第十期。北大创新学社是北京大学团委和光华管理学院团委指导成立，是2023HICOOL全球创业者峰会唯一受邀参展的高校社团。“首都高校创新创业大赛”发起方及主办单位。“AI-FUSION”是AI创投部人工智能行业社群打造的系列活动， ......
深度学习模型训练并行问题
并行这个概念一方面是是加快模型训练，一方面是解决显存不够的问题的并行策略 数据并行(最常用的)，即每张卡上都放一个完整的模型，主要用于单机多卡的数据并行。 模型并行，将模型的不同部分进行手动的分割，然后分别放在不同的卡上。注意，模型要放在卡上不光是需要保存模型参数，因为模型训练过程中不仅涉及数据一层 ......
【Django基础】Mysql数据库连接配置
Django 支持 MySQL 5.7 及以上版本。 Django 的 inspectdb 功能使用 information_schema 数据库，其中包含所有数据库架构的详细数据。 Django 希望数据库支持 Unicode（UTF-8 编码），并将执行事务和引用完整性的任务交给它。 djang ......
西北电专电院_数据结构上机报告记录_第三次上机报告
内容比较简单，和其他院的上机比起来说是这样的 实现二叉树的基本操作，二叉树使用链式结构建立，基本操作基本用递归实现 1. 问题描述 二叉树的基本操作; （1）创建二叉树,需注意此处是按照先序法输入 （2）通过先序遍历、中序遍历、后序遍历分别输出二叉树 （3）求取二叉树的结点总数、树的深度 2.数据结 ......
⼤数据概况及⽣态
1、⼤数据 ⼤数据:是指⽆法在⼀定时间内⽤常规软件⼯具对其内容进⾏抓取、管理和处理的数据集合 主要解决海量的数据存储和分析计算的问题。 2、数据单位 按⼤小: bit Byte KB MB GB TB PB EB ZB YB BB NB DB 1Byte=8bit 1KB=1024Byte 1MB= ......
观影大数据
观影大数据一 1 MathorCup 高校数学建模挑战赛——大数据竞赛 练习题：观影大数据分析 王 S 聪想要在海外开拓万 D 电影的市场，这次他在考虑：怎么拍商业电影才 能赚钱？毕竟一些制作成本超过 1 亿美元的大型电影也会失败。这个问题对电影 业来说比以往任何时候都更加重要。 所以，他就请来了你 ......
爱芯元智AX650N部署yolov8s 自定义模型
爱芯元智AX650N部署yolov8s 自定义模型 本博客将向你展示零基础一步步的部署好自己的yolov8s模型（博主展示的是自己训练的手写数字识别模型），本博客教你从训练模型到转化成利于Pulsar2 工具量化部署到开发板上 训练自己的YOLOv8s模型 准备自定义数据集 数据集结构可以不像下面一 ......
MAT工具分析Dump文件（大对象定位）
前段时间线上服务经常发生卡顿，经过排查发现是大对象引起的Fullgc问题,特此记录排查逻辑。 目录 目的 一、获得服务进程 二、生成dump文件 三、下载mat工具 四、使用mat工具导入第二步生成的dump文件 五、导入后得到如下界面 六、定位大对象（方法一） 七、定位大对象（方法二） 目的 定位 ......
C语言【自定义数据类型、typedef、动态内存分配】
C语言【自定义数据类型、typedef、动态内存分配】 一、自定义数据类型。 关于下面讲到的所有自定义数据类型（enum、struct、union），有一点要说的是：定义类型不是声明变量，做这步操作时不分配内存，也不能在定义类型时赋值（枚举那个不是赋值，是做一个限定，赋值时赋限定之外的值也不报错 ......
低代码的核心思想 如何统一数据的格式
{ name: 'deepsort', label: '1234', type: 'hidden', value: false, description: '', }, { name: 'confidence', label: '1234', type: 'Switch', value: true, ......
练习题：观影大数据分析
王 S 聪想要在海外开拓万 D 电影的市场，这次他在考虑：怎么拍商业电影才 能赚钱？毕竟一些制作成本超过 1 亿美元的大型电影也会失败。这个问题对电影 业来说比以往任何时候都更加重要。 所以，他就请来了你（数据分析师）来帮 他解决问题，给出一些建议，根据数据分析一下商业电影的成功是否存在统一公 式？ ......
4G打猎摄像机拆机分析
前言 收到一台4G打猎相机，官方外观及功能图片如下所示，现对该设备进行拆机及整体技术分析评估，看我们可以从中学习到什么。 (一)什么是打猎相机 所谓打猎相机，也叫野外相机，专门用于野外观察和监测野生动物的一种低功耗轻便型相机。根据官方图片我们对它的功能进行简单介绍 开关：电源开关，用于控制整机电源开 ......
Oracle数据库卸载器 - 开源研究系列文章
今天无事，把网上搜到的Oracle数据库卸载器的软件更新到C#的Winform界面的操作上。 1、 程序目录； 与笔者的其它软件类似，目录如下： 2、 使用的类； 这里主要使用了一个处理函数： 3、 运行效果； 下面是运行界面： 4、 源码下载； 提供源码下载： https://download.c ......
4.MySQL(数据模型,SQL简介,DDL,DML)
MySQL(数据模型,SQL简介,DDL,DML) 概述: 数据库：DataBase(DB)，是存储和管理数据的仓库； 数据库管理系统：DataBase Management System(DBMS)，操纵和管理数据库的大型软件； SQL：Structured Query Language，操作关系 ......
大语言模型的局限性——翻译软件替代不了语言学习
看新闻看到一个文章： https://mbd.baidu.com/newspage/data/landingsuper?context=%7B%22nid%22%3A%22news_9745111774770856297%22%7D&n_type=-1&p_from=-1 有感： 1. 在一些场合下 ......
JVM 内存分析工具 MAT 的深度讲解与实践
1. MAT 工具简介 MAT（全名：Memory Analyzer Tool），是一款快速便捷且功能强大丰富的 JVM 堆内存离线分析工具。其通过展现 JVM 异常时所记录的运行时堆转储快照（Heap dump）状态（正常运行时也可以做堆转储分析），帮助定位内存泄漏问题或优化大内存消耗逻辑。 1. ......
羚通视频智能分析平台：安全帽佩戴检测识别系统与智能监控安全帽识别算法
在现代工业生产中，安全生产是每个企业都必须重视的问题。其中，工人是否正确佩戴安全帽是一个重要的环节。为了解决这个问题，羚通视频智能分析平台推出了一款安全帽佩戴检测识别系统，通过智能监控安全帽识别算法，实现了对工人是否佩戴安全帽的自动检测和识别。 一、羚通视频智能分析平台安全帽佩戴检测识别系统 羚通视 ......
SqlServer 数据库表死锁
数据库表死锁 spid 锁表进程 tableName 被锁表名declare @spid int Set @spid = 618 --锁表进程declare @sql varchar(1000)set @sql='kill '+cast(@spid as varchar)exec(@sql)sele ......
Linux下Oracle11G数据备份恢复(RMAN)
数据库安装参考步骤1--14 https://www.cnblogs.com/baixisuozai/p/17852235.html 创建初始pfile文件 $ vim init.umpay.ora 文件内容： umpay.__java_pool_size=4194304 umpay.__large ......
云智公开课数据库系列第一期《从互联网到云计算再到 AI原生，百度智能云数据库的演进》学习笔记
图片转自：微信公众号—— 百度智能云技术站 存算分离数据库 关系数据（RDS）：MySQL、PostgreSQL、SQL Server云原生数据库：GaiaDB(云原生数据库） 、GaiaDB-XNoSQL数据库：HBase、MongoDB、PegaDB(容量型Redis) 、向量数据库、时序OLA ......
选择振弦采集仪：易操作、快速数据传输和耐用性是关键要素
选择振弦采集仪：易操作、快速数据传输和耐用性是关键要素 振弦采集仪是一种可以测量和记录振动、冲击、声音等信号的设备。它是目前工程、科研、医学、环保等领域中常见的一种测试设备。在选择振弦采集仪时，易操作、快速数据传输和耐用性是关键要素。 易操作是选择振弦采集仪的重要考虑因素之一。操作简易可以降低在使用 ......
简单的用Python抓取动态网页数据，实现可视化数据分析
一眨眼明天就周末了，一周过的真快！ 今天咱们用Python来实现一下动态网页数据的抓取 最近不是有消息说世界首富马上要变成中国人了吗，这要真成了，可就是历史上首位中国世界首富了！ 那我们就以富豪排行榜为例，爬取一下2023年国内富豪五百强，最后实现一下可视化分析。 准备工作 环境使用 Python ......
一文掌握MySQL多表查询技巧：告别繁琐操作，轻松搞定数据查询！
在数据库的世界里，我们经常需要处理各种各样的数据。有时候，我们需要从多个表中查询数据，这时候就需要用到MySQL的多表查询了。今天，就让我们一起来了解一下MySQL多表查询的魅力吧！ 一、表的关系简介 现实生活中，实体与实体之间肯定是有关系的，比如：部门和员工，老师和学生等。在设计表的时候，就应该体 ......