白鲸 数据分析 模型dataops
《智能与数据重构世界》读后感1
这是我这学期阅读的最后一本书，叫《智能与数据重构世界》，这本书是最难的了，有大量的人工智能的知识，所以我放在了最后来学习。以下是章节介绍： 1.大数据和云计算：第一章主要介绍了大数据的特性，云计算平台以及去中心化的区块链数据库。讨论了大数据的体量、多样性、更新频率、准确性等特征，以及大数据工具和数据 ......
聊聊大数据框架的数据更新策略: COW,MOR,MOW
大数据框架下，常用的数据更新策略有三种: COW: copy-on-write, 写时复制; MOR: merge-on-read, 读时合并; MOW: merge-on-write, 写时合并; hudi等数据湖仓框架，常用的是前两种实现数据更新。而Doris则主要用后两种更新数据。 COW 在 ......
《智能与数据重构世界》读后感2
这几天我读完了后几章，做如下总结： 4.智能与数据对制造业的重构：第四章以工业大脑为核心，介绍了工业4.0的概念、工业管理系统、工业互联网、智慧物流等。通过多个案例展示了智能技术在制造业的应用。 5.智能与数据对出行的重构：第五章探讨了智慧出行的概念、智能驾驶技术、智慧交通等，以及一些实际案例展示了 ......
《智能与数据重构世界》读后感3
在阅读《智能与数据重构世界》这本书之后，给我留下了深刻的印象和思考。这本书以通俗易懂的语言，深入浅出地探讨了人工智能和大数据如何正在改变我们的世界。首先，这本书的主题是关于人工智能和大数据的。在今天这个信息爆炸的时代，大数据已经成为一种新的资源，而人工智能则是一种新的能力。这两者的结合，正在对各行各 ......
pgsql数据库安装和初始化
!/bin/bash 获取当前目录的绝对路径 current_directory=$(readlink -f "$PWD") echo ' pgsql安装开始 ' 创建文件仓库配置 sudo sh -c 'echo "deb http://apt.postgresql.org/pub/repos/a ......
【数据库概论】第三章 数据库完整性
数据库完整性包括正确性和相容性，DBMS通过提供约束条件机制、检查方法和违约处理功能维护数据库完整性，其中实体完整性通过主键确保唯一标识，参照实体性通过外键关联，用户定义完整性满足特定应用需求，而触发器和断言提供事件驱动和复杂约束支持，共同构成数据库保持一致性的关键机制。 ......
大语言模型底层架构丨带你认识Transformer
本文分享自华为云社区《大语言模型底层架构你了解多少？大语言模型底层架构之一Transfomer的介绍和python代码实现》，作者： 码上开花_Lancer 。 语言模型目标是建模自然语言的概率分布，在自然语言处理研究中具有重要的作用，是自然语言处理基础任务之一。大量的研究从n 元语言模型（n-gr ......
数据库的锁和MVCC机制
数据库的锁机制，是数据库为了保证数据的一致性和完整性，使各种共享资源在被并发访问时变得有序所设计的一种规则。 之前讲到过事务，提到事务的ACID原则 和 隔离的级别一条SQL的背后故事(三) 目前较为常见的三种并发控制机制：分别是悲观并发控制(锁)、乐观并发控制(乐观锁)和多版本并发控制(MVCC) ......
tidb断电pd数据被破坏修复
思路：找到cluster id 和 分配的id 启动单点的pd pd-recover修复pd 恢复成pd集群 强制删除多个pd 启动tidb集群 1、pd的日志报错 [root@localhost log]# pwd /tidb-deploy/pd-2379/log [root@localhost ......
多开工具的安全性分析与防范策略
随着计算机技术的不断发展，多开工具成为了一种常见的软件工具。这种工具可以让用户在同一时间打开多个相同的应用程序，从而方便用户同时处理多个任务，提高工作效率。然而，多开工具也存在着一定的安全风险，因此，我们需要对其进行安全性分析，并提出相应的防范策略。 首先，多开工具可能会被黑客利用，从而进行恶意攻击 ......
【数据库概论】第二章 关系型数据库
数据库关系模型是数据组织的核心，以关系为基础，表达实体和实体关系。关系模型通过域、笛卡尔积、关系模式构建二维表，形成数据库。完整性约束确保数据有效性，实体完整性、参照完整性和用户定义完整性保证数据质量。关系操作包括基本操作和数据语言，而关系代数提供了强大的查询手段。数据库关系模型为信息管理提供了结构... ......
数据链路层-MAC多点访问控制协议
解决的问题 对于一个共享性介质（总线型局域网的总线），各个节点如何协调对它的访问和使用？通过各种途径来控制对共享介质访问的方式，在数据链路层称为多点访问控制协议。 多点访问控制协议按照访问方式分为三种类型：信道划分方式、随机方式、轮流方式。 信道划分方式 频分复用: FDM(Frequency Di ......
【scikit-learn基础】--『数据加载』之真实数据集
上一篇介绍了scikit-learn中的几个玩具数据集，本篇介绍scikit-learn提供的一些真实的数据集。玩具数据集：scikit-learn 基础(01)--『数据加载』之玩具数据集 1. 获取数据集 与玩具数据集不同，真实的数据集的数据不仅数据特征多，而且数据量也比较大，所以没有直接包含在 ......
DevExpress WinForms Pivot Grid组件，一个类似Excel的数据透视表控件（一）
界面控件DevExpress WinForms的Pivot Grid组件是一个类似Excel的数据透视表控件，用于多维(OLAP)数据分析和跨选项卡报表。众多的布局自定义选项使您可以完全控制其UI，无与伦比的以用户为中心的功能使其易于部署。 DevExpress WinForms有180+组件和UI ......
三维模型的顶层合并构建的优势方面浅析
三维工厂K3DMaker是一款三维模型浏览、分析、轻量化、顶层合并构建、几何校正、格式转换、调色裁切等功能专业处理软件。可以进行三维模型的网格简化、纹理压缩、层级优化等操作，从而实现三维模型轻量化。轻量化压缩比大，模型轻量化效率高，自动化处理能力高；采用多种算法对三维模型进行几何精纠正处理，精度高，... ......
网络隔离后文件如何交换，推荐一款专业全能的数据摆渡系统!
随着网络技术的迅猛发展，信息安全系统的脆弱性已经展现在人们眼前，为了保证涉密信息和重要数据不被泄露，一些重要部门比如政府部门、军队单位、大型企业及科研单位以及银行业金融机构等都建立了自己独有的内部网络。采用内外网隔离的策略，各个网络之间不互通，每个网络形成一个网络安全域，这是保护核心数据最重要、最基 ......
ssh~Server refused our key分析与解决
ssh介绍 SSH，全称为Secure Shell，是一种用于在网络中安全地进行远程登录和执行命令的协议。它通过加密的方式提供了对网络通信的保护，使得用户可以在不安全的网络环境下安全地进行远程管理和数据传输。 以下是 SSH 协议的一些重要特点和功能： 安全性：SSH 使用加密技术来保护数据在网络中 ......
1.数据库介绍
1.数据库介绍 什么是数据库? 数据库是为了实现一定的目的按某种规则组织起来的数据的集合, 简单的说,数据库就是存储数据的库. 举个例子来说明这个问题：每个人都有很多亲戚和朋友，为了保持与他们的联系， 我们常常用一个笔记本将他们的姓名、地址、电话等信息都记录下来， 这样要査谁的电话或地址就很方便了。 ......
LynxDB 开源数据库之路
官网地址：https://lynxdb.bailizhang.com GitHub地址：https://github.com/baili-zhang/lynxdb LynxDB是一个存储大表的数据库，提供了便捷的客户端操作，有利于项目的快速开发。 例如： public class InsertObj ......
vue 树形选择器数据处理 + 搜索查询时每一层级都可选
vue 树形选择器 主要用后端处理显示数据 根据 el-Element 官网可知，想要使用树形选择器 <el-tree-select> 就要提供以下形式的数据： data = [ { value: '1', label: 'Level one 1', children: [ { value: '1- ......
R语言汽车口碑数据采集抓取、文本数据分词和词云可视化实现
原文链接：https://tecdat.cn/?p=34469 原文出处：拓端数据部落公众号 本文以R语言为工具，帮助客户对汽车网站的口碑数据进行抓取，并基于文本数据分词技术进行数据清理和统计。通过词频统计和词云可视化，对口碑中的关键词进行分析，挖掘出消费者对汽车的评价和需求，为汽车制造商和销售商提 ......
【专题】智能汽车云服务白皮书报告PDF合集分享（附原数据表）
原文链接：https://tecdat.cn/?p=34111 随着新一轮技术革命和产业变革的推动，以及国家政策的大力扶持，电动化、智能化、网联化已经成为汽车行业发展的新趋势。在这种背景下，各大企业纷纷争夺数字化人才，以推动产品的规模化落地和商业化创新应用。阅读原文，获取专题报告合集全文，解锁文末5 ......
【专题】2023年中国人工智能医学影像产品生态路线研究报告PDF合集分享（附原数据表）
原文链接：https://tecdat.cn/?p=34466 原文出处：拓端数据部落公众号 未来，生成式人工智能将推动AI医学影像企业的指数级增长，而综合性医学人工智能模型与医学影像领域的结合将释放巨大潜力。为加速自身商业化落地能力，AI医学影像企业将依托生态路线。阅读原文，获取专题报告合集全文， ......
第二章 若依JFlow流程模型设计
这篇文章主要讲解了如何使用JFlow框架创建业务场景和流程模型，绘制流程图及注意事项，以及单节点的表单绘制和需要注意的细节 ......
2023/12/5日 学习Java数据结构
今日学习了单链表和一部分的双向链表，还有一个月的时间就要期末考试了，但是我的数据结构还是一点也不会，只能抓紧学了 package com.ityuhao; import javax.swing.*; public class LinkList { //头节点 private Node head; / ......
《需求分析与系统设计》阅读笔记三
软件需求分析中不可或缺的一步就是可视化建模，因为参与软件开发的人员不可能都是程序员，肯定还有相关项目的业界人士参与进来，这时候让他们直接去理解代码显然是不现实的，因此我们需要用到可视化建模，目前我们最熟悉的可视化建模语言莫过于UML了，这也是我们在大学内特地开设课程教授的语言。UML的详细介绍这里就 ......
数据库总结复习（sql应用题 二）
目录前言关系代数关系间运算条件表达式使用案例语法树例子 前言 本文针对考纲上的30分sql应用题所涉及到的知识进行归纳总结。 分为两篇文章，本篇为关系代数相关知识点。 关系代数 关系间运算 关系和关系之间需要用到以下关系运算符： 其中，连接从连接条件上分，等值连接，非等值连接。上图不加任何条件的连接 ......
SQL 数据库语句- 创建和管理数据库
SQL CREATE DATABASE 语句 SQL CREATE DATABASE 语句用于创建一个新的 SQL 数据库。 语法 CREATE DATABASE 数据库名称; 示例 以下 SQL 语句创建了一个名为 "testDB" 的数据库： CREATE DATABASE testDB; 通过 ......
数据库安全性
数据库的不安全因素： 非授权用户对数据库的恶意存取和破坏 数据库中重要或敏感的数据被泄露 安全环境的脆弱性 安全性描述 TCSEC/TDI 内容：定义了数据库管理系统的设计与实现中需要满足和用以进行安全性级别评估的标准，从4个方面描述安全性级别划分的指标，即安全策略、责任、保证和文档 TCSEC/T ......
1.需求分析和架构设计
需求分析 熟悉产品需求 以架构师的思维分析需求，不能只停留在表面实现需求，要考虑怎么实现能给业务带来增长 全局思维、整体思维、闭环思维，不能只考虑自己，要全局考虑整个团队，要做到有输出、有输入、有结果 浅层需求 分析表面需要实现的功能，如登录、创建作品、编辑、发布、访问作品等 深度需求 通过浅层需求 ......