基础 笔记 数据spark
MySQL基础：事务
MySQL基础：事务 事务简介 事务是一组操作的集合，它是一个不可分割的工作单位，事务会把所有的操作作为一个整体一起向系统提交或撤销操作请求，即这些操作要么同时成功，要么同时失败。 默认MySQL的事务是自动提交的，也就是说，当执行一条DML(数据操作语言：对数据库进行增删改操作)语句，MySQL会 ......
linux shell基础--$字符
shell中有两类字符：普通字符、元字符。普通字符在Shell中除了本身的字面意思外没有其他特殊意义，即普通纯文本；元字符是Shell的保留字符，在Shell中有着特殊的含义。 $()反引号和$()的作用相同，用于命令替换（command substitution），即完成引用的命令的执行，将其结果 ......
通过使用chatgpt 逐步解决egg项目学习的一些问题【笔记】
###我的需求提问 创建一个html页面，这个页面包括通过学生id查询学生详情的组件，和通过学生姓名，身份证，选择班级的组件，并把代码告诉我 ###chatgpt回答 好的，以下是一个包含两个组件的HTML页面，分别是通过学生ID查询学生详情和通过姓名、身份证号码和班级选择查询学生详情。 <!DOC ......
数据结构合集
链表 链表是一种本身并不常用的数据结构。 然而其衍生出的许多数据结构如块状链表和链式前项星等却十分甚至九分的常用。 链表 简介 顾名思义，链表就是使用链连接在一起的数组。 可以实现$O(1)$的插入,$O(1)的删除$和$O(n)$的查询。 实现 我们使用一个结构体来实现链表： struct poi ......
oracle插入数据的时候 要插入对应为字符串类型的字段 我这边输入单纯数字111，然后就会转化为字符串，如果带中文就不会成功，比如插入 我我我 这样子就不成功。 后面如果是几个null，null中间已经最后一个null可以省略掉逗号。
oracle插入数据的时候 要插入对应为字符串类型的字段 我这边输入单纯数字111，然后就会转化为字符串，如果带中文就不会成功，比如插入 我我我 这样子就不成功。 后面如果是几个null，null中间已经最后一个null可以省略掉逗号。 ......
使用 stream 从 List 对象中获取某列数据
使用 stream 从 List 对象中获取某列数据 原文链接：https://blog.csdn.net/easysec/article/details/119813487 在 JDK 8 中增加了 stream 的特性，使用非常的方便。这里，介绍通过 stream 从 List 中获取某列数据。 ......
Revit BIM模型在ArcGIS Pro中的数据组织及转换成SLPK后的图层结构解析
ArcGIS Pro对Revit 数据有自己的一套分层方式。 在ArcGIS Pro中打开bim文件会发现都是按照相同的方式组织数据： 将rvt格式数据转换成SLPK格式后的数据结构（将slpk数据直接拖动到ArcGIS Pro中加载）： ArcGIS 生成的SLPK格式数据将数据分为两个图层组，概 ......
spring-data-jpa使用oracle作为数据源时in查询在1000条以上 ，报ORA_01795的错误
spring-data-jpa使用oracle作为数据源时in查询在1000条以上 ，报ORA_01795的错误 https://segmentfault.com/a/1190000041913304?sort=votes 目的解决项目中使用spring-data-jpa，采用oracle 11g作 ......
python-Django 基础学习（待完善）
Django基础python开发的 开源的web应用框架 优点：快速开发低耦合开发快捷部署方便可重用性高维护成本低等 python 加Diango 是快速开发、设计、部署的最佳组合特点：强大的数据库功能自带强大的后台功能优雅的网址 模型：使用的是类似mvc框架的MTV框架MTV框架：M :Model ......
第四天---数据类型
sizeof（）是一个运算符，给出某个类型或变量在内存中所占据的字节数 sizeof(int)=sizeof(7) 因为sizeof只能测量int或者double。。。。的字节数，如果输入整数则和int同 类型有何不同？ 自动类型转换 强制类型转换 #include <stdio.h> int ma ......
适用list数据分割 数据1000条更新处理一次，循环处理 for 循环 departments.size() 和 1000 都是可以使用变量代替 核心是subList() 方法
数据1000条更新处理一次，循环处理 for 循环 https://www.cnblogs.com/wanbiao/p/16587707.html 为了缓解数据库压力，每次取值List后的更新操作改为1000条更新一次 if (departments.size() <= 1000){ //小于100 ......
如何用Python对股票数据进行LSTM神经网络和XGboost机器学习预测分析（附源码和详细步骤），学会的小伙伴们说不定就成为炒股专家一夜暴富了
最近调研了一下我做的项目受欢迎程度，大数据分析方向竟然排第一，尤其是这两年受疫情影响，大家都非常担心自家公司裁员或倒闭，都想着有没有其他副业搞搞或者炒炒股、投资点理财产品，未雨绸缪，所以不少小伙伴要求我这边分享下关于股票预测分析的技巧。基于股票数据是一个和时间序列相关的大数据，所以我打算给大家分享时... ......
Android BLE蓝牙开发-读写数据 获取UUID
首先： 1.BLE介绍 BLE是Bluetooth Low Energy的缩写，又叫蓝牙4.0，区别于蓝牙3.0和之前的技术。BLE前身是NOKIA开发的Wibree技术，主要用于实现移动智能终端与周边配件之间的持续连接，是功耗极低的短距离无线通信技术，并且有效传输距离被提升到了100米以上，同时只 ......
Odoo数据库自动备份脚本
#!/bin/bash # 数据库名称 # db_name="odoo14e" # 存放备份文件的url地址 # base_url="/home/odoo/pgsql_backup/backup_files/" # odoo临时文件地址 # filestore_url=/home/odoo/.loc ......
redis数据结构http://doc.redisfans.com/index.html
flushdb刷新数据库，达到清空key的效果 redis有16个库，按照下标区分，默认是0；切换select 下标 redis集群只认db0；其他数据库是被抛弃的。 什么是阻塞？ 如果所有给定 key 都不存在或包含空列表，那么 BLPOP 命令将阻塞连接，直到等待超时，或有另一个客户端对给定 k ......
oracle学习之路（5）Navicat连接Oracle数据库：Oracle library is not loaded 解决方案
Navicat连接Oracle数据库报错：Oracle library is not loaded 原因：这是因为OCI环境配置有问题，需要修改 oci.dll 文件路径。版本不一致 是oci.dll版本不对。因为Navicat是通过Oracle客户端连接Oracle服务器的，Oracle的客户端分 ......
玩转Mybatis高级特性：让你的数据操作更上一层楼
Mybatis高级特性能够帮助我们更加灵活地操作数据库，包括动态SQL、缓存机制、插件机制、自定义类型转换等。学习这些特性可以让我们更好地利用Mybatis，提高数据操作的效率和质量。 未来的道路由自己抉择，事业的高度由自己决定。 动态SQL 动态SQL中，Mybatis提供了多种标签来帮助我们构建 ......
【K哥爬虫普法】大众点评VS百度地图，论“数据权属”对爬虫开发的罪与罚！
我国目前并未出台专门针对网络爬虫技术的法律规范，但在司法实践中，相关判决已屡见不鲜，K哥特设了“K哥爬虫普法”专栏，本栏目通过对真实案例的分析，旨在提高广大爬虫工程师的法律意识，知晓如何合法合规利用爬虫技术，警钟长鸣，做一个守法、护法、有原则的技术人员。 案情介绍 被告人：北京百度网讯科技有限公司（ ......
1万条数据只能传值调用存储过程，sql如何优化
1 如果需要传递的数据量比较大，那么在存储过程中使用表变量是一种比较好的选择，而且可以通过以下方式优化： 使用临时表代替表变量 如果从外部获取的数据量较大，可以考虑使用临时表代替表变量。临时表不仅可以存储大量数据，而且可以适应更复杂的数据操作。通过创建索引，可以提高临时表的查询性能。但需要注意的是， ......
怎样实现纯前端百万行数据秒级响应
前端表格控件SpreadJS 推出了新的功能集算表功能。集算表 （Table Sheet）是一个具备高性能渲染、数据绑定功能、公式计算能力的数据表格，通过全新构建的关系型数据管理器结合结构化公式，在高性能表格的基础上提供排序、筛选、样式、行列冻结、自动更新、单元格更新等功能。 什么是集算表（Tabl ......
高效管理笔记，选择IHome在线笔记
IHome在线笔记是一款极其便捷的云笔记应用，它的出现彻底改变了人们的笔记方式。 Home在线笔记提供了一系列强大的功能，让你在任何地方、任何时间，都可以高效地管理自己的笔记，大大提高了工作和生活的效率。 首先，IHome在线笔记支持数据备份，这意味着你的笔记会被存储在云端服务器中，不会因为电脑损坏 ......
[重读经典论文] AlexNet笔记
1. 前言 AlexNet是一个深度卷积神经网络模型，由Alex Krizhevsky、Ilya Sutskever和Geoffrey Hinton于2012年设计。这个模型在ImageNet图像识别挑战赛中获得了当时的冠军，并推动了卷积神经网络在计算机视觉中的广泛应用。 AlexNet包括5个卷积 ......
迁移数据从A表到B表
1.写一个异步线程，同步数据from a -> b2.比对数据的差异性select b.* from A a right join B b on a.xx_id = b.xx_id and b.is_deleted = 0 where a.xx_id is null and b.xx_id is n ......
Quicker快速开发，简单的网页数据爬取（示例，获取天眼查指定公司基础工商数据）
前言 有某个线上项目，没有接入工商接口，每次录入公司的时候，都要去天眼查、企查查或者其他公开数据平台，然后手动录入，一两个还好说，数量多了的重复操作就很烦，而且，部分数据是包含超链接，一不注意就点进去，又多了一个步骤。 因此，我就用Quicker写了一个数据抓取脚本，用来抓取一些公开的工商数据，逻辑 ......
【0基础学爬虫】爬虫基础之代理的基本使用
大数据时代，各行各业对数据采集的需求日益增多，网络爬虫的运用也更为广泛，越来越多的人开始学习网络爬虫这项技术，K哥爬虫此前已经推出不少爬虫进阶、逆向相关文章，为实现从易到难全方位覆盖，特设【0基础学爬虫】专栏，帮助小白快速入门爬虫，本期为代理的基本使用。 代理概述 ip地址是一个唯一地址，它用于标识 ......
Excel同一工作簿中引用不同sheet数据，点击后引用失效
电源时序sheet中要引用电源质量sheet中的B6单元格数据， 鼠标点击之后，电源时序sheet中的数据就变成了=电源质量!B6，且不能恢复为ABCD。如下 原因：单元格格式不能是文本，只能是常规。引用才能一直有效。 ......
mongo-listener: 监听 mongo 数据变化的一个应用程序相关设计
mongo-listener 为了开放一些数据库变更信息, 需要监听数据库的数据变更, 之后将信息投递到信息队列中, 开放对应的端口, 供其他系统订阅. mongo 数据变更监听 对于数据库信息的变更, 或者说是数据异构, 也就是当数据源数据变更时, 另一个数据源可以接收到相关的变更信息进行处理, ......
mysql关联表查询最新的数据
mysql关联表查询最新的数据 select it.name,ns.id,it.id childId,it.id_card idCard,it.card_type cardType,it.birthday,ns.guardian guardian,ns.mother_phone motherPhon ......
《Spectral–Spatial Morphological Attention Transformer for Hyperspectral Image Classification》论文笔记
论文作者：Swalpa Kumar Roy， Ankur Deria， Chiranjibi Shah， et al. 论文发表年份：2023 模型简称：morphFormer 发表期刊：IEEE Transactions on Geoscience and Remote Sensing 论文代码： ......