基础 笔记 数据spark
jpa修改操作执行完了，也没报错，但是数据没有进行修改
查询操作正常、修改就不生效 看一下是不是重新创建了一个新的事务、导致数据更新了没有进行事务提交 @Primary @Bean(name =TRANSACTION_MANAGER_NAME ) public DataSourceTransactionManager initDataSourceTran ......
Python3 导入 excel 到 MySQL 数据库
不必细说的背景 最近在做一个 Java 项目，需要处理一批历史数据，由于工具限制，采用了 Python 导入 excel 到数据库的方式。 安装依赖包 pip install pandas pip install sqlalchemy pip install pymysql pip install ......
C语言之PTA刷题（基础编程题目集_函数题）
本题要求实现一个函数，对给定的正整数N，打印从1到N的全部正整数。 #include <stdio.h> void PrintN ( int N ); int main () { int N; scanf("%d", &N); PrintN( N ); return 0; } /* 你的代码将被嵌在 ......
CSS学习笔记
CSS学习笔记 vertical-align vertical-align 属性设置元素的垂直对齐方式。 css中的vertical-align 属性只能用于 行内元素 和 置换元素（例如 图像和表单输入框） ，此属性不继承。 vertical-align的取值:baseline|sub|super ......
构造之法阅读笔记02
这次阅读笔记主要包括整本书前言和概论，我想它必定与所有书的前言和概论一样，告诉我们作者的真是心里写照，以及他想要通过这本书告诉我们的内容。在注册博客园一年多的时间以来，我的粉丝数寥寥无几，当然我也很明白其中的原因。但后来我渐渐的发现，几乎我的每一篇博客都有一个名叫SoftwareTeacher的用户 ......
【python基础】eval的使用
前言 开发的时候，遇到一个标注的json文件中多边形的框的表示，一时忘记不知道如何解析，此处主要使用eval函数，故记录之。 json文件多边形框的描述 "result": [ { "tagtype": "circle_green", "obstructed": false, "labelId": ......
【git基础】git创建空白分支
前言 cmd git clone git@gitlab.xxx.ai:rrr/traffic_light_detection.git cd traffic_light_detection git branch -a git checkout --orphan newbranch git rm -rf ......
2023.3.27阅读笔记
《代码大全》阅读笔记01 欢迎进入软件构建的世界 这章阐述了软件构建的重要性，软件构建大体上就是说具体程序员做的工作，而不是需求收集人员，产品设计人员，业务分析人员，架构设计人员，测试人员，运维人员等做的工作，虽然这些人的工作在整个软件开发生命周期中也非常的重要，但是一个软件开发的最主要的部分却是具 ......
#Python基础 利用Pyinstaller 模块对python代码进行打包exe
一般我们都用 Python 的 Pyinstaller 模块进行打包，这里记录Pyinstaller 模块进行打包。 一：安装 Pyinstaller 模块 pip install PyInstaller 二：打开cmd(win+R) 三：操作 3.1 切换路径（这里示例文件在E盘） 输入E：来切换 ......
Winform中DataGridView设置前景色、单元格背景色、标题栏样式、禁止改变高宽、不显示空白行、清除选中样式、填充数据源、设置标题、设置单列宽度
场景 Winform中使用DataGridView实现加载数据并显示在led大屏中。 需要设置整个DataGridView的前景色、背景色、单元格颜色、标题栏样式、禁止 改变行高、列宽、不显示新增行、取消选中样式等。 注： 博客： https://blog.csdn.net/badao_liuman ......
DolphinDB - 时序数据库 DolphinDB 在台湾永丰金证券的应用
HT经验总结 HT为何在 KDB(Knowledge Data Base) 和 DolphinDB 之间选择DolphinDB？ 学习门槛方面： KDB的学习难度大，开发语言是Q 语言和 K 语言； 而DolphinDB 支持C++、C#、Java、Python、Json等多种语言开发接口 成本方面 ......
三分钟介绍大数据开源软件的内容
在数字化迅猛发展的今天，利用大数据开源软件做好数据管理、助推企业实现数字化转型是大势所趋。今天主要给大家介绍大数据开源软件的产品类型、功能内容等相关知识，如果想要实现数字化转型，想实现企业办公自动化发展，不妨一起来通读这篇文章吧。 1、大数据开源软件的必要性 随着技术解决方案越来越复杂化和多样化，很 ......
Django使用已经存有数据的mysql数据库（搬自简书 LeslieLiang）
由于在django中数据表的操作都是通过models去执行的，所以在你需要使用数据库之前需要在app中的models.py文件中事先去写好需要的表及字段，这是一件比较麻烦的事，那如何在事先没有配置models文件的情况下去对接已经存有数据的数据表呢？ 首先需要将django站点的默认数据库存储引擎修 ......
Python基本知识(编程语言、数据类型、变量与常量、运算符、格式化输出以及解释器)
什么是编程语言？ 编程语言是人类与计算机之间交流的媒介，如Python、go、Java、c语言等等。 什么是编程？ 程序员将自己的逻辑和想法用计算机能够读懂的语言写下来的过程。编程结果是产生一对文件。 Python的八大数据类型概览 1. 字符串string(用来存放文本) # 有四种表现形式 na ......
UE5 使用笔记
场景切换 —— 过场 UI / 动画 EPIC 官方插件：Async Loading Screen 。 登录界面固定视角效果实现方式 在场景中放置一个摄像机，并将其 Auto Activate for Player 设置为 Player0 。 导入外部下载的场景 将下载的场景文件解压后，拷贝到项目的 ......
SpringBoot多数据源（自定义注解，动态数据源，事务实现）
一、数据库配置文件（这里用的是阿波罗配置中心，也可以是application.yml文件） #mysql本地数据源1 spring.datasource.db1.driver-class-name=com.mysql.cj.jdbc.Driver spring.datasource.db1.jdbc ......
MySQL数据库用户管理
一、用户管理 1.1新建用户 CREATE USER '用户名'@'来源地址' [IDENTIFIED BY [PASSWORD] '密码']; ‘用户名’：指定将创建的用户名 ‘来源地址’：指定新创建的用户可在哪些主机上登录，可使用IP地址、网段、主机名的形式，本地用户可用localhost，允许 ......
MySQL数据库的基本管理操作
一、基本概念 1.1库和表 数据库–>数据表–>行（记录）：用来描述一个对象的信息 _____ 列（字段）：用来描述对象的一个属性 1.2常用的数据类型 int ：整型 float ：单精度浮点 4字节32位 double ：双精度浮点 8字节64位 char ：固定长度的字符类型 varchar ......
学习笔记：虚树
有没有种可能，马上就要上考场了，不应该学新的东西（？） 算了，not important。 《不 应 该 学 新 的 东 西》 是谁的模拟赛有动态虚树？ 板子 在某些情况下，我们要考虑的只有关键节点和他们的lca们组成的树。 实现： 先dfs，记录dfn和dep。然后把关键点按照dfn排序一个一个加 ......
判断大量的数据在某个区间？我采用数组排序
新建数组，添加所有的数据与标准值，排序后判断首尾值是否等于标准值，这样就能避免大量的ifelse代码了 十分清爽。 上代码 请大家参考！ ......
网易严选数据湖建设实践
过去几年，数据仓库和数据湖方案在快速演进和弥补自身缺陷的同时，二者之间的边界也逐渐淡化。云原生的新一代数据架构不再遵循数据湖或数据仓库的单一经典架构，而是在一定程度上结合二者的优势重新构建。本文将分享严选的数据湖建设过程和思考。 1. 业务背景 网易严选在 2017 年中开始搭建自己的大数据体系，如 ......
Spark任务调试（Scala开发语言）
// 将dataframe存储到hdfs myDF.write.orc("hdfs://nsxxxx/user/admin/dir") // 读取操作 val mdf = spark.read.orc("hdfs://nsxxxx/user/admin/dir") ......
窥探数据研发中的任务优化策略
本文就目前较为冷门的一些数据任务优化手段做了简单的分析和总结，内容相对比较零散，不会聚焦常用的优化手段（比如小文件合并，数据倾斜等的优化等），只是对一些相对不太常见，但是在研发中又比较重要且有效的方式进行简单的一些沉淀，希望大家批评指正！ 1. 前言 在离线数据研发中，随着业务复杂程度不断增加，数据 ......
【THM】Packets & Frames(了解数据包和帧)-学习
本文相关的TryHackMe实验房间链接：https://tryhackme.com/room/packetsframes 本文相关内容：了解数据如何被分成更小的部分并通过网络传输到另一台设备。 什么是数据包和帧？ 数据包和帧是小块的数据，当它们组合在一起时，就构成了更大的信息或消息；然而，数据包和 ......
基于遗传算法优化BP神经网络（GA-BP）的数据分类预测 matlab代码
基于遗传算法优化BP神经网络（GA-BP）的数据分类预测 matlab代码YID:5429643492784099 ......
数据挖掘（第五周）
import pandas as pd import matplotlib.pyplot as plt inputfile =r"C:\Users\admin\Downloads\original_data.xls" # 输入的数据文件 data = pd.read_excel(inputfile) ......
31、K8S-数据存储之PV、PVC
1、基础知识 1.1、流程梳理 1.1.1、PV-Persistent Volume 之前我们提到的Volume可以提供多种类型的资源存储(可持久或不持久)，但是它定义在Pod上的，是属于"资 源对象"的一部分。工作中的存储资源一般都是独立的，这就是资源对象Persistent Volume(PV) ......
梦断代码读书笔记 3
第四章 乐高王国 梦断代码的第四章作者以乐高王国来命名不能不谓之为贴切，想想小时候玩的积木，我们热衷于把各色各状的小木快组合成形形色色自认为好玩的东西。而将之拉近到我们的编程中来，块化和组件化是软件程序员的梦想，谁都想把几个模块插到一起就能完美的运行并完成任务。王老师在结对作业中提出了一个要求是将地 ......