数据库 笔记 数据mysql
读书笔记——代码大全2
第一章 构建（写代码）是软件开发中非常重要的部分。还引用了一句话，艺术评论家聚在一起总是谈论架构，思想；艺术家聚在一起总是谈论在哪里可以买到便宜的树脂油。） 构建的产品即源代码，是软件唯一的、最准确的说明书。（想到了一句话，程序员就是用代码（语言）说服计算机去做一些事情） 构建（作者不喜欢代码这个词 ......
大数据学习笔记hadoop、hive、java
HDFS伪分布式集群搭建 tar -zxvf hadoop-2.7.7.tar.gzecho $JAVA_HOME/root/software/jdk1.8.0_221#查看loaclhostvim /root/software/hadoop-2.7.7/etc/hadoop/hadoop-env ......
Kafka-数据出现积压的原因以及如何解决积压问题？
Kafka数据积压的原因有很多，比如消费端处理能力不足、生产端消息发送速度过快等。解决方法也有很多，以下是一些常见的解决方法 : 增加分区数：如果数据量很大，合理的增加Kafka分区数是关键。但是分区的数量并不是无限增大的，他是有上限的，一般分区的分区数的数不能大于kafka的broker数。 提高 ......
大数据分析python
# 导库import numpy as npimport pandas as pd # 读取数据data =pd.read_csv('logistics.csv')data.head(10) 思路：直接查看不同公司的数量即可 df1=data.groupby('货运公司名称').size().res ......
Docker中拉取mysql后无法连接
1. 在 Linux 系统中，你可以使用以下命令停止 MySQL 服务： ``` sudo systemctl stop mysql ``` 1. 启动 MySQL 服务，并跳过权限验证： ``` sudo mysqld_safe --skip-grant-tables & ``` 在这个命令中，` ......
代码大全阅读笔记
《代码大全2》是一本非常具有代表性和影响力的软件开发经典著作，由史蒂夫·麦康奈尔（Steve McConnell）所著，第二版于2004年出版。在这本书中，作者对软件开发的各个方面进行了全面、详尽的讲解，内容包括需求分析、设计原则、编码实践、测试策略、维护建议等方面，简直可以说是一本涵盖了所有软件开 ......
数据同步智能化！利用ETLCloud自动化流程实现钉钉OA系统数据自动同步至数仓
钉钉数据同步需求 钉钉是一款企业级通讯和协同办公应用软件，钉钉为企业提供包括聊天、通讯录、日程安排、考勤打卡、审批、通知公告、文件共享、会议等功能，很多企业都在使用钉钉。 很多情况下我们需要把钉钉的数据拉取到数据库中，然后再通过报表工具进行统计分析，实现这种自动化流程通常的做法是写一段 python ......
Kali 用 Wireshark 抓取网络数据包
这个Wireshark是可视化操作工具，可以直接打开。 如下图所示，如果是中文版的，可以直接操作： 如果是英文版的，就点击 Capture 后，选择 Options 打开如下窗口： 以上，我们可以选择 eth0 或 Kiioback:io 进行抓包，这里每个人的接口可能不一样，选择好后点击开始（st ......
MySQL安装
## 一、MySQL在线方式安装 1. 检查自己的电脑是否已经安装MySQL ```sh yum list installed | grep mysql ``` > (如果已经安装，存在安装记录，通过下面命令删除 yum -y remove 版本名称） 2. mysql官网下载mysql-commu ......
备份mysql全量数据库为sql文件
进入数据库bin目录，cmd运行mysqldump -utest -ptest --all-databases > all.sql 备注 -u后面接用户名 -p后面接密码 “>”是方向,这里指从左到右 备份结果：cmd命令行无提示错误即可， 备份结束的SQL文件才会显示文件大小，之前不显示文件大小。 ......
Navicat、SQLyog第一次连接mysql8.0 1251错误
> 引入：第一次连接`mysq`l数据库时，报错`1251`代码错误，这是因为mysql8.0版本的加密规则是`mysql_native_password`,而在mysql8.0版本之后,加密规则是`caching_sha2_password`. # 解决 首先，打开 cmd 命令行，按照一下步骤修 ......
《李斌的笔记》全部文章目录、快速导航、持续更新
SAP开发/业务/方案/问答。我把自己的全部文章都整理成目录，放在这篇文章中以实现快速导航，这样更方便阅读，本章内容持续更新。 ......
【如何三行代码下载指定的股票或者基金数据到pandas中】用pandas做爬虫
import pandas url="http://vip.stock.finance.sina.com.cn/quotes_service/view/cn_bill_sum.php?num=100&page=1&sort=totalvolpct&asc=0&volume=1000000&type= ......
MYSQL常用函数总结
[toc] # 一、数学函数 数学函数主要用于处理数字，包括整型、浮点数等。 ## 计算绝对值 SELECT ABS(-1) AS '求绝对值'; ## 小数取整 ```sql SELECT CEIL( 1.5 ) AS '向上取整1', CEILING( 1.5 ) AS '向上取整2', FLO ......
【阅读笔记】五月
人们总是希望一切的事情都尽在掌握之中，所以总是试图在制定完美计划之后一路顺风顺水地执行下去。但是软件维护是一个提高混乱度（增加熵）的过程，所以出现前进两步，后退一步；甚至前进一步，后退一步都是很正常的。而且随着维护的深入，会发现用在修复原有设计上瑕疵的工作量越来越少，而早期维护活动本身所引起的漏洞的 ......
【阅读笔记】五月.
在设计的过程中，我们要做到自上而下的设计，在设计的每个步骤中，尽可能地使用级别较高的表达方法来表示概念和隐藏细节，直到必要的时候再进一步的细化。文中的这段话让笔者想起SICP中教授们试图传达给学生们的一个屠龙之术——“推迟做出决定的时机，因为只有尽可能地退出做出决定的时机，你之后的行为才不会被当下做 ......
【阅读笔记】五月..
进度落后往往并不是因为大灾难，而通常只是因为那些仅仅会导致延迟半天到一天的事件的堆积最终致使整个进度延期一年。 对于里程碑的确立，必须是具体的，特定的，可度量的事情，能够清晰定义。不能清晰定义的里程碑是难以处理的负担。 关键路径技术是衡量是否延期的重要方法，每个人都要尽量让自己的工作远离关键路径。 ......
数据结构整理
数据结构模板整理，请自取。 ### 线段树 [$\operatorname{Sgt}$](https://www.luogu.com.cn/paste/870hl6p4) [$\operatorname{BIT}$](画大饼) ### 平衡树 [$\operatorname{Treap}$](htt ......
mybatis拦截器实现数据权限
前端的菜单和按钮权限都可以通过配置来实现，但很多时候，后台查询数据库数据的权限需要通过手动添加SQL来实现。 比如员工打卡记录表，有id,name,dpt_id,company_id等字段，后两个表示部门ID和分公司ID。 查看员工打卡记录SQL为：`select id,name,dpt_id,co ......
【阅读笔记】四月.
作者将巴比伦塔失败的原因之一归结于缺乏交流，缺乏组织。而我们能从中得来的教训之一在大型软件开发，要无比重视交流的重要性。本书初版之后四十余年的现在，人们所发明的很多技术和规范很大程度上都是为了加强“交流”，减少不必要的交流，增加交流的效率——团队组织的目的是减少所需的交流和合作的数量。制定规范也是。 ......
阅读笔记 六月
第五章——画蛇添足： 第五章主要阐述了结构师在开发第二个系统时，容易被诱惑开发更多的功能，从而达到不好的效果， 这应该被避免。大部分结构师在开发第一个系统时，由于技术不够成熟，所以他会谨慎仔细地工作。对 于不断产生的装饰和润色功能，大部分都被搁置在一 边，作为“下一个”项目的内容。而在开发第二个系 ......
BBA EDI项目数据库方案开源介绍
近期为了帮助广大用户更好地使用 EDI 系统，我们根据以往的项目实施经验，将成熟的 EDI 项目进行开源。用户安装好知行之桥EDI系统之后，只需要下载我们整理好的示例代码，并放置在知行之桥指定的工作区中，即可开始使用。 今天的文章主要为大家介绍 BBA EDI 项目，了解如何获取开源的项目代码以及如 ......
mysql 8.0.26 my.cnf 配置文件模板
############## [mysqld] basedir = /home/work/mysql_3306 datadir = /home/work/mysql_3306/data tmpdir = /home/work/mysql_3306/tmp pid_file = /home/work/ ......
Django连接mysql数据库
1、在settings.py文件中配置数据库 ，需要提前创建好库，并注册app【python manage.py startapp login 提前创建一个名为"login "的app应用】 2、在login文件夹的models.py中创建一个User表 3. 安装pymysql pip insta ......
Python 基础数据类型
## 基础数据类型 ### 一、数字 ``` 2 是一个整数的例子。 长整数 不过是大一些的整数。 3.23和52.3E-4是浮点数的例子。E标记表示10的幂。在这里，52.3E-4表示52.3 * 10-4。 (-5+4j)和(2.3-4.6j)是复数的例子，其中-5,4为实数，j为虚数，数学中表 ......
linux安装mysql5.7
1.下载mysql，可以直接去下载后利用xftp等工具传输到服务器上，我放在目录/usr/local/文件夹下 ``` wget http://dev.mysql.com/get/Downloads/MySQL-5.7/mysql-5.7.36-linux-glibc2.12-x86_64.tar. ......
pandas 数据分组 -- groupby
groupby: import random import numpy as np random.seed() df = pd.DataFrame({'data':['a', 'a', 'b', 'b', 'a'], 'num':['one', 'two', 'one', 'two', 'one'] ......