硬盘 数据linux
如何在Linux环境下配置C/C++环境
##root权限后，使用yum源安装 yum -y install gcc gcc-c++ kernel-devel //安装gcc、c++编译器以及内核文件 ##查看GCC版本，看是否安装成功 gcc -v 出现这个就是安装成功了 ##编译&运行 C文件为：gcc -o 文件名(无后缀) 文件名( ......
C# 连接数据库
一、SQL SERVER 连接字符串语法： 1、SQL SERVER验证（两种写法）（安全连接） string connStr = "Data Source=.;Initial Catalog=DatabaseName;User Id=sa;Password=123"; 或 string connS ......
爬虫最后一天,爬取到的数据存到mysql中，爬虫和下载中间件、加代理、cookie、header、selenium、随机生成uersagent、去重规则源码分析(布隆过滤器)、scrapy-redis实现分布式爬虫、扩展去重规则
==爬到的数据存到mysql中== class FirstscrapyMySqlPipeline: def open_spider(self, spider): print('我开了') self.conn = pymysql.connect( user='root', password="", h ......
Linux文件与文件夹操作
创建文件夹/文件 mkdir 通过mkdir命令可以创建新的目录（文件夹）。 语法：mkdir [-p] [Linux路径] 参数必填，表示Linux路径，即要创建的文件夹的路径，相对或绝对路径即可。 -p选项可选，表示自动创建不存在的父目录，适用于创建连续多层级的目录。 如果想要一次性创建多个层级 ......
多条数据并成一条后合并查询（Power Query）
问题：两表合并，其中一表有重复的数据需要事先求和或合并 let 源 = Excel.CurrentWorkbook(){[Name="表1"]}[Content], 合并查询 = Table.NestedJoin(源, {"订单号"}, 表2, {"订单号"}, "表2", JoinKind.Lef ......
sqlite数据库在close()之后任然不能释放与db文件的连接
conn.Close();conn.Dispose(); 在close和dispose后，必须要加上以下两句代码，让垃圾回收机制启动，否则仍不能释放与db文件的连接 GC.Collect(); GC.WaitForPendingFinalizers(); ......
【linux】新机配置
开启网络 cd /etc/sysconfig/network-scripts/ vi ifcfg-ens33 ... BOOTPROTO=dhcp ... ONBOOT=yes systemctl restart network 安装网络查看工具 yum search ifconfig yum in ......
Linux常用操作命令总结
一、基础知识 1.1 Linux系统的文件结构 /bin 二进制文件，系统常规命令 /boot 系统启动分区，系统启动时读取的文件 /dev 设备文件 /etc 大多数配置文件 /home 普通用户的家目录 /lib 32位函数库 /lib64 64位库 /media 手动临时挂载点 /mnt 手动 ......
本地数据库忘记密码
一、概述 系统：win11 数据库： SQL SERVER 忘记了sa的密码。 二、重置密码 2.1 Windows身份认证登入 2.2 选择账户属性 有机sa,选择属性。 2.3 确认服务器角色 sa一般都是公共角色和系统管理员 2.4 重置密码 直接在密码和确认密码中完成密码重置 2.5 退出登 ......
html_table获取当前数据
<!DOCTYPE html> <html lang="en"> <head> <meta charset="UTF-8"> <title>Title</title> </head> <body> <table border="1px"> <tr id="filed"> <td id="id">ID ......
第7章_InnoDB数据存储结构
1. 数据库的存储结构：页 索引结构给我们提供了高效的索引方式，不过索引信息以及数据记录都是保存在文件上的，确切说是存储在页结构中。另一方面，索引是在存储引擎中实现的，MysQL服务器上的存储引擎负责对表中数据的读取和写入工作。不同存储引擎中存放的格式一般是不同的，甚至有的存储引擎比如Memory都 ......
【Java 并发】【十】【JUC数据结构】【三】LinkedBlockingQueue阻塞队列原理
1 前言 这节我们就来看看LinkedBlockingQueue内部实现的原理。 2 LinkedBlockingQueue的使用 在看原理之前我们先来用一用LinkedBlockingQueue，来体验一下： 2.1 插入数据 public class LinkedBlockingQueueTes ......
大数据面试题集锦-Hadoop面试题(一)
你准备好面试了吗?这里有一些面试中可能会问到的问题以及相对应的答案。 1、集群的最主要瓶颈 磁盘IO 2、Hadoop运行模式 单机版、伪分布式模式、完全分布式模式 3、Hadoop生态圈的组件并做简要描述 Zookeeper：是一个开源的分布式应用程序协调服务,基于zookeeper可以实现同步服 ......
win平台共享网络给linux板卡
对于一些没有带无线网卡的linux板卡，进入系统后想要设置网络会比较麻烦，需要用网线连到路由器上让路由器去分配ip，这样我们才能通过ssh去访问设备，但是如果路由器离我们比较远或者根本没有路由器的时候这个方案是不行的，因此可以用电脑本身的网口来连接，之后共享电脑本身的网络来实现这一目的。 下面记录一 ......
搭建SSH环境 [Arch Linux] [Xshell] [VirtualBox]
#搭建SSH环境 [Arch Linux] [Xshell] [VirtualBox] ###1. 主机ping通虚拟机 网卡1：虚拟机能ping通主机 + 虚拟机能连接外网 网卡2：主机能ping通虚拟机 ###2. 获取虚拟机IP（注意是网卡2的IP，即与主机在同一网关的IP） ifconfig ......
【Java 并发】【十】【JUC数据结构】【二】BlockingQueue阻塞队列原理
1 前言 这节我们就来看看BlockingQueue阻塞队列是什么都有哪些具体实现。 2 BlockingQueue阻塞队列是什么 BlockingQueue阻塞队列，它是一个提供阻塞功能的队列容器。首先它是一个队列容器，能够存储东西，提供数据入队功能，进行数据存入；提供数据取出功能，进行出队，如下 ......
Linux 常用命令
1.wget wget命令的使用 语法格式 wget [options] [url] 使用 -O 选项以其他名称保存下载的文件 wget-Oredis.tar.gzhttps://download.redis.io/releases/redis-6.0.8.tar.gz 使用 -P 选项将文件下载到 ......
linux-socket-kernel-dynamic-debug
Linux socket programming kernel debug kernel debug enviroment setup 参考文章，基于linux5.0.1内核的网络代码环境的构建及内核函数的跟踪 - 莫大少 - 博客园 (cnblogs.com)。思路就是带调试信息编译Linux内核 ......
BlockingQueue读取文本内容，多线程处理数据（线程池版本）
import java.io.BufferedReader; import java.io.FileReader; import java.io.FileWriter; import java.io.IOException; import java.util.concurrent.*; public ......
BlockingQueue读取文本内容，多线程处理数据
现在有一个txt文本，每个文本中每行的内容是：id,商品id。 要求：启动一个线程去读取文本的内容，把每行的内容通过使用BlockingQueue发送到队列里面，然后多线程，最好是10个线程，从BlockingQueue队列里面取出来，将地址作为请求参数，请求api接口，把返回的内容解析出来，把原内 ......
大数据经典论文解读 - S4 + Storm
S4 流式计算的模型是什么样？要解决哪些问题？ S4是如何设计，如何进行分布式计算的？ S4有哪些缺陷？ 在分析海量用户搜索、广告点击行为时，这个处理数据的的需求和MapReduce生成报表类似，但是要求数据统计的反馈时间尽可能短。如果频繁使用MapReduce将不得不面对： 大量“额外开销”Map ......
OS-Linux-Ubuntu22.04x64-Python-C++调用Python缺少Python.h
OS-Linux-Ubuntu22.04x64-Python-C++调用Python缺少Python.h 使用 C 或 C++ 扩展 Python 扩展和嵌入 Python 解释器 Python 3.10.11 Python/C API 参考手册 Python 3.11.3 Python/C API ......
[数据分析与可视化] Python绘制数据地图2-GeoPandas地图可视化
本文主要介绍GeoPandas结合matplotlib实现地图的基础可视化。GeoPandas是一个Python开源项目，旨在提供丰富而简单的地理空间数据处理接口。GeoPandas扩展了Pandas的数据类型，并使用matplotlib进行绘图。GeoPandas官方仓库地址为：GeoPandas ......
精讲MySQL数据库两大知识点：主从复制与读写分离（慕课网没有的，只有哔哩哔哩有的教程）
精讲MySQL数据库两大知识点：主从复制与读写分离 https://www.bilibili.com/video/BV16i4y1g7TF/?spm_id_from=333.337.search-card.all.click&vd_source=177322cf37f4d2f9c779b40ce7a ......
MySQL数据库
数据的基本知识 1.什么是数据库 保存数据的仓库，它体现在我们电脑中，就是一个软件或者文件系统，然后把数据都保存在特殊的文件中。并且需要使用固定的语言(SQL语言/语句)去操作文件中的数据。数据库（DataBase，简称DB） 2.数据库管理系统 管理数据库的大型软件，英文名：DataBase Ma ......
Linux shell command screen All In One
Linux shell command screen All In One
usbserial
USB
usbmodem
......
剑指 Offer 41. 数据流中的中位数
题目链接：剑指 Offer 41. 数据流中的中位数 方法一：插入排序 解题思路 每次添加一个数字时，通过插入排序添加，需要返回中位数时，根据元素个数进行返回。 代码 class MedianFinder { private: vector<int> nums; public: /** initia ......
【Java 并发】【十】【JUC数据结构】【一】CopyOnWriteArrayList原理
1 前言 我们前面看过了volatile、synchronized以及AQS的底层原理，以及基于AQS之上构建的各种并发工具，ReentrantLock、CountDownLatch、Semaphore、CyclicBarrier，那么我们这节该看什么了，是不是要看运用了。在日常的业务编程中经常使用 ......
mysql与redis如何保证数据一致性
1.先更新MySQL数据库，再删除缓存，再从数据库查询到的最新的数据同步到redis。采用最终一致性性策略。 缺点：相较于mq的方式，这种方式由于要查数据库并将最新数据写到redis，可能会造成接口响应速度变慢。 2.更新mysql数据库，再采用mq异步的方式，将数据同步到redis中。 缺点：数据 ......