linux mysql php7 php
Redis跟MySQL的双写问题
本文已收录至Github,推荐阅读 👉 Java随想录 微信公众号:Java随想录 项目中有遇到这个问题,跟MySQL中的数据不一致,研究一番发现这里面细节并不简单,特此记录一下。 写在前面 严格意义上任何非原子操作都不可能保证一致性,除非用阻塞读写实现强一致性,所以缓存架构我们追求的目标是最终一 ......
爬取的数据,存到mysql中、爬虫和下载中间件、加代理,cookie,header,加入selenium、去重规则源码分析(布隆过滤器)、scrapy-redis实现分布式爬虫
# 1 scrapy架构 -爬虫:写的一个个类 -引擎: -调度器:排队,去重 -下载器 -pipline -下载中间件 -爬虫中间件 # 2 命令 -scrapy startproject 项目名 -scrapy gensipder 爬虫名 网址 -scrapy crawl 爬虫名字 -run.p ......
SQL 分类及 mysql安装及卸载注意事项
SQL structural query language 分类 DML 数据操纵语言 data manipulation language insert update delete select DDL 数据定义语言 data definition language create table al ......
Linux服务器编写Shell脚本定时监控Java应用状态以及掉线后的自动重启
1. 编写Shell脚本 #! /bin/sh export JAVA_HOME=/root/jdk1.8.0_361 export CLASSPATH=.:CLASSPATH:$JAVA_HOME/lib/ export PATH=$PATH:$JAVA_HOME/bin proc_name=we ......
二进制安装MySQL
#二进制方式安装MySQL,安装过程如下: #(1)建立MySQL用户账号 首先以root身份登录到Linux系统中,然后执行如下命令创建mysql用户账号: #<==创建mysql用户。 [root@xkf ~]# useradd mysql -s /sbin/nologin -M #(2)下载、 ......
Linux05
大纲 库文件 目标文件的集合(*.o) 静态库和动态库 静态库:类比家用车,将库打包到产品(可执行程序) 动态库:类比F1赛车,运行时才加载到可执行程序 | | 可执行程序大小 | 部署难度 | 升级难度 | | | | | | | 静态库 | 大 | 易 | 难 | | 动态库 | 小 | 难 | ......
Linux06
Linux系统编程 文件 | | 重要 | 难度 | | | | | | 目录流 | 3 | 4 | | 无缓冲IO | 5 | 2 | | IO多路复用 | 5 | 5 | IO多路复用可用于制作即时聊天系统 进程 | | 重要 | 难度 | | | | : | | 虚拟 | 4 | 3 | | ......
MySQL 也可以做全文检索
原来用 MySQL 也可以做全文检索 我是风筝,公众号「古时的风筝」,专注于 Java技术 及周边生态。文章会收录在 JavaNewBee 中,更有 Java 后端知识图谱,从小白到大牛要走的路都在里面。 有朋友聊到他们的系统中要接入全文检索,这让我想起了很久以前为一个很古老的项目添加搜索功能的事儿 ......
Linux 物理内存管理
Linux 物理内存管理 1. 前文回顾 在上篇文章 《深入理解 Linux 虚拟内存管理》 中,笔者分别从进程用户态和内核态的角度详细深入地为大家介绍了 Linux 内核如何对进程虚拟内存空间进行布局以及管理的相关实现。在我们深入理解了虚拟内存之后,那么何不顺带着也探秘一下物理内存的管理呢? 所以 ......
Dbeaver22.0.3 连线配置mysql8版本
编辑驱动 新建连接,选则mysql 库选中本地的jar文件 点击编辑驱动后,选中库页签,添加文件,选中本地jar包 参考 https://www.cnblogs.com/jinci2022/p/16525548.html ......
Linux中使用curl命令报错:解决方法
报错信息: 在下载软件的时候,下载不了,出现未知的错误,以上是报错信息。 报错原因: 1、之前一直使用的是8.8.8.8的域名解析地址,这是Google公开的DNS服务器,以为就可以被解析到。 2、经过看宿主机的网卡DNS服务器,指的是自己的网关,导致没有在/etc/hosts文件里添加解析,解析不 ......
Linux中使用yum安装服务时会报:Existing lock /var/run/yum.pid: another copy is running as pid 3263.:解决方法
报错信息: 在下载服务时,不会显示正常的安装步骤,而是显示以上报错。 报错原因: 1、是因为yum已经在后台运行了,导致进程僵死。 解决方法: 1、把/var/run/yum.pid文件给删掉就好了。 执行命令: [root@k8s-master ~]# rm -rf /var/run/yum.pi ......
pikachu-php反序列化
序列化serialize() 序列化说通俗点就是把一个对象变成可以传输的字符串,比如下面是一个对象: class S{ public $test="pikachu"; } $s=new S(); //创建一个对象 serialize($s); //把这个对象进行序列化 序列化后得到的结果是这个样子的 ......
Ubuntu 20.04 制作Linux系统的qcow2镜像
本篇以制作kali2023操作系统为例,在一台Ubuntu 20.04的服务器上制作2GB内存,30GB硬盘的qcow2镜像,如果是VM虚拟机需要开启CPU硬件虚拟化。 1. 安装依赖软件 apt install qemu-utils virtinst libvirt-dev libvirt-dae ......
0 爬取的数据,存到mysql中 、1 爬虫和下载中间件、 2 加代理,cookie,header,加入selenium、3 去重规则源码分析(布隆过滤器) 、4 scrapy-redis实现分布式爬虫
0 爬取的数据,存到mysql中 # 存到mysql中 class FirstscrapyMySqlPipeline: def open_spider(self, spider): print('我开了') self.conn = pymysql.connect( user='root', pass ......
学习Linux只要学会这个命令就够了!
大家好,我是良许。 这段时间又是搬家,又是找新办公室,现在终于安顿下来了,有时间给大家分享干货了。 今天给大家介绍一个 Linux 超级实用命令,有了这个命令,你就可以愉快使用 Linux 上几乎所有常用命令了,再也不用担心记不住那么多选项啦~ 我们知道,Linux 系统总共有 300~500 个命 ......
PHP一种优雅的为数组的每个元素添加前缀的方法 (PHP 5.3+)
PHP一种优雅的为数组的每个元素添加前缀的方法 (PHP 5.3+): $prefixed_array = preg_filter('/^/', 'prefix_', $array); preg_filter('/ $ /','_ suffix',$ array);` (11认同) preg_fil ......
linux 複製大文件
Linux 如果使用 cp 命令複製大文件,會很慢,複製幾個 G 都要好久,這時候需要用另外一種工具 rsync 去複製;rsync是linux系统下的数据镜像备份工具。使用快速增量备份工具Remote Sync可以远程同步,支持本地复制,或者与其他SSH、rsync主机同步,已支持跨平台,可以在W ......
mysql中explain命令详解
EXPLAIN 命令的作用 模拟Mysql优化器是如何执行SQL查询语句的,从而知道Mysql是如何处理你的SQL语句的。分析你的查询语句或是表结构的性能瓶颈。 mysql> explain select * from tb_user; + + + + + + + + + + + | id | se ......
高效实现 MySQL 与 elasticsearch 的数据同步
注:本文转自:https://www.toutiao.com/article/7206119975793410615/?log_from=8164cd03bb377_1679446916178 MySQL 自身简单、高效、可靠,是又拍云内部使用最广泛的数据库。但是当数据量达到一定程度的时候,对整个 ......
LINUX安装MySQL数据库
一、下载MySQL安装包 进入官网选择需要的版本下载安装包。官网下载地址:官网下载进入下载也如下图: 二、安装MySQL 1、上传安装包值Linux服务器(习惯传至/usr/local,以下都以这个路径为准); #进入local目录 cd /usr/local/ #解压mysql安装包 tar -z ......
在Linux系统中运行Classic AUTOSAR软件系统
“转载自维克多汽车技术(上海)有限公司,作者Vector China” 无论是ADAS/AD软件系统验证的数据回灌训练或并行仿真验证,还是在软件快速迭代中的持续集成与持续测试,都需测试工具满足并行计算和可扩展计算的要求。高性能域控制器通常采用AP(Adaptive AUTOSAR)和CP(Class ......
brew 安装或卸载mysql
卸载: 1) 卸载 mysql brew uninstall mysql 2) 清理缓存 brew cleanup --prune=all mysql 3)删除数据目录 rm -rf /usr/local/var/mysql 安装: 1)安装 mysql brew install mysql 2)启 ......
PHP 超大文件上传解决方案:分片断点上传(一)
PHP用超级全局变量数组$_FILES来记录文件上传相关信息的。 1.file_uploads=on/off 是否允许通过http方式上传文件 2.max_execution_time=30 允许脚本最大执行时间,超过这个时间就会报错 3.memory_limit=50M 设置脚本可以分配的最大 ......
mysql 根据固定字段集合排序
SELECT i.id FROM invite_info i, shop_info s WHERE i.shop_id = s.id ORDER BY FIELD(i.id,435,432,433,436) ......
Linux发布命令随笔
发布步骤,登录后 前端目录:/home/front 后端目录:/home/project 前端发布步骤: 1、删除/home/front/下的vueproject.zip文件 2、删除/home/front/static 下的除了.fy文件 3、把包放到/home/front/ 4、执行修改包文件的 ......
Linux服务器调用外部链接命令
服务器上调用接口命令:curl -H 'Content-Type: application/json' -H 'appKey: 2222' -d '{"userid": "123345","name": w222}' http://接口地址 ......
Linux 磁盘空间莫名被吃掉,该怎么查?
在服务器运维过程中,我们时常会遇到这样的情况,收到服务器磁盘空间告警: 登录服务器,通过df -Hl查看 和告警信息一致,接着我们就是要找到导致磁盘空间满的目录或文件。 如何找到占用空间大的目录或文件? 一种比较笨的方法是,在根目录下,通过du -hs命令,列出各目录所占空间大小 之后再用同样的方法 ......