备份centos7服务器 数据
【K哥爬虫普法】大众点评VS百度地图，论“数据权属”对爬虫开发的罪与罚！
我国目前并未出台专门针对网络爬虫技术的法律规范，但在司法实践中，相关判决已屡见不鲜，K哥特设了“K哥爬虫普法”专栏，本栏目通过对真实案例的分析，旨在提高广大爬虫工程师的法律意识，知晓如何合法合规利用爬虫技术，警钟长鸣，做一个守法、护法、有原则的技术人员。 案情介绍 被告人：北京百度网讯科技有限公司（ ......
1万条数据只能传值调用存储过程，sql如何优化
1 如果需要传递的数据量比较大，那么在存储过程中使用表变量是一种比较好的选择，而且可以通过以下方式优化： 使用临时表代替表变量 如果从外部获取的数据量较大，可以考虑使用临时表代替表变量。临时表不仅可以存储大量数据，而且可以适应更复杂的数据操作。通过创建索引，可以提高临时表的查询性能。但需要注意的是， ......
怎样实现纯前端百万行数据秒级响应
前端表格控件SpreadJS 推出了新的功能集算表功能。集算表 （Table Sheet）是一个具备高性能渲染、数据绑定功能、公式计算能力的数据表格，通过全新构建的关系型数据管理器结合结构化公式，在高性能表格的基础上提供排序、筛选、样式、行列冻结、自动更新、单元格更新等功能。 什么是集算表（Tabl ......
云服务器部署AI绘图记录
最近AI绘图挺火的，但是我的笔记本配置太差了，我GTX 1050TI跑一个图片要三分钟左右，所以就想到了用云服务器部署体验一下。 腾讯云的GPU服务器有45元15天的，每天只要3元，体验还是不错的。服务器配置用的GN7型号，8核32G内存，显卡是NVIDIA T4，显存16G 系统用的是ubuntu ......
政务服务网站部署哪种SSL证书？
我国高度重视电子政务发展，提出以信息化推进国家治理体系和治理能力现代化，统筹发展电子政务，构建一体化在线服务平台。《关于加快推进全国一体化在线政务服务平台建设的指导意见》《关于加快推进政务服务“跨省通办”的指导意见》等一系列文件相继印发，不断强化数字政府的顶层设计。 网络信息安全建设是政务服务安全运 ......
迁移数据从A表到B表
1.写一个异步线程，同步数据from a -> b2.比对数据的差异性select b.* from A a right join B b on a.xx_id = b.xx_id and b.is_deleted = 0 where a.xx_id is null and b.xx_id is n ......
U盘安装CentOS7
title: U盘安装CentOS7 date: 2022-08-14 16:59:50 tags: Linux CentOS 系统 categories: 运维 系统 keywords: 'Linux,CentOS,U盘' description: U盘安装CentOS7 cover: https ......
wordpress如何能实现直接粘贴把图片上传到服务器中
当前功能基于PHP，其它语言流程大致相同 1.新增上传word json配置 在ueditor\php\config.json中新增如下配置： /* 上传word配置 */ "wordActionName": "wordupload", /* 执行上传视频的action名称 */ "wordFi ......
网络文件共享服务介绍
一：存储架构 根据存储设备所在的位置分类 1、DAS DAS：（Direct-Attached Storage）直连式存储。服务器使用专用线缆（例如SCSI）和存储设备（例如磁盘阵列）进行直连。 特点： 优点是储设备只能连接到一台主机使用，无法共享，成本较高，且安全性可靠性较低 缺点是容量有限，不适 ......
壹沓科技再创高光时刻，荣获“中国美业优秀超自动化服务商”
近期,壹沓科技凭借产品和服务对零售行业的卓越贡献,在美数思享会·2023美业数字生态峰会上,荣获美数思享会中国美妆行业“优秀超自动化服务商”。 壹沓科技新零售事业部副总经理邢小清表示,在人机协作确定性趋势下,未来白领+数字机器人将成为Ofiice主流办公形态,尤其是在需要疾步快跑的零售行业,效率成为 ......
让业务容器化更安全便捷，阿里云容器镜像服务 ACR 推出免费制品中心
将业务进行容器化改造并打包成容器镜像是云原生化实践的第一步，为了使企业开发者更简便地打造云原生应用交付流程，2023 年 1 月，阿里云容器镜像服务 ACR 正式推出“云原生制品中心”， 为容器开发者免费提供了来源于阿里云官方、龙蜥社区的安全可信容器基础镜像。 ......
DELL服务器iDRAC 8 无法启动虚拟控制台，提示"另存为"，“viewerjnlp”
说明：最近刚搞了两台DELL 的服务器，iDRAC8 的版本是Enterprise，点击启动虚拟控制台网页让我下载文件。 因为我平时很少用到iDRAC，以前使用的iDRAC也都是供应商配置好了的，所以这次自己着手配置的时候有点摸不着头脑了。经过排查后终于找到了解决办法，在此分享下，同时也做个记录。 ......
Quicker快速开发，简单的网页数据爬取（示例，获取天眼查指定公司基础工商数据）
前言 有某个线上项目，没有接入工商接口，每次录入公司的时候，都要去天眼查、企查查或者其他公开数据平台，然后手动录入，一两个还好说，数量多了的重复操作就很烦，而且，部分数据是包含超链接，一不注意就点进去，又多了一个步骤。 因此，我就用Quicker写了一个数据抓取脚本，用来抓取一些公开的工商数据，逻辑 ......
Excel同一工作簿中引用不同sheet数据，点击后引用失效
电源时序sheet中要引用电源质量sheet中的B6单元格数据， 鼠标点击之后，电源时序sheet中的数据就变成了=电源质量!B6，且不能恢复为ABCD。如下 原因：单元格格式不能是文本，只能是常规。引用才能一直有效。 ......
udev启动systemd服务并传递内核参数
使用udev规则启动systemd服务并传递内核参数 udev rules 创建udev规则文件/etc/udev/rules.d/99-usb-detect.rules # Media automounting SUBSYSTEM=="block", ACTION=="add",TAG+="sys ......
管理WEB服务器文件的WebDAV协议、Web安全攻击概述
管理WEB服务器文件的WebDAV协议 WEBDAV追加方法 WEBDAV新增状态码 WEBDAV请求实例 QUIC&HTTP3.0 HTTP2.0的问题 队头阻塞 建立连接的握手延迟大 QUIC的特性 0 RTT 没有队头阻塞的多路复用 Web安全攻击概述 Web应用的概念 Web应用是由动态脚本 ......
mongo-listener: 监听 mongo 数据变化的一个应用程序相关设计
mongo-listener 为了开放一些数据库变更信息, 需要监听数据库的数据变更, 之后将信息投递到信息队列中, 开放对应的端口, 供其他系统订阅. mongo 数据变更监听 对于数据库信息的变更, 或者说是数据异构, 也就是当数据源数据变更时, 另一个数据源可以接收到相关的变更信息进行处理, ......
mysql关联表查询最新的数据
mysql关联表查询最新的数据 select it.name,ns.id,it.id childId,it.id_card idCard,it.card_type cardType,it.birthday,ns.guardian guardian,ns.mother_phone motherPhon ......
阿里又开源一款数据同步工具 DataX，稳定又高效，好用到爆！
作者：愿许浪尽天涯 链接：https://juejin.cn/post/7077744714954309669 前言 我们公司有个项目的数据量高达五千万，但是因为报表那块数据不太准确，业务库和报表库又是跨库操作，所以并不能使用 SQL 来进行同步。当时的打算是通过 mysqldump 或者存储的方式 ......
自定义动态数据源
1.思路 1）自定义一个注解 @DataSource，该注解可以加在service层方法或者类上面，表示该方法或者类中的所有方法都是用某一个数据源。 2）如果某个方法上或类上有 @DataSource 注解，将该方法或类需要使用的数据源名称存入到ThreadLocal。 3）自定义切面，在切面中解析 ......
大数据之—dolphinscheduler海豚调度
前言 本文参考：https://blog.csdn.net/zhengzaifeidelushang/article/details/127841043 参考：https://blog.csdn.net/shuyv/article/details/128847853 参考：https://blog. ......
数据仓库SQL代码规范
1.命名规则： 数据库、表、列、索引等名称应使用有意义、易于理解和记忆的命名方式。 应使用小写字母和下划线，避免使用大写字母和特殊字符。 应避免使用保留字和关键字作为名称，或在名称前加上特定前缀或后缀以避免与保留字冲突。 2.编码风格： 应使用一致的缩进、空格、换行等格式规范，以提高代码的可读性。 ......
centos7虚拟机静态ip
1、查看 网关 2、查看ip vi 配置 进入 vi /etc/sysconfig/network-scripts/ifcfg-ens33 （文件后缀可能不一样） 重启网络 systemctl restart network 即可 在xshell 或 finalshell 测试，也可连接。 参考 h ......
Redis保证缓存数据和数据库一致
1 Redis 在分布式环境下的数据一致性主要是通过以下几种方式来保证的： 主从复制：Redis 支持主从复制，当主节点有新的数据写入时，会自动同步到从节点，从节点与主节点的数据保持一致。 Sentinel 哨兵：Redis Sentinel 哨兵是 Redis 的高可用性解决方案，通过监控主节点的 ......
审查人员进行数据仓库SQL代码审查的指南
代码规范：审查人员需要确保SQL代码符合团队的代码规范。这包括代码缩进、代码注释、命名规则等。 SQL性能：审查人员需要检查SQL查询的性能。这包括检查是否使用了索引、是否存在冗余计算、是否使用了正确的连接方式等。 SQL正确性：审查人员需要检查SQL语句的正确性，确保SQL语句执行不会引发错误或意 ......
数据仓库是一个用于存储和管理企业数据的中央存储库，因此需要确保其中的代码质量。以下是几种保证数据仓库代码质量的方法：
代码审查：在数据仓库开发过程中，通过对代码的定期审查来检查潜在的错误和问题，并确保代码符合团队的开发标准和最佳实践。 自动化测试：实现自动化测试是确保代码质量的关键，包括单元测试、集成测试和端到端测试。这些测试可以检测代码的可靠性、性能和安全性等方面的问题，同时还可以快速检测到任何潜在的问题。 代码 ......
Vue2可以检测 引用数据类型 数组的响应式变化
在Vue2中，响应式基于Object.defineProperty实现的响应式，官方文档中明确说明 Vue 不能检测以下数组的变动： 当你利用索引直接设置一个数组项时，例如：vm.items[indexOfItem] = newValue 当你修改数组的长度时，例如：vm.items.length ......
几种高效的方法来进行数据仓库的code review
制定标准和规范： 在开发数据仓库的过程中，制定统一的代码规范和标准，确保所有开发人员都能按照这些规范和标准进行代码开发。这些标准和规范可以包括SQL语法、代码注释、命名规则、代码结构等。 审查指南： 在进行code review时，可以提供一份指南来帮助审查人员进行审查。这份指南可以列出常见的错误类 ......