数据处理 客户端 客户 服务器
Tomcat服务部署及优化
一、Tomcat介绍 1.1 什么是Tomcat Tomcat服务器是一个免费的开放源代码的Web应用服务器，属于轻量级应用服务器，在中小型系统和并发访问用户不是很多的场合下被普遍使用，是开发和调试JSP程序的首选。一般来说，Tomcat虽然和Apache或者Nginx这些Web服务器一样，具有处理 ......
网易严选数据湖建设实践
过去几年，数据仓库和数据湖方案在快速演进和弥补自身缺陷的同时，二者之间的边界也逐渐淡化。云原生的新一代数据架构不再遵循数据湖或数据仓库的单一经典架构，而是在一定程度上结合二者的优势重新构建。本文将分享严选的数据湖建设过程和思考。 1. 业务背景 网易严选在 2017 年中开始搭建自己的大数据体系，如 ......
微服务架构中的链路超时分析
1、前言 1.1 现象（问题） 微服务架构项目落地过程中，开发人员一般都遇到过调用超时问题，大部分时候会出现在feign接口调用上，这是微服务与单体服务最大的区别，单体从来不用考虑服务之间调用因为网络、序列化等因素导致的额外时间损耗问题。很多开发人员在微服务开发中通常会随手设置一个较长超时，原则 ......
Nginx服务优化与防盗链
一、隐藏nginx版本号 1.1查看版本号 方法一：curl命令 可以在 CentOS 中使用命令 curl -I http://192.168.59.118 显示响应报文首部信息。 curl -I http://192.168.59.118 方法二：在网页中查看 1. #切换至html目录，拖一个 ......
利用RAII处理第三方变量
#include <iostream> #include <functional> using F1 = std::function<void()>; using F2 = F1; template <typename T1, typename T2> class RAII { public: RA ......
窥探数据研发中的任务优化策略
本文就目前较为冷门的一些数据任务优化手段做了简单的分析和总结，内容相对比较零散，不会聚焦常用的优化手段（比如小文件合并，数据倾斜等的优化等），只是对一些相对不太常见，但是在研发中又比较重要且有效的方式进行简单的一些沉淀，希望大家批评指正！ 1. 前言 在离线数据研发中，随着业务复杂程度不断增加，数据 ......
web服务器-apache
1 apache简介 讲解apache之前需要首先说明一下几个概念。 HTML 语言 ：超文本标记语言。使用html语言编写的文本叫超文本，“超文本”就是指页面内可以包含图片、链接，甚至音乐、程序等非文字元素。 HTTP 协议：超文本传输协议。HTTP使用统一资源标识符（URL）来建立连接和传输数据 ......
【THM】Packets & Frames(了解数据包和帧)-学习
本文相关的TryHackMe实验房间链接：https://tryhackme.com/room/packetsframes 本文相关内容：了解数据如何被分成更小的部分并通过网络传输到另一台设备。 什么是数据包和帧？ 数据包和帧是小块的数据，当它们组合在一起时，就构成了更大的信息或消息；然而，数据包和 ......
dedecms如何能实现直接粘贴把图片上传到服务器中
由于工作需要必须将word文档内容粘贴到编辑器中使用 但发现word中的图片粘贴后变成了file:///xxxx.jpg这种内容，如果上传到服务器后其他人也访问不了，网上找了很多编辑器发现没有一个能直接解决这个问题 考虑到自己除了工作其他时间基本上不使用windows，因此打算使用nodejs来解决 ......
cassandra在Windows上注册服务
cassandra 在Windows上注册服务 文件夹权限要设置给 Cassandra服务 参考 https://blog.csdn.net/huilan_same/article/details/51836895 https://blog.csdn.net/weixin_42348764/arti ......
Nginx反向代理丢失cookie问题处理
1.host、端口转换，路劲不变，cookie不会丢失location /sjzt { proxy_pass http://127.0.0.1:9081/sjzt;}通过浏览器访问http://127.0.0.1/sjzt时，浏览器正常发送cookie。2.路径发生变化，cookie丢失locati ......
基于遗传算法优化BP神经网络（GA-BP）的数据分类预测 matlab代码
基于遗传算法优化BP神经网络（GA-BP）的数据分类预测 matlab代码YID:5429643492784099 ......
nacos集群无法正确显示服务列表问题
起因是在使用dubbo的过程中，选用的注册中心是nacos，并且使用的nacos集群。 应用启动后，在nacos控制台查看注册的服务列表，包括消费者和服务者，都无法及时刷新。刷新的唯一方式是重启nacos。 后面经过一系列排查，发现我们的nacos集群是三个节点的，这是正常的并且也是nacos推荐的 ......
数据挖掘（第五周）
import pandas as pd import matplotlib.pyplot as plt inputfile =r"C:\Users\admin\Downloads\original_data.xls" # 输入的数据文件 data = pd.read_excel(inputfile) ......
31、K8S-数据存储之PV、PVC
1、基础知识 1.1、流程梳理 1.1.1、PV-Persistent Volume 之前我们提到的Volume可以提供多种类型的资源存储(可持久或不持久)，但是它定义在Pod上的，是属于"资 源对象"的一部分。工作中的存储资源一般都是独立的，这就是资源对象Persistent Volume(PV) ......
数据分析第五周作业
在热水器的使用过程中，热水器的状态会经常发生改变，如开机和关机、由加热转到保温、由无水流到有水流、水温由50℃变为49℃等。而智能热水器在状态发生改变或水流量非零时，每两秒就会采集一条状态数据。由于数据的采集频率较高，并且数据来自大量用户，因此数据总量非常大。本案例对原始数据采用无放回随机抽样法，抽 ......
问题处理分享 SQLSTATE[HY000]: General error: 126 Incorrect
今天网站访问内容页突然报错： SQLSTATE[HY000]: General error: 126 Incorrect key file for table '.\数据库名\qb_cms_content1.MYI'; try to repair it 当mysql的临时文件大小设置太小，或者由于并 ......
phpcms如何能实现直接粘贴把图片上传到服务器中
1.4.2之后官方并没有做功能的改动，1.4.2在word复制这块没有bug，其他版本会出现手动无法转存的情况 本文使用的后台是Java。前端为Jsp（前端都一样，后台如果语言不通得自己做 Base64编码解码） 因为公司业务需要支持IE8 ，网上其实有很多富文本框，效果都很好。 例如www.wan ......
如果要存ip地址，用什么数据类型比较好
当存储IPv4地址时，应该使用32位的无符号整数（UNSIGNED INT）来存储IP地址，而不是使用字符串。 相对字符串存储，使用无符号整数来存储有如下的好处： 节省空间，不管是数据存储空间，还是索引存储空间 便于使用范围查询（BETWEEN...AND），且效率更高 通常，在保存IPv4地址时， ......
batch-file - robocopy 在批处理文件中的标准输出和错误输出
batch-file - robocopy 在批处理文件中的标准输出和错误输出 标签 batch-file robocopy 我用 机器人复制在我的批处理文件中复制文件夹。我希望标准输出转到一个日志文件，错误消息转到另一个日志文件。我尝试了以下方法: robocopy Z\BR "C\WIN" /E ......
多机微服务之-keepalived+虚IP（VIP）实现高可用配置
keepalived+虚IP（VIP）实现高可用配置 这儿就只用了主备机之间的虚似ip跳转 文章内部,转自https://blog.csdn.net/gongquan2008/article/details/127987887 . https://blog.csdn.net/gongquan2008 ......
服务器的环境的搭建
1.nginx环境的搭建 1.1下载nginx mkdir /usr/local/nginx cd /usr/local/nginx 下载nginx-1.14.2.tar.gz的源代码文件：wget http://nginx.org/download/nginx-1.14.2.tar.gz 1.2安 ......
《SQL与数据库基础》23. 读写分离
(读写分离) 本文以 MySQL 为例。以 MyCat 数据库中间件为例，通过 MyCat 来完成读写分离操作。 读写分离 读写分离，简单地说就是把对数据库的读和写操作分开，以对应不同的数据库服务器。主数据库提供写操作，从数据库提供读操作，这样能有效地减轻单台数据库的压力。 通过MyCat可轻易实现 ......
python的datetime日期时间类型字符串转换与处理
1. 时间类型字符串转换成datetime类型 import datetime str1 = "2023-03-27 09:00:00" t = datetime.datetime.strptime(str1, "%Y-%m-%d %H:%M:%S") # 将字符串转换为时间格式 print(t) ......
python连接access数据库
1. 安装pyodbc pip install pyodbc -i https://pypi.douban.com/simple 查看是否电脑有python连接access的数据库驱动 import pyodbc [x for x in pyodbc.drivers() if x.startswit ......
批处理文件自动使用管理员身份运行
由于 net stop autorunclien 在CMD中停止服务是需要管理员权限才可以运行的 以下代码可实现 echo off >nul 2>&1 "%SYSTEMROOT%\system32\cacls.exe" "%SYSTEMROOT%\system32\config\system" if ......
NTP时间服务器
前言 大数据产生与处理系统是各种计算设备集群的，计算设备将统一、同步的标准时间用于记录各种事件发生时序，如E-MAIL信息、文件创建和访问时间、数据库处理时间等。 大数据系统内不同计算设备之间控制、计算、处理、应用等数据或操作都具有时序性，若计算机时间不同步，这些应用或操作或将无法正常进行。 大数据 ......
人大金仓数据库，授权过期替换授权文件
第一种： 移除旧license [kingbase@centos7 V8]$ ll 总用量 4 lrwxrwxrwx. 1 kingbase kingbase 61 11月 14 16:40 ClientTools -> /opt/Kingbase/ES/V8/KESRealPro/V008R006 ......