爬虫 语言 网络
计算机网络 | 自顶向下
1 应用层 1.1 体系结构 1.1.1 客户-服务端体系结构 客户端和服务端通过网络连接进行通信，客户端向服务端发送请求，服务端对请求进行处理，并返回响应；请求和响应数据流向一般都是单向的，服务端在处理请求时，可以访问本地的数据和资源，能够提供更加复杂的服务和功能。 1.1.2 P2P 体系结构 ......
python控制网络继电器
import socket def open_door(rely_host="", rely_port=12345, channel_id=0, timeout=5): try: client = socket.socket(socket.AF_INET, socket.SOCK_STREAM) c ......
基于遗传算法优化的BP神经网络图像分割matlab仿真
1.算法描述 遗传算法（Genetic Algorithm－GA）是一种基于自然选择和基因遗传学原理的优化搜索方法。它将“优胜劣汰，适者生存”的生物进化原理引入待优化参数形成的编码串群体中，按照一定的适配值函数及一系列遗传操作对各个体进行筛选，从而使适配值高的个体被保留下来，组成新的群体，新群体中各 ......
人才及研究方向信息爬取爬虫
人才及研究方向信息爬取爬虫 需求与思路 需求 ： 爬取经济管理相关国家级人才 思路： 1 从title出发，比如中国科学院网站 查看不同学部中院士的介绍 2 分学校，学校官网所在的人才页面，查看相关信息 当前师姐给按着学校分了任务，于是打算先从思路2完成 技术路线 使用 python 爬虫 对结果进 ......
tcp网络编程4—并发的io多路复用实现（fcntl非阻塞）
fcnt_vector_fd.h #ifndef _FCNTL_VECTOR_FD_H #define _FCNTL_VECTOR_FD_H typedef struct{ int *fd; int conter; int max_conter; }VectorFd; extern VectorFd ......
自然语言处理(三国演义)
import codecs import random import re import imageio import jieba.posseg as pseg import matplotlib.pyplot as plt import networkx as nx import wordclou ......
C语言进阶--注释符号
编译器在编译过程中使用空格替换整个注释 字符串字面量中的//和/*....*/不代表注释符号 /*.....*/型注释不能被嵌套 注意：编译器把注释和其他程序元素看作是平等的 注释应该准确易懂，放置二义性，错误的注释有害无利 注释是对代码的提提示，避免臃肿和喧宾夺主 一目了然的代码避免加注释 不要用 ......
C语言进阶--struct和union分析
C语言中的struct可以看作变量的集合 柔性数组即数组大小待定的数组 C语言中可以有结构体产生柔性数组 struct softArray { int len； int arry[];//不占用存储空间 } union只分配最大成员的空间，所有成员共享这个空间 小结： struct中的每个数据成员有 ......
C语言进阶--enum、sizeof、typedef分析
enum用于定义离散值类型，定义的值是真正意义上的常量 sizeof是编译器的内置指示符，不参与程序的执行过程（在编译期间就会进行数组替换） typedef用于给类型重命名（重命的类型可以在typedef语句之后定义） typedef重命名的类型不能被unsigned和signed修饰 int va ......
Debian配置系统中文语言及环境
Debian配置系统中文语言及环境 1，安装语言包 sudo apt install locales 2，配置语言环境 sudo dpkg-reconfigure locales 按下空格即可选择，前面带星号(*)即被选中，通常不需要全部选择安装，选择需要的即可。 3，locale命令基本使用 查看 ......
C.UTF-8和en-US.UTF-8语言环境有什么区别
C.UTF-8和en-US.UTF-8语言环境有什么区别？ 一般来说，C.utf8 是 POSIX 标准兼容的默认语言环境，中的 C 指的是计算机computer。意味着只有严格的ASCII字符才是有效的，扩展后允许基本使用UTF-8。 en_US.utf8=美式英语UTF-8语言环境。en_US指 ......
进阶网络流技巧
零、基本概念 **图的匹配：**选出图上的一些边，使得两个边之间没有公共端点。 **图的独立集：**选出图上的一些点，使得两个点之间没有连边。 **图的点覆盖：**选出图上的一些点，使得每条边都至少有一个端点被选择。 **图的边覆盖：**选出图上的一些边，使得每个点都至少有一条连边被选择。 **闭合 ......
C语言填空：
#include <stdio.h> //从键盘输入一个字符串，将字符串中出现的所有大写字母循环右移5位 【1】 main() { char s[30]; int i=0,n; 【1】; n=strlen(s); while(【1】) { if(【1】) s[i]=s[i]+5; if(【1】) 【 ......
C语言：指针逆序函数
#include <stdio.h> #include <string.h> void reverse(char *str) { int len = strlen(str),i; char temp; for (i = 0; i < len / 2; i++) { temp = str[i]; st ......
C语言：理论知识点
1. && 左边表达式为0，则最后结果为0，右边的表达式不用计算 2. | 左边表达式为1，则最后结果为1，右边的表达式不用计算 3. unsigned 无符号整型 4. int a=4; //二进制： 原码 反码 补码：00000000 00000000 0000000000000100 int ......
C语言：求求e=1/1!+1/2!+1/3!+....+1/n!
#include<stdio.h> // 求e=1/1!+1/2!+1/3!+....+1/n! main() { double e=1,a,s=1; int i; for(i=1;i<=20;i++) { s*=i; a=1/s; e+=a; } printf("%f",e); } ......
网络测试工具之tcping（可以测试能不能ping通端口）
用原生的ping命令，是不能ping测试端口能不能ping通的 1、tcping的介绍 Ping命令可以检查网络的连通性，帮助分析和判定网络故障，是Windows、Unix和Linux系统下的一个命令。有 些网络禁ping，想知道网络和端口的连通性，tcping就是一个不错的选择。而tcping是使 ......
一统天下 flutter - 网络: http 库以及 json 和对象间的转换
一统天下 flutter https://github.com/webabcd/flutter_demo 作者 webabcd 一统天下 flutter - 网络: http 库以及 json 和对象间的转换 示例如下: lib\network\http.dart /* * http 库以及 jso ......
1.1 什么是神经网络
在图中实现输入一个不小与零的房屋大小x经过一个简单神经元得到最终房屋的价格y，且图中蓝色拟合线也是Relu函数的图像 下图中三个圆圈在一个神经网络中也被叫做隐藏单元，可以看到每一个隐藏单元都受是个输入的影响 神经网络只有你喂给他足够多的数据，关于x和y的数据，给到足够的x、y训练样本，神经网络非常善 ......
R语言中贝叶斯网络（BN）、动态贝叶斯网络、线性模型分析错颌畸形数据|附代码数据
全文链接：http://tecdat.cn/?p=22956 最近我们被客户要求撰写关于贝叶斯网络的研究报告，包括一些图形和统计输出。 贝叶斯网络（BN）是一种基于有向无环图的概率模型，它描述了一组变量及其相互之间的条件依赖性。它是一个图形模型，我们可以很容易地检查变量的条件依赖性和它们在图中的方向 ......
R语言用贝叶斯线性回归、贝叶斯模型平均 (BMA)来预测工人工资|附代码数据
全文链接：http://tecdat.cn/?p=24141 最近我们被客户要求撰写关于贝叶斯模型的研究报告，包括一些图形和统计输出。 在本文中，贝叶斯模型提供了变量选择技术，确保变量选择的可靠性。对社会经济因素如何影响收入和工资的研究为应用这些技术提供了充分的机会，同时也为从性别歧视到高等教育的好 ......
R语言独立成分分析fastICA、谱聚类、支持向量回归SVR模型预测商店销量时间序列可视化
全文链接：http://tecdat.cn/?p=31948 原文出处：拓端数据部落公众号 本文利用R语言的独立成分分析（ICA）、谱聚类（CS）和支持向量回归 SVR 模型帮助客户对商店销量进行预测。首先，分别对商店销量的历史数据进行了独立成分分析，得到了多个独立成分；其次，利用谱聚类方法将商店销 ......
中小型企业网络搭建实践
都是一些基础的东西，该标的图中差不多都标注出来了。详细的各个机器的配置放在附页中了。正文简单说下图中没有展现的。 技术组成 路由(静态,策略) ENSP策略路由对于设备本身发出的包是不生效的。刚开始在FW-BJ做了[s:192.168.100.0/24 d:10.0.0.0/24 --> 192.1 ......
如何自己搭建Scrapy爬虫框架
当你学了一段时间爬虫后，就会知道各种功能太多而且麻烦。还不如自己整理个框架方便的多。因此，从开始写爬虫程序开始，就会慢慢的接触到一些有关爬虫的框架、效率提升而且扩展也很方便。接下来我将会以Scrapy爬虫框架将我的学习过程记录下供大家参考指正。 一、安装 $ pip install scrapy 二 ......
Python爬虫完整代码拿走就用
对于新手做Python爬虫来说是有点难处的，前期练习的时候可以直接套用模板，这样省时省力还很方便。 使用Python爬取某网站的相关数据，并保存到同目录下Excel。 直接上代码： import re import urllib.error import urllib.request import ......
几步完成Python爬虫采集附源码
对于长期做爬虫行业的程序员我来说，现在随便编写一个爬虫程序也只是分分钟的事情，这次我编辑一个有关图文采集的爬虫，从试错到下载保存等一些列重点全部都写入下面的文章中希望大家避坑。 这里应用self.log简单的做了一下运行日志的处理和记录！ 几个关键点： 1、常规操作，访问出错重试 这里仅仅是简单的写 ......
R语言中ggplot2绘制柱状图
001、 基础绘图 type <- c('A', 'B', 'C', 'D', 'E', 'F', 'G') nums <- c(10,23,8,33,12,40,60) df <- data.frame(type = type, nums = nums) ## 生成的测试数据框 df ggplot ......
R语言绘图中保持绘图的顺序不发生改变
001、生成测试数据以及测试 library(ggplot2) x <- paste0("s", 1:16) y <- 4:19 dat <- data.frame(x, y) ## 生成测试数据框 dim(dat) head(dat, 3) ggplot(dat,aes(x,y))+ geom_p ......
《网络是怎样连接的》--读书随笔
1.什么是分布架构？ 当性能不足时，使用多台服务器来分担负载的方法更有效。 这种架构统称为分布架构。 2.负载均衡，可以使用DNS服务器来做？ 就是每次，查询www.baidu.com的时候，假设它告诉我们39.0.0.10，39.0.0.20，39.0.0.30 三个地址，我们每次查询的时候，返回 ......