爬虫 语言 网络
Python异步编程高并发执行爬虫采集，用回调函数解析响应
本文介绍了Python 异步编程技术asyncio ，使用场景，介绍了同步编程，异步编程原理，异步技术的优势，异步语法 async await, 协程，create_task, gather, event loop, asyncio.run() 等，用回调函数callback 来解析响应消息，实... ......
27_linux 网络编程
linux 网络编程 HTTP协议对应于应用层, Socket则是对ICP/IP协议的封装和应用 Socket的出现只是使得程序员更方便地使用ICP/IP协议栈而已,是对ICP/IP协议的抽象,从而形成了我们知道的一些最基本的函数接口，比如 create、listen、connect、accept、 ......
《动手学深度学习 Pytorch版》 7.3 网络中的网络(NiN)
LeNet、AlexNet和VGG的设计模式都是先用卷积层与汇聚层提取特征，然后用全连接层对特征进行处理。 AlexNet和VGG对LeNet的改进主要在于扩大和加深这两个模块。网络中的网络（NiN）则是在每个像素的通道上分别使用多层感知机。 import torch from torch impo ......
Python 和 Selenium 的浏览器爬虫
Selenium 是一款强大的基于浏览器的开源自动化测试工具，最初由 Jason Huggins 于 2004 年在 ThoughtWorks 发起，它提供了一套简单易用的 API，模拟浏览器的各种操作，方便各种 Web 应用的自动化测试。 它的取名很有意思，因为当时最流行的一款自动化测试工具叫做 ......
Python 网络爬取的时候使用那种框架
尽管现代的网站多采取前后端分离的方式进行开发了，但是对直接 API 的调用我们通常会有 token 的限制和可以调用频率的限制。 因此，在一些特定的网站上，我们可能还是需要使用网络爬虫的方式获得已经返回的 JSON 数据结构，甚至是处理已经完成界面展示的数据了。 Selenium 与Beautifu ......
网络技术-网络层：ICMP协议
前言 Internet控制报文协议ICMP(Inter Control Message Protocol) 是网络层的一个重要协议。ICP协议用来在网络设备之间传递各种差错和控制信息，它对于收集各种网络信息、诊断和排除各种网络故障具有至关重要的作用。 简单来说：ICMP协议是一个用于诊断网络故障很好 ......
R语言逻辑回归Logistic选股因素模型交易策略及沪深300指数实证|附代码数据
全文链接：http://tecdat.cn/?p=32071 原文出处：拓端数据部落公众号 最近我们被客户要求撰写关于交易策略的研究报告，包括一些图形和统计输出。 随着中国的证券市场规模的不断壮大、市场创新不断深化、信息披露不断完善、市场监管不断强化，随着现代投资组合理论的发展和计算机技术的进步，投 ......
R语言风险价值：ARIMA，GARCH模型，Delta-normal法滚动估计，预测VaR（Value at Risk）和回测分析花旗公司股票|附代码数据
原文链接：http://tecdat.cn/?p=24492 原文出处：拓端数据部落公众号 介绍 此分析的目的是帮助客户构建一个过程，以在给定时变波动性的情况下正确估计风险价值。风险价值被广泛用于衡量金融机构的市场风险。我们的时间序列数据包括 1258 天的股票收益。为了解释每日收益率方差的一小部分 ......
Python 爬虫使用 Selenium 如何在 WebElement 获得属性
首先，我们需要初始化驱动和指定使用特定的流量器。 代码如下： from selenium import webdriver wd = webdriver.Firefox() 上面的代码可以简单的理解为启动一个 Firefox 的实例。 使用 css 选择器 可以把程序读取的 HTML 理解为一个 D ......
软件定义网络第一次报告
软件定义网络第一次报告 一、SDN实验环境安装 二、SDN拓扑实践 （一）基本要求 代码部分： from mininet.net import Mininet from mininet.node import Controller, RemoteController, OVSController f ......
计算机网络五层协议笔记
应用层： 实现应用与应用之间的互通，在互联网中应用层协议很多，如域名系统DNS，支持万维网应用的 HTTP协议，支持电子邮件的 SMTP协议等等。我们把应用层交互的数据单元称为报文。 传输层： 向两台主机进程之间的通信提供通用的数据传输服务。 运输层主要使用以下两种协议 传输控制协议 TCP（Tra ......
2023 icpc网络赛1 F
2023 icpc网络赛1 F. Alice and Bob 目录2023 icpc网络赛1 F. Alice and BobF F 根据官方题解的自己的理解 ......
C语言 数据类型范围打印
C语言中的数据类型有不同的范围，这些范围可以通过标准库中的头文件 <limits.h> 或 <float.h> 来查看。 测试代码： void limits_test(void) { /* limits.h */ /* bit */ printf("%s=\t+%d\n", STR(CHAR_BIT ......
Symantec GhostCast Server是一款用于网络传输和部署镜像的软件工具 Symantec GhostCast Server命令
Symantec GhostCast Server是一款用于网络传输和部署镜像的软件工具，它提供了一组命令行选项来配置和控制其功能。以下是一些常用的Symantec GhostCast Server命令： ghostsrv -clone: 启动GhostCast Server并允许克隆图像。 gho ......
Text2Cypher：大语言模型驱动的图查询生成
本文的主题是我们认为这个 LLM+ 领域最唾手可得、最容易摘取的果实，Text2Cypher：自然语言生成图查询。输入自然语言，生成相对应的图查询语句，甚至可以直接返回该语句执行结果。 ......
48、基本的网络协议和技术
①、TCP/IP TCP/IP是internet的最基本协议，由应用层、传输层、网络层和网络访问层组成。 #应用层的协议主要有Telnet、FTP、SMTP等，这些协议是用来接收来自传输层的数据或者按不同应用要求与方式将数据传输至传输层。 #传输层的主要协议有UDP、TCP，这些协议是使用者使用平台 ......
《动手学深度学习 Pytorch版》 7.2 使用块的网络(VGG)
import torch from torch import nn from d2l import torch as d2l 7.2.1 VGG 块 AlexNet 没有提供一个通用的模板来指导后续的研究人员设计新的网络，如今研究人员转向了块的角度思考问题。通过使用循环和子程序，可以很容易地在任何现 ......
Go语言的基本语法
关键字与标识符： 关键字：被赋予了特殊含义的单词，又叫保留字。 Go语言中的关键字一共有 25 个。 标识符定义： （1）Go语言对各种变量、方法、函数等命名时使用的字符序列。 （2）由若干个字母、下划线(_)、和数字组成，且第一个字符必须是字母。 标识符声明： （1）使用标识符之前必须进行声明。 ......
3-web前端 css 网页样式语言，基础语言、盒子模型、浮动
html和css的关系： HTML（HyperText Markup Language，超文本标记语言）是用于创建网页的标准标记语言。它负责定义网页的结构和内容。HTML使用各种标签来包含文本、链接、图 片、视频等元素，并可以与如JavaScript等其他技术结合使用，实现网页的动态功能。 CSS ......
paramiko链接网络设备并导出配置
一. 背景介绍 最近换工作了有一百多台数通设备需要管理,正好本人会一点python就尝试参照网上教程和CATGPT来写一个批量链接设备的脚本 二. parmiko简介 Paramiko实现了SSHv2协议(底层使用cryptography)。我们就可以在Python代码中直接使用SSH协议对远程服务 ......
神经网络案例分析
神经网络（neural network）是一种模拟人脑神经思维方式的数据模型，神经网络有多种，包括BP神经网络、卷积神经网络，多层感知器MLP等，最为经典为神经网络为多层感知器MLP（Multi-Layer Perception），SPSSAU默认使用该模型。类似其它的机器学习模型（比如决策树、随机 ......
MySQL篇：第八章_详解TCL语言
事务 一、含义 事务：一条或多条sql语句组成一个执行单位，一组sql语句要么都执行要么都不执行 二、特点（ACID） A 原子性：一个事务是不可再分割的整体，要么都执行要么都不执行 C 一致性：一个事务可以使数据从一个一致状态切换到另外一个一致的状态 I 隔离性：一个事务不受其他事务的干扰，多个事 ......
对于Istio网络路由链路的理解
背景 最近在看Istio的网络配置，对于里面的几个组件如ingress-gateway、Gateway、VirtualService、DestinationRule和k8s原生的Service间的关系不是很清楚，这里整理以下自己的理解 组件 这里可能陈述不完全正确，属于个人理解 ingress-ga ......
EasyGBS高清、网络化视频的存储要求是一个什么样的
EasyGBS高清、网络化视频的存储要求是一个重要的议题。在当今数字化时代，视频内容的存储需求不断增长，尤其是高清和网络化的视频内容。为了满足这一需求，我们需要确保采用适当的技术和策略来存储和管理这些高清晰度和网络化的视频文件。 1、在了解高清存储系统之前，必须知道什么是高清? 在高清 ......
Whisper + NemoASR + ChatGPT 实现语言转文字、说话人识别、内容总结等功能
引言 2023年，IT领域的焦点无疑是ChatGPT，然而，同属OpenAI的开源产品Whisper似乎鲜少引起足够的注意。 Whisper是一款自动语音识别系统，可以识别来自99种不同语言的语音并将其转录为文字。 如果说ChatGPT为计算机赋予了大脑，那么Whisper则为其赋予了耳朵。 想象一 ......
Java语言基础知识全总结
一．Java的优点 1. 跨平台性。一次编译，到处运行。Java编译器会将Java代码编译成能在JVM上直接运行的字节码文件，C++会将源代码编译成可执行的二进制代码文件，所以C++执行速度快 2. 纯面向对象。Java 所有的代码都必须在类中书写。C++兼具面向对象和面向过程的特点？ 3. Jav ......
ipaddress：Python中网络地址的处理
前言 ipaddress库提供了处理IPv4与IPv6网络地址的类。这些类支持验证，查找网络上的地址和主机，以及其他常见的操作。 本篇，将详细介绍Python中ipaddress库的使用规则。（内容涉及很多计算机网络知识，如果不懂，可以参考书籍《计算机网络》） 地址 一般来说，我们使用ipaddre ......
基于CNN卷积神经网络的调制信号识别算法matlab仿真
1.算法运行效果图预览 2.算法运行软件版本 MATLAB2022A 3.算法理论概述 在无线通信系统中，调制信号的识别是一项重要的任务。通过识别接收到的信号的调制方式，可以对信号进行解调和解码，从而实现正确的数据传输和通信。卷积神经网络（Convolutional Neural Network，C ......