实战 机器 案例 技术
scrapy 请求meta参数使用案例-豆瓣电影爬取
num = 0 ```Python import scrapy from scrapy.http import HtmlResponse from scrapy_demo.items import DoubanItem """ 这个例子主要是学习meta传参。 """ class DoubanSpi ......
秒杀系统核心技术
单就秒杀系统本身而言，就是为应对瞬时高并发、大流量场景而设计的支持高并发、大流量的系统，其背后会涉及到众多高并发、高性能、高可用的技术作为基础保障。同时，在系统中，也要重点突破库存与限购、防刷与风控、数据一致、热点隔离、动静分离、削峰填谷、数据兜底、限流与降级、流控与容灾等核心技术问题。 源码： h ......
[案例]豆瓣电影信息爬取
```Python import json import os import requests from lxml import etree from lxml.etree import _Element class DoubanMovieSpider(object): def __init__(s ......
[案例]贴吧爬取并获取图片
```Python import os import random import re import sys import time import urllib.parse import requests from lxml import etree from lxml.etree import _ ......
【笔记整理】[案例]爱词霸翻译post请求
```Python import json if __name__ == '__main__': import requests resp = requests.post( url="http://ifanyi.iciba.com/index.php?c=trans&m=fy&client=6&au ......
【笔记整理】[案例]使用正则表达式来提取36Kr新闻
```Python import datetime import json import re import requests class Kr36(object): def __init__(self): self.url = "https://36kr.com/information/web_n ......
【笔记整理】[案例]爬取贴吧并保存网页文件
# \[案例]爬取贴吧并保存网页文件 ```python import urllib.parse import requests class TiebaSpider(object): def __init__(self, url, name): self.url = url self.name = ......
【技术积累】JavaScript中的基础语法【三】
博客推行版本更新，成果积累制度，已经写过的博客还会再次更新，不断地琢磨，高质量高数量都是要追求的，工匠精神是学习必不可少的精神。因此，大家有何建议欢迎在评论区踊跃发言，你们的支持是我最大的动力，你们敢投，我就敢肝 ......
刚入职，项目背负技术债怎么办
## 引言 对于程序员来说，技术债这个词应该再熟悉不过了。新入职一个公司后，加入的项目往往或多或少的都会存在技术债，有些是以前的工程师留下的债务，有些是当下开发的需求新产生的，接下来本篇就让我们详细的探索一下技术债这个话题。 ## 什么是技术债 > 第一次交付的代码如同欠债一样，只要能通过重写还清， ......
初识GaussDB——GaussDB的发展历程、部署方式和企业案例
初识GaussDB——GaussDB的发展历程、部署方式和企业案例 姜殿斌2020-02-17 3431 1. GaussDB的命名和品牌 GaussDB 的热点话题 名字的由来：GaussDB是华为数据库产品品牌名，致敬数学家高斯（Gauss） GaussDB 的品类：GaussDB T 和 Ga ......
ChatGPT链接本地数据源实战测试
本文探究ChatGpt等AI机器人能否帮助老板快速的做数据分析？用自然语言同老板进行沟通，满足老板的所有数据分析的诉求？ ......
存储芯片市场与技术分析
存储芯片梳理！ 存储器是用于存储数据的媒介，包括生活中常见的光碟、U盘、移动硬盘、磁带、内存条在内的产品都属于存储器。 存储器的主要功能是存储程序和各种数据，并能在计算机运行过程中高速、自动地完成程序或数据的存取。目前已经发展到日常生活中的各个地方，比如电脑、手机、相机、穿戴式设备、服务器等等 实际 ......
【技术积累】JavaScript中的基础语法【二】
博客推行版本更新，成果积累制度，已经写过的博客还会再次更新，不断地琢磨，高质量高数量都是要追求的，工匠精神是学习必不可少的精神。因此，大家有何建议欢迎在评论区踊跃发言，你们的支持是我最大的动力，你们敢投，我就敢肝 ......
人工智能大语言模型微调技术：SFT 监督微调、LoRA 微调方法、P-tuning v2 微调方法、Freeze 监督微调方法
# 人工智能大语言模型微调技术：SFT 监督微调、LoRA 微调方法、P-tuning v2 微调方法、Freeze 监督微调方法 # 1.SFT 监督微调 ## 1.1 SFT 监督微调基本概念 SFT（Supervised Fine-Tuning）监督微调是指在源数据集上预训练一个神经网络模型， ......
2023-07-16：讲一讲Kafka与RocketMQ中零拷贝技术的运用？
2023-07-16：讲一讲Kafka与RocketMQ中零拷贝技术的运用？ 答案2023-07-16： **什么是零拷贝?** 零拷贝(英语: Zero-copy) 技术是指计算机执行操作时，CPU不需要先将数据从某处内存复制到另一个特定区域。这种技术通常用于通过网络传输文件时节省CPU周期和内存 ......
QT从入门到实战完整版 P19
 模型在翻译干净文本时已被证明是强大的，但它们对输入中的噪声非常敏感**。改进NMT模型的鲁棒性可以看作是对噪声的“域”适应的一种形式。**最近创建的基于噪声文本的机器翻译任务语料库为一些语言对提供了噪声清洁的并行数据，但这些数据在大小和多样性方面非常有限**。最 ......
【专题】2022中国工业机器人市场研究报告PDF合集分享（附原数据表）
报告链接：https://tecdat.cn/?p=33224 本报告合集将基于中国工业产业升级和智能制造的背景，通过对供应端市场和产业链的分析，结合投资视角，探讨工业机器人企业如何增强自身竞争力，推动中国工业产业发展，为企业带来新的增长和转型机会，并从而思考中国工业机器人行业的现状和未来趋势。 在 ......
【专题】2022年中国工业机器人市场白皮书报告PDF合集分享（附原数据表）
报告链接：https://tecdat.cn/?p=33224 本报告合集将基于中国工业产业升级和智能制造的背景，通过对供应端市场和产业链的分析，结合投资视角，探讨工业机器人企业如何增强自身竞争力，推动中国工业产业发展，为企业带来新的增长和转型机会，并从而思考中国工业机器人行业的现状和未来趋势。 在 ......
【技术积累】Vue.js中的事件【一】
博客推行版本更新，成果积累制度，已经写过的博客还会再次更新，不断地琢磨，高质量高数量都是要追求的，工匠精神是学习必不可少的精神。因此，大家有何建议欢迎在评论区踊跃发言，你们的支持是我最大的动力，你们敢投，我就敢肝 ......