实践者

2023数据采集与融合技术实践四

一、作业内容 作业①: 要求: 熟练掌握 Selenium 查找HTML元素、爬取Ajax网页数据、等待HTML元素等内容。 使用Selenium框架+ MySQL数据库存储技术路线爬取“沪深A股”、“上证A股”、“深证A股”3个板块的股票数据信息。 候选网站:东方财富网:http://quote. ......
数据采集 数据 技术 2023

2023数据采集与融合技术实践作业四

作业① 要求: 熟练掌握 Selenium 查找 HTML 元素、爬取 Ajax 网页数据、等待 HTML 元素等内容。 使用 Selenium 框架+ MySQL 数据库存储技术路线爬取“沪深 A 股”、“上证 A 股”、“深证 A 股”3 个板块的股票数据信息。 候选网站:东方财富网:http: ......
数据采集 数据 技术 2023

2023数据采集与融合技术实践作业四

作业1: 要求: 熟练掌握 Selenium 查找HTML元素、爬取Ajax网页数据、等待HTML元素等内容。 使用Selenium框架+ MySQL数据库存储技术路线爬取“沪深A股”、“上证A股”、“深证A股”3个板块的股票数据信息。 候选网站:东方财富网:http://quote.eastmon ......
数据采集 数据 技术 2023

数据采集与融合实践第四次实践作业

作业1 Selenium爬取股票信息 Gitte文件夹链接:https://gitee.com/prettykuromi/102102137/tree/master/作业4/问题1 本次作业要爬取“沪深 A 股”、“上证 A 股”、“深证 A 股”3 个板块的股票数据信息,分析url结构, http ......
数据采集 数据

技术教程 | 基于 Web 端的屏幕共享实践

​ 屏幕共享的英文叫做 DesktopSharing,通俗点讲就是将自己电脑的画面分享给其他人, 被分享的可以是整个电脑屏幕、应用程序或者某一个打开的网页等等。 而随着音视频领域的深入发展,完备的功能在用户需求激增的背景下催生,不管是是在学习、生活或是娱乐场景下,屏幕共享作为实现互动的一种方式被越来 ......
技术教程 屏幕 端的 教程 技术

nebula-br local-store 模式,快速搭建主备集群实践

单集群如何快速切换多集群模式?目前,NebulaGraph 集群复制有 3 种方式,如何在当中选中一种合适你的方式来搭建集群呢? ......
集群 local-store nebula-br 模式 nebula

ZEGO 教程 | RTC + AI 视觉的最佳实践(移动端)

​ ​摘要:帮助开发者在音视频场景中快速获得 AI 视觉功能 —— 美颜、滤镜、背景抠图等。 文|即构 Native SDK 开发团队 Z世代作为社会新的消费主力,追求个性、热爱新奇事物,青睐与酷炫新奇的玩法、紧跟娱乐潮流。AI+音视频的结合,作为在音频和视频之外第三个场景玩法创新的支撑点,刚好迎合 ......
视觉 教程 ZEGO RTC AI

技术实践 | 在线 KTV 实现过程(内附demo体验)

​ 你在线上K过歌吗? 在线K歌自2014年兴起以来,已经发展出了无比庞大的用户群体,每两人中就有就有一人体验过在线 K歌,其前景不可小觑。 如此庞大的市场规模,以及音视频技术使用门槛逐步降低的加持,各类在线K歌玩家大幅增加,在K歌赛道大放异彩,对于开发者而言,如何能够快速实现线上 KTV 的场景就 ......
过程 技术 demo KTV

【行云流水线实践】基于“OneBuild”方法对镜像进行快速装箱

在云原生领域,无论使用哪种编排调度平台,Kubernetes,DockerSwarm,OpenShift等,业务都需要基于镜像进行交付,我们在内部实践“Source-to-image”和链式构建,总而总结出“OneBuild”模式。其核心思想是:一处构建,多处使用。 ......
流水线 OneBuild 流水 镜像 方法

卓越五项:卓有成效的管理者5项实践

一、课程导入 发言人 00:10 大家好,欢迎大家来到卓越五项的课堂,这个课叫卓越五项。我有个副标题叫卓有成效的管理者五项实践。一般的管理的课程都是针对我们带团队的管理者。我们这门课是针对182年所有的职场的人士都可以从这门课中得到一些收获。如何让自己变得有效率,而且更加的有效果,是这门课的主题。这 ......
卓有成效 管理者 成效

2023数据采集与融合技术实践作业三

作业①: 要求:指定一个网站,爬取这个网站中的所有的所有图片,例如:中国气象网(http://www.weather.com.cn)。使用scrapy框架分别实现单线程和多线程的方式爬取。 务必控制总页数(学号尾数2位)、总下载的图片数量(尾数后3位)等限制爬取的措施。 输出信息: 将下载的Url信 ......
数据采集 数据 技术 2023

数据采集与融合技术实践作业3

作业要求 一.内容,代码和结果 管道代码如下: # Define your item pipelines here # # Don't forget to add your pipeline to the ITEM_PIPELINES setting # See: https://docs.scra ......
数据采集 数据 技术

数据采集与融合技术实践3

作业要求 码云地址 第一题 pipelines: 单线程 import threading from itemadapter import ItemAdapter import urllib.request import os import pathlib import pymysql from P ......
数据采集 数据 技术

2023数据采集与融合技术实践作业3

2023数据采集与融合技术实践作业3 下面是gitee仓库链接的链接,就不一个一个放在作业内了 唯一链接 作业① 实验要求 指定一个网站,爬取这个网站中的所有的所有图片,例如:中国气象网(http://www.weather.com.cn)。使用scrapy框架分别实现单线程和多线程的方式爬取。 输 ......
数据采集 数据 技术 2023

2023数据采集与融合技术实践作业3

作业①: 要求: 指定一个网站,爬取这个网站中的所有的所有图片,例如:中国气象网(http://www.weather.com.cn)。使用scrapy框架分别实现单线程和多线程的方式爬取。务必控制总页数(学号尾数2位)、总下载的图片数量(尾数后3位)等限制爬取的措施。 输出信息: 将下载的Url信 ......
数据采集 数据 技术 2023

2023数据采集实践作业三

作业1 要求:指定一个网站,爬取这个网站中的所有的所有图片,例如:中国气象网(http://www.weather.com.cn)。使用scrapy框架分别实现单线程和多线程的方式爬取。 务必控制总页数(学号尾数2位)、总下载的图片数量(尾数后3位)等限制爬取的措施。 文件夹链接:https://g ......
数据采集 数据 2023

数据采集-实践3

作业①: ·要求:指定一个网站,爬取这个网站中的所有的所有图片,例如:中国气象网(http://www.weather.com.cn)。使用scrapy框架分别实现单线程和多线程的方式爬取。 -务必控制总页数(学号尾数2位)、总下载的图片数量(尾数后3位)等限制爬取的措施。 ·输出信息: 将下载的U ......
数据采集 数据

2023数据采集与融合技术实践作业3

本次作业的gitee链接:https://gitee.com/guo-hengxin/102102150/tree/master/%E7%AC%AC%E4%B8%89%E6%AC%A1%E4%BD%9C%E4%B8%9A 一.作业1 要求:指定一个网站爬取这个网站的所有图片,如中国气象网,使用scr ......
数据采集 数据 技术 2023

2023数据采集与融合技术实践作业三

作业①: 要求:指定一个网站,爬取这个网站中的所有的所有图片,例如:中国气象网(http://www.weather.com.cn)。使用scrapy框架分别实现单线程和多线程的方式爬取。 务必控制总页数(学号尾数2位)、总下载的图片数量(尾数后3位)等限制爬取的措施。 文件夹链接:https:// ......
数据采集 数据 技术 2023

用结构化思维解一切BUG(2):实践原则

这是本系列文章《用结构化思维解决一切BUG》的第2篇(共3篇),本系列文章主要介绍一种「无需掌握技术细节,只需结构化思维和常识即可解一切BUG的方法」。本文主要介绍该方法的实践原则,共 5 条,30 字,字字值千金! ......
思维 原则 结构 BUG

102102126吴启严数据采集与融合技术实践作业三

作业内容 gitee 代码链接 作业①: 要求: 指定一个网站,爬取这个网站中的所有的所有图片,例如:中国气象网(http://www.weather.com.cn)。使用scrapy框架分别实现单线程和多线程的方式爬取。 –务必控制总页数(学号尾数2位)、总下载的图片数量(尾数后3位)等限制爬取的 ......
数据采集 102102126 数据 技术

2023数据采集与融合技术实践作业三

第三次作业 作业①: 要求:指定一个网站,爬取这个网站中的所有的所有图片,例如:中国气象网(http://www.weather.com.cn)。使用scrapy框架分别实现单线程和多线程的方式爬取。 输出信息: 将下载的Url信息在控制台输出,并将下载的图片存储在images子文件中,并给出截图。 ......
数据采集 数据 技术 2023

iOS 屏幕旋转的实践解析

​ 摘要:如何更灵活便捷的实现自定义屏幕旋转场景,本文带你揭秘! 文|即构 iOS 应用开发团队 屏幕旋转是在视频直播类 APP 中常见的场景,在即构科技之前发布的 Roomkit SDK 中也有屏幕跟随手机自动旋转的场景。 在 Roomkit SDK 自身开发和客户接入的过程中我们也会发现,实现屏 ......
屏幕 iOS

jenkins实践篇(2)—— 自动打tag的可回滚发布模式

大家好,我是蓝胖子,在上一篇我简单介绍了如何基于特定分支做自动编译和发布,在生产环境中,为了更加安全和快速回滚,我采取的是通过对代码打tag的方式来进行部署,下面我将详细介绍整个发布过程的逻辑。 发布与回滚思路 正常功能发布时,是基于master分支发布的,所以我在成功发布后,会将当时的master ......
实践篇 jenkins 模式 tag

数据采集与融合技术实践作业三

数据采集与融合技术实践作业三 gitee仓库链接:gitee仓库链接 102102141 周嘉辉 作业① 指定一个网站,爬取这个网站中的所有的所有图片,例如:中国气象网(http://www.weather.com.cn)。 使用scrapy框架分别实现单线程和多线程的方式爬取。 部分代码: cla ......
数据采集 数据 技术

Callback 的实践

今天遇到一个需求总算是需要使用到callback了, 我记录一下。 需求是: 后台会不定期的产生一条新数据,需要保存到本地文本,前端的UI界面表格里面也得实时的更新展示。 然后我梳理了一下简图: 这种场景最适合使用回调的方式去解决, // 模拟后台发送消息 public class Client { ......
Callback

Go 进阶训练营对标字节跳动2-2级能力模型,实践驱动掌握云计算第一语言

最近整理了下收集的Go学习资料,包含了Go学习社区、入门、进阶、性能优化、面试和Go学习书籍,还是比较全面的,在这里推荐给大家。 废话不多说,先献上Go技能升级地图,自己照着地图修炼 Go学习社区 Golang 中国:国内较早的 Go 社区,汇聚各类信息与服务 Learn Go:比较好的Golang ......
训练营 字节 模型 能力 Go

2023数据采集与融合技术实践作业3

2023数据采集与融合技术实践作业3 gitee仓库链接:https://gitee.com/zhoujingyang0509/crawl_project/tree/master/作业3 作业1 要求: 指定一个网站,爬取这个网站中的所有的所有图片,例如:中国气象网(http://www.weath ......
数据采集 数据 技术 2023

Windows server 2022 安全配置标准 最佳实践指南

Windows server 2022 安全配置标准 最佳实践指南 及时更新操作系统:确保安装Windows Server 2022的最新更新补丁和安全补丁,以修复已知的漏洞和安全问题。 启用Windows Defender防病毒软件:Windows Server 2022内置了Windows De ......
Windows 标准 指南 server 2022

sql server 2012 安全标准和最佳实践指南

sql server 2012 安全标准和最佳实践指南 安装 SQL Server 2012 时,选择安装最新版的服务包和累积更新。同时,安装最新版的 SQL Server Management Studio,以便管理和配置 SQL Server 实例和数据库。 禁用默认 sa 用户,并创建一个具有 ......
安全标准 标准 指南 server 2012