实践

2023数据采集实践二

作业①: 要求:在中国气象网(http://www.weather.com.cn)给定城市集的7日天气预报,并保存在数据库。 文件夹链接:Gitee 代码和运行截图 from bs4 import BeautifulSoup from bs4.dammit import UnicodeDammit ......
数据采集 数据 2023

数据采集与融合技术第二次实践作业

第二次作业 码云连接:https://gitee.com/crazypsz/spider/commit/566b31106cde3cd68bd87c63e851b299542e6565 作业一 实验 要求:在中国气象网(http://www.weather.com.cn)给定城市集的 7日天气预报 ......
数据采集 数据 技术

数据采集实践作业2

数据采集实践作业2 作业一 要求:在中国气象网(http://www.weather.com.cn)给定城市集的7日天气预报,并保存在数据库。 代码和运行截图如下: from bs4 import BeautifulSoup from bs4 import UnicodeDammit import ......
数据采集 数据

深入实践C++11智能指针

目录概念一、std::auto_ptr二、std::unique_ptr常用函数自定义智能指针对象持有的资源的释放函数三、std::shared_ptr常用函数四、std::enable_shared_from_this五、std::weak_ptr常用函数智能指针使用注意事项智能指针的简单实现 概 ......
指针 智能 11

数据采集与融合技术实践第二次作业

作业① 实验要求 ·在中国气象网(http://www.weather.com.cn)给定城市集的7日天气预报,并保存在数据库。 ·Gitee文件夹链接:https://gitee.com/lian111111/crawl_project/tree/master/数据采集与融合技术第二次作业/作业2 ......
数据采集 数据 技术

架构师日记-聊聊开发必掌握的那些实践技能 | 京东云技术团队

本文总结了软件开发过程中经常用到的基础常识,分为基础篇和实践篇两个篇章,其中基础篇中着重讲述了类,方法,变量的命名规范以及代码注释好坏的评判标准。实践篇中从类,方法以及对象三个层面分析了常见的技术概念和落地实践,希望这些常识能够为读者带来一些思考和帮助。 ......
架构 技能 团队 日记 技术

WebRTC 简单入门与实践

一、前言 WebRTC 技术已经广泛在各个行业及场景中被应用,但对多数开发者来说,实时音视频及相关技术却是比较不常接触到的。 做为一名 Web 开发者,WebRTC 这块的概念着实花了不少时间才搞明白,一是 WebRTC 本身有较多的独有概念,二是虽然带“Web”字样,但依赖底层概念和网络却是 We ......
WebRTC

黄金眼PAAS化数据服务DIFF测试工具的建设实践

针对请求场景的多样性和指标服务协议的特殊性,我们实现了面向黄金眼PAAS化数据服务的专用DIFF工具,通过录制线上流量,再回放到测试和线上环境中,对比返回结果,并对请求回放效率和对比结果误报问题做了针对性的优化。这种方式能够保证线上查询场景的全覆盖,减少手动构造请求场景的人工介入,并且提供足够高效的... ......
测试工具 黄金 工具 数据 PAAS

2023数据采集与融合技术实践作业2

2023数据采集与融合技术实践作业2 目录2023数据采集与融合技术实践作业2作业1(1)代码1.1发送请求1.2解析数据1.3创建数据库1.4数据入库(2)心得体会作业2(1)代码2.1发送请求2.2解析json数据2.3连接数据库2.4数据入库(2)心得体会作业3(1)代码3.1发送请求3.2解 ......
数据采集 数据 技术 2023

2023数据采集与融合技术实践作业二

作业① 实验要求 ·在中国气象网(http://www.weather.com.cn)给定城市集的7日天气预报,并保存在数据库。 Gitee作业1链接 实验内容: from bs4 import BeautifulSoup from bs4 import UnicodeDammit import u ......
数据采集 数据 技术 2023

读书实践感悟-《暗时间》

过早退出是失败的根源,从进入专注状态到完全专注,也就是心流状态,会遇到很多问题。 首先是进入状态的这个决定时间段,当你意识到你在无所事事你该开始干一件事情的时候,会有很多干扰的小事积压,或者说,我们的大脑下意识来用这些来逃避痛苦的学习过程。及时享乐是大脑的天性,但当意识到的时候,就应该去做决定了。时 ......
时间

从理论到实践,实时湖仓功能架构设计与落地实战

在上篇文章中,我们向大家解释了为什么实时湖仓是当前企业数字化转型过程中的解决之道,介绍了实时计算和数据湖结合的应用场景。(“数据驱动”时代,企业为什么需要实时湖仓?) 在这篇文章中,我们将详细介绍在数栈实时开发平台内,实时湖仓的功能架构设计和具体实操案例。 功能架构介绍 实时湖仓并不是一个独立的产品 ......
架构 实战 实时 理论 功能

数据采集与融合技术实践第二次作业

作业① 实验要求 ·在中国气象网(http://www.weather.com.cn)给定城市集的7日天气预报,并保存在数据库。 ·Gitee文件夹链接: [https://gitee.com/dong-qi168/sjcjproject/blob/master/作业2/天气] 实验内容 ·代码展示 ......
数据采集 数据 技术

2023数据采集与融合实践作业二

2023数据采集与融合技术实践作业2 作业 ① : 要求:在中国气象网(http://www.weather.com.cn)给定城市集的7日天气预报,并保存在数据库。 码云链接 代码: import requests import urllib.error from bs4 import Beaut ......
数据采集 数据 2023

2023数据采集与融合技术实践作业二

第二次作业 作业1: 要求:在中国气象网(http://www.weather.com.cn)给定城市集的7日天气预报,并保存在数据库。 输出信息:( ) Gitee文件夹链接:https://gitee.com/hong-songyu/crawl_project/tree/master/作业2/2 ......
数据采集 数据 技术 2023

爬虫实践07 | 爬取香港展会客户名单

完整代码 import requests import time import pandas as pd url = 'https://www.globalsources.com/api/gsol-trade-show-bff/hk-online/v1/search-all-exhibitors' ......
爬虫 展会 名单 客户

数据采集与融合实践二

作业一.天气预报 1.内容 代码如下: import requests from bs4 import BeautifulSoup import sqlite3 import logging logging.basicConfig(level=logging.INFO) class WeatherD ......
数据采集 数据

2023数据采集与融合技术实践作业二

第二次作业 一、作业内容 作业①: 要求:在中国气象网(http://www.weather.com.cn)给定城市集的7日天气预报,并保存在数据库。 输出信息: Gitee文件夹链接:第一个作业代码及文件 1)作业代码和图片: 代码内容: import requests from bs4 impo ......
数据采集 数据 技术 2023

Amazon MSK 可靠性最佳实践

1. Amazon MSK介绍 Kafka作为老牌的开源分布式事件流平台,已经广泛用于如数据集成,流处理,数据管道等各种应用中。 亚马逊云科技也于2019年2月推出了Apache Kafka的云托管版本,Amazon MSK(Managed Streaming for Apache Kafka)。相 ......
可靠性 Amazon MSK

Git 流程优化-实践

用 git cz 代替 git commit 操作 全局安装 npm install -g commitizen cz-conventional-changelog npm i -g cz-customizable 写入配置 echo'{ "path": "cz-customizable" }' > ......
流程 Git

数据采集与融合技术实践第二次作业

2023数据采集与融合技术实践作业二 作业①: 要求: 在中国气象网(http://www.weather.com.cn)给定城市集的7日天气预报,并保存在数据库。 输出信息: 序号 地区 日期 天气信息 温度 1 北京 8日(今天) 小雨转晴 ... Gitee文件夹链接 代码: from bs4 ......
数据采集 数据 技术

软件工程实践——四则运算的实现

1、实验任务 (1)学习软件项目的发布 (2)编写简单的四则运算器 2、实验步骤 (1)使用java实现四则运算. . (2)使运算器更符合人的使用逻辑,使用中缀表达式转后缀表达式 中缀表达式转后缀表达式可以通过使用栈来实现。以下是一种算法的步骤: 创建一个空栈和一个空字符串,用于存储运算符和最终的 ......
四则 软件工程 工程 软件

java项目实践-请求转发以及重定向-day18

目录1. 中文乱码问题2. 请求的转发servlet3. 登录后的重定向4 总结 1. 中文乱码问题 创建一个工程secondweb 添加jar包依赖 new servlet web.xml添加servlet 构建配置修改 <?xml version="1.0" encoding="UTF-8"?> ......
项目 java day 18

2023数据采集与融合技术实践作业二

作业① 要求:在中国气象网(http://www.weather.com.cn)给定城市集的7日天气预报,并保存在数据库。 输出信息 Gitee 文件夹链接为:https://gitee.com/zjy-w/crawl_project/tree/master/作业2/1 (1)代码 from bs4 ......
数据采集 数据 技术 2023

2023数据采集与融合技术实践作业二

作业①: * 要求:在中国气象网(http://www.weather.com.cn)给定城市集的7日天气预报,并保存在数据库。 文件夹链接:https://gitee.com/z241842/data-collection-experiment-2/tree/main/作业1 代码 from bs ......
数据采集 数据 技术 2023

数据采集与融合技术实践第二次作业

第二次作业 作业①: 要求: 在中国气象网(http://www.weather.com.cn)给定城市集的7日天气预报,并保存在数据库。 输出信息: Gitee文件夹链接: https://gitee.com/yangxxin/crawl_project/tree/master/实践作业代码/第二 ......
数据采集 数据 技术

词频统计任务编程实践

编写一个MapReduce词频统计程序,你需要使用Hadoop或其他MapReduce框架。以下是一个简单的Python示例,使用Hadoop Streaming来执行词频统计任务。请确保你已经安装了Hadoop和配置了Hadoop Streaming。 假设你已经创建了两个文本文件wordfile ......
词频 任务

2023数据采集与融合技术实践作业二

作业①: 1)、要求:在中国气象网(http://www.weather.com.cn)给定城市集的7日天气预报,并保存在数据库。 题目1链接:题目1 代码如下: from bs4 import BeautifulSoup from bs4 import UnicodeDammit import u ......
数据采集 数据 技术 2023

回归测试的实践与思考

上周写了一篇关于测试过程效率演变的文章,其中聊了很多过程改进的方法。比如:需求阶段应该做好评审和风险预案;研发阶段应该做好质量卡点,持续集成流水线以及为研发自测做好辅助工作;测试阶段的重点是测试计划和质量门禁,同时关注线上的发布质量,通过线上巡检和监控,持续提升测试过程效率和最终的交付质量。 很多时 ......

Linux内核进程管理与调度:策略优化与实践分析

Linux内核进程管理与调度:策略优化与实践分析 原创 李斌 嵌入式悦翔园 2023-05-06 11:40 发表于上海 关注★星标公众号,第一时间获取信息 嵌入式悦翔园 本公众号专注于嵌入式技术,包括但不限于STM32、Arduino、51单片机、物联网、Linux等编程学习笔记,同时,公众号内包 ......
内核 进程 策略 Linux