数据 物流技术 数据源 团队
大数据分析与可视化 之 爬取小说
大数据分析与可视化 之 爬取小说 import urllib.request import random from bs4 import BeautifulSoup import time def request_html(url): headers={'User-Agent':'Mozilla/5 ......
大数据分析与可视化 之 猫眼电影爬虫
大数据分析与可视化 之 猫眼电影爬虫 import random import time import re import requests import csv class MaoyanSpider(object): # 初始化 # 定义初始页面url def __init__(self): se ......
大数据分析与可视化 之 百度图片爬虫
大数据分析与可视化 之 百度图片爬虫 import requests import re from urllib import parse import os import time # Import the time module class BaiduImageSpider(object): d ......
大数据分析与可视化 之 百度贴吧爬虫
大数据分析与可视化 之 百度贴吧爬虫 import csv import datetime import json from urllib import request, parse import time import random from fake_useragent import UserA ......
大数据分析与可视化 之 随堂练习
随堂练习，随手记录 2.ipynb #%% import numpy as np import csv #%% iris_data = [] with open(r'文件地址')as csvfile: csv_reader = csv.reader(csvfile) birth_header = n ......
大数据分析与可视化 之 小说爬虫类
大数据分析与可视化 之 小说爬虫类 import random import requests from lxml import etree import time class WebScraper: def __init__(self, url,output_file): self.url = u ......
大数据分析与可视化 之 实验13 大数据分析与挖掘建模
实验13 大数据分析与挖掘建模 实验学时：2学时 实验类型：验证 实验要求：必修 一、实验目的 掌握使用Numpy、Pandas进行数据建模。 能够利用模型数据进行相关预测分析。 理解数据建模的编程过程。 二、实验要求 通过编程实现使用电信用户数据画像——建立RFM模型对电信电话数据集、短信数据集、 ......
大数据分析与可视化 之 实验12 Matplotlib绘制图表（二）
实验12 Matplotlib绘制图表（二） 实验学时：2学时 实验类型：验证 实验要求：必修 一、实验目的 掌握Matplotlib的框架及图形属性。 掌握Matplotlib绘制图形的步骤。 掌握Matplotlib绘制柱形图、条形图、饼图、折线图。 掌握Matplotlib绘制散点图、等高线图 ......
网络攻防技术——shellcode编写
实验5：shellcode编写实验 实验内容： shellcode广泛用于许多涉及代码注入的攻击中。编写shellcode是相当有挑战性的。虽然我们可以很容易地从互联网上找到现有的shellcode，但是能够从头开始编写我们自己的shellcode总是令人兴奋的。shellcode中涉及到几种有趣的 ......
大数据分析与可视化 之 实验10 Pandas实现数据分析
实验10 Pandas实现数据分析 实验学时：2学时 实验类型：验证 实验要求：必修 一、实验目的 掌握Pandas的字符串函数。 掌握Pandas 统计汇总函数。 掌握Pandas排序、分组、合并与级联函数。 能利用上述函数进行综合数据分析。 二、实验要求 通过编程实现使用Pandas字符串函数进 ......
大数据分析与可视化 之 实验11 Matplotlib绘制图表（一）
实验11 Matplotlib绘制图表（一） 实验学时：2学时 实验类型：验证 实验要求：必修 一、实验目的 掌握Matplotlib的框架及图形属性。 掌握Matplotlib绘制图形的步骤。 掌握Matplotlib绘制直线、曲线图、折线图。 掌握Matplotlib绘制柱形图、条形图、饼图。 ......
大数据分析与可视化 之 实验09 Pandas函数应用
实验09 Pandas函数应用 实验学时：2学时 实验类型：验证 实验要求：必修 一、实验目的 掌握pandas函数应用的方法：pipe()、apply()和applymap()。 能编写自定义函数。 能使用pandas函数应用调用自定义函数解决数据分析实际问题。 二、实验要求 利用pandas函数 ......
大数据分析与可视化 之 实验08 Pandas字符串和文本处理
实验08 Pandas字符串和文本处理 实验学时：2学时 实验类型：验证 实验要求：必修 一、实验目的 学会正确使用常见的字符串函数 如：len()、find()、strip()、replace()、contains()函数。 解决实际数据中的字符串和文本处理问题。 二、实验要求 使用常见的字符串函 ......
大数据分析与可视化 之 实验06 Pandas缺失值处理
实验06 Pandas缺失值处理 实验学时：2学时 实验类型：验证 实验要求：必修 一、实验目的 掌握判断缺失值、过滤缺失值、填充缺失缺失值等缺失值处理 解决实际数据中的缺失值问题 二、实验要求 使用常见的缺失值处理函数（如：isnull()、notnull()、fillna()、dropna()函 ......
大数据分析与可视化 之 实验07 Pandas合并与级联
实验07 Pandas合并与级联 实验学时：2学时 实验类型：验证 实验要求：必修 一、实验目的 掌握pandas合并/拼接 掌握pandas级联 二、实验要求 利用pandas合并、拼接和级联等知识在PyCharm中编写程序，实现Python数据处理的相关操作。 三、实验内容 任务1.现有如下图的 ......
大数据分析与可视化 之 实验05 Pandas数据读写
实验05 Pandas数据读写 实验学时：2学时 实验类型：验证 实验要求：必修 一、实验目的 学会正确使用常见的I/O API函数。 解决文本文件、CSV文件、Excel文件、网页文件、数据库文件和JSON格式文件数据的读写问题。 二、实验要求 使用常见的I/O API函数（如：read_csv( ......
大数据分析与可视化 之 实验04 Pandas基础
实验04 Pandas基础 实验学时：2学时 实验类型：验证 实验要求：必修 一、实验目的 1.掌握pandas系列、数据帧和面板的使用 2.掌握pandas基本功能和操作 二、实验要求 Pandas 程序的运行步骤。 2．pandas的数据结构 3．pandas系列、数据帧和面板 pandas基本 ......
大数据分析与可视化 之 实验03 Numpy实现数据分析
实验03 Numpy实现数据分析 实验学时：2学时 实验类型：验证 实验要求：必修 一、实验目的 掌握Numpy的字符串函数 掌握Numpy 统计函数 掌握Numpy排序、分组、线性代数函数 二、实验要求 通过编程实现使用Numpy字符串函数进行文本处理，使用统计函数进行数据分析等常用操作。 三、实 ......
大数据分析与可视化 之 实验02 Numpy创建数组
实验02 Numpy创建数组 实验学时：2学时 实验类型：验证 实验要求：必修 一、实验目的 掌握Numpy创建数组的方法 掌握Numpy ndarray的属性、运算 掌握Numpy迭代数值，修改数组中元素的值 掌握Numpy常用函数的使用方法 二、实验要求 使用Numpy.array的构造函数创建 ......
Python SciPy 空间数据
SciPy 空间数据 https://blog.csdn.net/weixin_64338372/article/details/128675235?ops_request_misc=%257B%2522request%255Fid%2522%253A%25221703817729168002228 ......
大数据分析与可视化 之 实验01 Python爬虫
实验01 Python爬虫 实验学时：2学时 实验类型：验证 实验要求：必修 一、实验目的 理解爬虫技术 掌握正则表达式、网络编程 掌握re、socket、urllib、requests、lxml模块及其函数的使用 二、实验要求 分析所需爬取信息网页的源代码，使用re、socket、urllib、r ......
13PCIE与PL数据交互加速构架方案
软件版本：vitis2021.1(vivado2021.1) 操作系统：WIN10 64bit 硬件平台：适用XILINX A7/K7/Z7/ZU/KU系列FPGA 登录"米联客"FPGA社区-www.uisrc.com视频课程、答疑解惑！ 13.1概述 FPGA硬件加速是FPGA的重要应用，基于P ......
07PCIE数据卡BRAM缓存中断采集
软件版本：vitis2021.1(vivado2021.1) 操作系统：WIN10 64bit 硬件平台：适用XILINX A7/K7/Z7/ZU/KU系列FPGA 登录"米联客"FPGA社区-www.uisrc.com视频课程、答疑解惑！ 7.1概述 在方案中，使用基于AXI4实现的FDMA来实现 ......
08PCIE数据卡DDR缓存中断采集
软件版本：vitis2021.1(vivado2021.1) 操作系统：WIN10 64bit 硬件平台：适用XILINX A7/K7/Z7/ZU/KU系列FPGA 登录"米联客"FPGA社区-www.uisrc.com视频课程、答疑解惑！ 8.1概述 上一个例子演示了用BRAM作为数据缓存，显然板 ......
【Python爬虫课程设计】rottentomatoes爬取＋数据可视化
一、选题背景 选择此选题的原因是为了进行电影数据的分析。电影作为一种重要的文化娱乐形式，对社会、经济和文化等方面都有着重要的影响。通过对电影数据的分析，可以揭示电影产业的发展趋势、观众喜好、电影市场的竞争情况等，为电影行业的决策制定提供依据。 二、主题式网络爬虫设计方案 1.主题式网络爬虫名称 Ro ......
Java基础-数据类型拓展
数据类型拓展 public class Demo04 { public static void main(String[] args) { //整数拓展： 进制 二进制0b 十进制 八进制0 十六进制0x int a = 0b10; //二进制0b int a1 = 10; //十进制 int a ......
Java基础-数据类型
数据类型 强类型语言 要求变量的使用要严格符合规定，所有变量都必须先定义后才能使用。 弱类型语言 要求变量的使用可以不符合规定，所有变量都必须先定义后才能使用。 Java的数据类型分为两大类 基本类型（primitive type） 引用类型（reference type） public class ......
04.测试技术体系
目录 软件测试分类 分层测试体系 软件测试分类 @startmindmap scale 10 * 软件测试分类 ** 按开发阶段分类 *** 单元测试 *** 集成测试 *** 系统测试 **** 功能测试 **** 兼容性测试 **** 性能测试 **** 安全测试 *** 验收测试 **** α ......
【Python数据分析课程设计】大数据分析——YouTube视频趋势分析
一、选题的背景 背景：Python是一种功能强大的编程语言，广泛应用于数据科学和数据分析领域。在当今的数字时代，视频分享平台如YouTube已成为信息传播和内容创作的重要渠道。越来越多的YouTubers（YouTube创作者）致力于通过数据驱动的方法来优化他们的创作策略，以吸引更多的观众和提升视频 ......