开发平台 数据 资源 平台
大数据分析与可视化 之 猫眼电影爬虫
大数据分析与可视化 之 猫眼电影爬虫 import random import time import re import requests import csv class MaoyanSpider(object): # 初始化 # 定义初始页面url def __init__(self): se ......
大数据分析与可视化 之 百度图片爬虫
大数据分析与可视化 之 百度图片爬虫 import requests import re from urllib import parse import os import time # Import the time module class BaiduImageSpider(object): d ......
大数据分析与可视化 之 百度贴吧爬虫
大数据分析与可视化 之 百度贴吧爬虫 import csv import datetime import json from urllib import request, parse import time import random from fake_useragent import UserA ......
大数据分析与可视化 之 随堂练习
随堂练习，随手记录 2.ipynb #%% import numpy as np import csv #%% iris_data = [] with open(r'文件地址')as csvfile: csv_reader = csv.reader(csvfile) birth_header = n ......
大数据分析与可视化 之 小说爬虫类
大数据分析与可视化 之 小说爬虫类 import random import requests from lxml import etree import time class WebScraper: def __init__(self, url,output_file): self.url = u ......
大数据分析与可视化 之 实验13 大数据分析与挖掘建模
实验13 大数据分析与挖掘建模 实验学时：2学时 实验类型：验证 实验要求：必修 一、实验目的 掌握使用Numpy、Pandas进行数据建模。 能够利用模型数据进行相关预测分析。 理解数据建模的编程过程。 二、实验要求 通过编程实现使用电信用户数据画像——建立RFM模型对电信电话数据集、短信数据集、 ......
【玩转腾讯混元大模型】怎么说?我用混元AI大模型开发了个IDEA插件
前言 halo 我是杨不易呀，在混元大模型内测阶段就已经体验了一番当时打开页面的时候灵感模块让我大吃一惊这么多角色模型真的太屌了，随后我立马进行了代码处理水平和上下文的效果结果一般般但是到如今混元大模型代码处理水平提升超过 20%，代码处理效果在实测中高于ChatGPT 6.34% HumanEva ......
大数据分析与可视化 之 实验12 Matplotlib绘制图表（二）
实验12 Matplotlib绘制图表（二） 实验学时：2学时 实验类型：验证 实验要求：必修 一、实验目的 掌握Matplotlib的框架及图形属性。 掌握Matplotlib绘制图形的步骤。 掌握Matplotlib绘制柱形图、条形图、饼图、折线图。 掌握Matplotlib绘制散点图、等高线图 ......
大数据分析与可视化 之 实验10 Pandas实现数据分析
实验10 Pandas实现数据分析 实验学时：2学时 实验类型：验证 实验要求：必修 一、实验目的 掌握Pandas的字符串函数。 掌握Pandas 统计汇总函数。 掌握Pandas排序、分组、合并与级联函数。 能利用上述函数进行综合数据分析。 二、实验要求 通过编程实现使用Pandas字符串函数进 ......
大数据分析与可视化 之 实验11 Matplotlib绘制图表（一）
实验11 Matplotlib绘制图表（一） 实验学时：2学时 实验类型：验证 实验要求：必修 一、实验目的 掌握Matplotlib的框架及图形属性。 掌握Matplotlib绘制图形的步骤。 掌握Matplotlib绘制直线、曲线图、折线图。 掌握Matplotlib绘制柱形图、条形图、饼图。 ......
大数据分析与可视化 之 实验09 Pandas函数应用
实验09 Pandas函数应用 实验学时：2学时 实验类型：验证 实验要求：必修 一、实验目的 掌握pandas函数应用的方法：pipe()、apply()和applymap()。 能编写自定义函数。 能使用pandas函数应用调用自定义函数解决数据分析实际问题。 二、实验要求 利用pandas函数 ......
大数据分析与可视化 之 实验08 Pandas字符串和文本处理
实验08 Pandas字符串和文本处理 实验学时：2学时 实验类型：验证 实验要求：必修 一、实验目的 学会正确使用常见的字符串函数 如：len()、find()、strip()、replace()、contains()函数。 解决实际数据中的字符串和文本处理问题。 二、实验要求 使用常见的字符串函 ......
大数据分析与可视化 之 实验06 Pandas缺失值处理
实验06 Pandas缺失值处理 实验学时：2学时 实验类型：验证 实验要求：必修 一、实验目的 掌握判断缺失值、过滤缺失值、填充缺失缺失值等缺失值处理 解决实际数据中的缺失值问题 二、实验要求 使用常见的缺失值处理函数（如：isnull()、notnull()、fillna()、dropna()函 ......
大数据分析与可视化 之 实验07 Pandas合并与级联
实验07 Pandas合并与级联 实验学时：2学时 实验类型：验证 实验要求：必修 一、实验目的 掌握pandas合并/拼接 掌握pandas级联 二、实验要求 利用pandas合并、拼接和级联等知识在PyCharm中编写程序，实现Python数据处理的相关操作。 三、实验内容 任务1.现有如下图的 ......
大数据分析与可视化 之 实验05 Pandas数据读写
实验05 Pandas数据读写 实验学时：2学时 实验类型：验证 实验要求：必修 一、实验目的 学会正确使用常见的I/O API函数。 解决文本文件、CSV文件、Excel文件、网页文件、数据库文件和JSON格式文件数据的读写问题。 二、实验要求 使用常见的I/O API函数（如：read_csv( ......
JAVAScript 跨平台客户端脚本语言
Javascript是一种由Netscape(网景)的LiveScript发展而来的原型化继承的面向对象的动态类型的区分大小写的客户端脚本语言，主要目的是为了解决服务器端语言，JavaScript 的正式名称是 "ECMAScript"。这个标准由 ECMA 组织发展和维护。ECMA-262 的开发 ......
JAVAScript 跨平台客户端脚本语言
Javascript是一种由Netscape(网景)的LiveScript发展而来的原型化继承的面向对象的动态类型的区分大小写的客户端脚本语言，主要目的是为了解决服务器端语言，JavaScript 的正式名称是 "ECMAScript"。这个标准由 ECMA 组织发展和维护。ECMA-262 的开发 ......
大数据分析与可视化 之 实验04 Pandas基础
实验04 Pandas基础 实验学时：2学时 实验类型：验证 实验要求：必修 一、实验目的 1.掌握pandas系列、数据帧和面板的使用 2.掌握pandas基本功能和操作 二、实验要求 Pandas 程序的运行步骤。 2．pandas的数据结构 3．pandas系列、数据帧和面板 pandas基本 ......
大数据分析与可视化 之 实验03 Numpy实现数据分析
实验03 Numpy实现数据分析 实验学时：2学时 实验类型：验证 实验要求：必修 一、实验目的 掌握Numpy的字符串函数 掌握Numpy 统计函数 掌握Numpy排序、分组、线性代数函数 二、实验要求 通过编程实现使用Numpy字符串函数进行文本处理，使用统计函数进行数据分析等常用操作。 三、实 ......
大数据分析与可视化 之 实验02 Numpy创建数组
实验02 Numpy创建数组 实验学时：2学时 实验类型：验证 实验要求：必修 一、实验目的 掌握Numpy创建数组的方法 掌握Numpy ndarray的属性、运算 掌握Numpy迭代数值，修改数组中元素的值 掌握Numpy常用函数的使用方法 二、实验要求 使用Numpy.array的构造函数创建 ......
Python SciPy 空间数据
SciPy 空间数据 https://blog.csdn.net/weixin_64338372/article/details/128675235?ops_request_misc=%257B%2522request%255Fid%2522%253A%25221703817729168002228 ......
大数据分析与可视化 之 实验01 Python爬虫
实验01 Python爬虫 实验学时：2学时 实验类型：验证 实验要求：必修 一、实验目的 理解爬虫技术 掌握正则表达式、网络编程 掌握re、socket、urllib、requests、lxml模块及其函数的使用 二、实验要求 分析所需爬取信息网页的源代码，使用re、socket、urllib、r ......
13PCIE与PL数据交互加速构架方案
软件版本：vitis2021.1(vivado2021.1) 操作系统：WIN10 64bit 硬件平台：适用XILINX A7/K7/Z7/ZU/KU系列FPGA 登录"米联客"FPGA社区-www.uisrc.com视频课程、答疑解惑！ 13.1概述 FPGA硬件加速是FPGA的重要应用，基于P ......
Golang开发环境搭建-Vim篇
本文于2017年3月份完成，发布在个人博客网站上。 考虑个人博客因某种原因无法修复，于是在博客园安家，之前发布的文章逐步搬迁过来。 最近在研究docker的使用方法，恰好手边有一本docker源码分析的书，所以在ubuntu环境下准备了一套golang的开发环境，便于在学习docker使用的时候顺便 ......
07PCIE数据卡BRAM缓存中断采集
软件版本：vitis2021.1(vivado2021.1) 操作系统：WIN10 64bit 硬件平台：适用XILINX A7/K7/Z7/ZU/KU系列FPGA 登录"米联客"FPGA社区-www.uisrc.com视频课程、答疑解惑！ 7.1概述 在方案中，使用基于AXI4实现的FDMA来实现 ......
08PCIE数据卡DDR缓存中断采集
软件版本：vitis2021.1(vivado2021.1) 操作系统：WIN10 64bit 硬件平台：适用XILINX A7/K7/Z7/ZU/KU系列FPGA 登录"米联客"FPGA社区-www.uisrc.com视频课程、答疑解惑！ 8.1概述 上一个例子演示了用BRAM作为数据缓存，显然板 ......
06.流程管理平台
目录 JIRA 管理平台 JIRA 平台管理测试流程 JIRA 管理平台 推荐方案。 定制性很强。 JIRA 中的基本概念 Project 项目 Issue 问题 Field 字段 Workflow 工作流 Screen 视图 JIRA 管理测试用例流程 创建测试用例管理项目。 录入用例。 测试用例 ......
【Python爬虫课程设计】rottentomatoes爬取＋数据可视化
一、选题背景 选择此选题的原因是为了进行电影数据的分析。电影作为一种重要的文化娱乐形式，对社会、经济和文化等方面都有着重要的影响。通过对电影数据的分析，可以揭示电影产业的发展趋势、观众喜好、电影市场的竞争情况等，为电影行业的决策制定提供依据。 二、主题式网络爬虫设计方案 1.主题式网络爬虫名称 Ro ......
05.常用测试平台
常用的测试平台 测试用例管理与 Bug 管理平台。 代码管理平台。 流程管理平台。 测试用例管理平台 JIRA：推荐方案，定制性很强。 RedMine：推荐方案，开源，活跃，定制性很强。 TestLink：流行的测试用例管理平台，体验不太好。 其他：Tapd、云效、禅道、GitLab、在线协作文档。 ......
Java基础-数据类型拓展
数据类型拓展 public class Demo04 { public static void main(String[] args) { //整数拓展： 进制 二进制0b 十进制 八进制0 十六进制0x int a = 0b10; //二进制0b int a1 = 10; //十进制 int a ......