数据 物流技术 数据源 团队
2023数据采集与融合技术作业一
作业①: 1）、作业②: o 要求：用requests和re库方法设计某个商城（自已选择）商品比价定向爬虫，爬取该商城，以关键词“书包”搜索页面的数据，爬取商品名称和价格。 o 输出信息： 排名 学校名称 省市 学校类型 总分 1 清华大学 北京 综合 852.5 2...... 代码： #爬取学校 ......
java--内存与数据结构
JVM 内存划分 栈一种数据结构特点：先进后出(FILO)入栈：把元素放到栈里栈顶：栈中的第一个元素栈底：栈中的最后一个元素出栈：把元素从栈里移除 基本数据类型–值传递 引用类型–地址传递 堆数组在堆中存储 若堆中的内存空间没有被引用的时候，就会变成垃圾，等着垃圾回收器回收 垃圾回收机制 对象在堆中 ......
SQL数据导入出现-----[ERR] 1273 - Unknown collation: 'utf8mb4_0900_ai_ci'
[ERR] 1273 - Unknown collation: 'utf8mb4_0900_ai_ci' 大致原因：sql对应的mysql版本高于当前要导入的mysql库的版本，引发的1273错误。 解决方案： 打开sql文件，将文件中的所有utf8mb4_0900_ai_ci替换为utf8_gen ......
Python 内置数据类型详解
内置数据类型 在编程中，数据类型是一个重要的概念。 变量可以存储不同类型的数据，不同类型可以执行不同的操作。 Python默认内置了以下这些数据类型，分为以下几类： 文本类型：str 数值类型：int、float、complex 序列类型：list、tuple、range 映射类型：dict 集合类 ......
9.21日数据结构练习题
用栈操作去判断一个字符串是不是回文数列 1 #include <iostream> 2 #define MAXSIZE 100 3 using namespace std; 4 //定义一个栈的结构体 5 //包含顶指针，尾指针，长度 6 typedef struct{ 7 char* base; ......
网络技术-IP协议
IP： Internet Protocol 即因特网协议； 网络层位于数据链路层与传输层之间。网络层中包含了许多协议，其中最为重要的就是IP协议。网络层提供了IP路由功能。理解IP路由除了要熟悉IP协议的工作机制之外，还必须理解IP编制以及如何合理地使用IP地址来设计网络。 IP的包结构： IP包头 ......
C语言-数据结构之顺序表
#include <stdio.h> #define N 128 typedef int data_type; typedef struct { data_type data[N]; int last; }sqlist; sqlist * list_create(); int list_show(s ......
深入浅出程序设计竞赛（进阶篇）VO.7 进阶数据结构
第五章 二叉堆 P2168 [NOI2015] 荷马史诗 哈夫曼树 P2827 [NOIP2016 提高组] 蚯蚓 找最长的蚯蚓只需要直到相对大小，其余蚯蚓长度 \(+q\) 等价于新产生的两条蚯蚓长度 \(-q\) 新产生的第一/二条蚯蚓长度分别单调，可以用队列代替堆 时间复杂度 \(O(n\lo ......
拓端tecdat|R语言贝叶斯非参数模型：密度估计、非参数化随机效应meta分析心肌梗死数据|附代码数据
原文链接：http://tecdat.cn/?p=23785 原文出处：拓端数据部落公众号 最近我们被客户要求撰写关于贝叶斯非参数模型的研究报告，包括一些图形和统计输出。 概述 最近，我们使用贝叶斯非参数（BNP）混合模型进行马尔科夫链蒙特卡洛（MCMC）推断。 在这篇文章中，我们通过展示如何使用具 ......
R语言和Stan,JAGS：用rstan,rjags建立贝叶斯多元线性回归预测选举数据|附代码数据
原文链接：http://tecdat.cn/?p=21978 原文出处：拓端数据部落公众号 最近我们被客户要求撰写关于Stan,JAGS的研究报告，包括一些图形和统计输出。 本文将介绍如何在R中用rstan和rjags做贝叶斯回归分析，R中有不少包可以用来做贝叶斯回归分析，比如最早的（同时也是参考文 ......
R语言贝叶斯推断与MCMC：实现Metropolis-Hastings 采样算法示例|附代码数据
原文链接：http://tecdat.cn/?p=21545 原文出处：拓端数据部落公众号 最近我们被客户要求撰写关于贝叶斯推断的研究报告，包括一些图形和统计输出。 示例1：使用MCMC的指数分布采样 任何MCMC方案的目标都是从“目标”分布产生样本。在这种情况下，我们将使用平均值为1的指数分布作为 ......
R语言贝叶斯MCMC：GLM逻辑回归、Rstan线性回归、Metropolis Hastings与Gibbs采样算法实例|附代码数据
原文链接：http://tecdat.cn/?p=23236 原文出处：拓端数据部落公众号 最近我们被客户要求撰写关于贝叶斯MCMC的研究报告，包括一些图形和统计输出。 什么是频率学派？ 在频率学派中，观察样本是随机的，而参数是固定的、未知的数量。 概率被解释为一个随机过程的许多观测的预期频率。 有 ......
2023数据采集与融合技术实践作业一
作业①: 实验要求 o 要求：用requests和BeautifulSoup库方法定向爬取给定网址（http://www.shanghairanking.cn/rankings/bcur/2020 ）的数据，屏幕打印爬取的大学排名信息。 输出信息： 排名 学校名称 省市 学校类型 总分 1 清华大学 ......
mysql查找data数据路径
直接在MySQL运行代码 show global variables like "%datadir%"; TRANSLATE with x English Arabic Hebrew Polish Bulgarian Hindi Portuguese Catalan Hmong Daw Romani ......
2023数据采集与融合技术实践作业一
作业一 （1）要求：用requests和BeautifulSoup库方法定向爬取给定网址（http://www.shanghairanking.cn/rankings/bcur/2020 ）的数据，屏幕打印爬取的大学排名信息。 代码如下： import requests import urllib. ......
Mysql数据库存储引擎
1.存储引擎的概念 1.1什么是存储引擎 MySQL中的数据用各种不下同的技术存储在文件中，每一种技术都使用不同的存储机制、索引技巧、锁定水平并最终提供不同的功能和能力，这些不同的技术以及配套的功能在MySQL中称为存储引擎。 存储引擎是MySQL将数据存储在文件系统中的存储方式或者存储格式。 存储 ......
光伏电站 首航、晶福源、英威腾、正泰、三晶、德业、银河耐吉、固德威、古瑞瓦特、正泰、盛能杰、华为、阳光电源、锦浪、阿特斯、艾伏、科士达、派能、易事特、上能、首航、古瑞瓦特、三晶、逆变器数据采集
......
将从hive传到mysql数据库的数据使用Echarts进行可视化
1、使用JDBC连接数据库 //DBUtil.java package org.example; import java.sql.*; public class DBUtils { public static String db_url="jdbc:mysql://node1:3306/transp ......
数据采集和融合实践第一次作业
第一次作业 作业① (1)实验内容 要求：用requests和BeautifulSoup库方法定向爬取给定网址（http://www.shanghairanking.cn/rankings/bcur/2020 ）的数据，屏幕打印爬取的大学排名信息。 ①先观察每个大学的所在的标签元素 可以看到每个学校 ......
PostgreSQL 9.6修改数据存储路径
说明 使用的 PostgreSQL 版本是 9.6 版本的。 实际项目部署过程中，数据库的数据有时候被要求保留5-10年，甚至更久。随着数据量的增大，磁盘占用空间也会随之增大。 当数据库默认的安装路径所在目录的磁盘空间不够大时，可以考虑扩容，或者修改数据库数据存放的路径，将路径指定到一个足够大的磁盘 ......
2023数据采集与融合技术实践作业一
作业①: 要求：用requests和BeautifulSoup库方法定向爬取给定网址（http://www.shanghairanking.cn/rankings/bcur/2020 ）的数据，屏幕打印爬取的大学排名信息。 输出信息： 排名 学校名称 省市 学校类型 总分 1 清华大学 北京 综合 ......
2023数据采集与融合技术实践作业一
代码放在gitee上：https://gitee.com/yangzizizi/crawl_projec.git 作业一 1）用requests和BeautifulSoup库方法定向爬取给定网址的数据，屏幕打印爬取的大学排名信息。 import requests from fake_useragen ......
2023数据采集与融合技术实践作业一
作业① o *要求：*用requests和BeautifulSoup库方法定向爬取给定网址（http://www.shanghairanking.cn/rankings/bcur/2020 ）的数据，屏幕打印爬取的大学排名信息。 o *输出信息：* *排名* *学校名称* *省市* *学校类型* * ......
16-Vue数据监视
我们先探讨一个数据更新时的问题，假设在以下人员列表中，改变"马冬梅"的信息，可以通过什么方法 1）第一种方法（奏效） 数据更新时，方法奏效 this.persons[0].name = "马老师" this.persons[0].age = 50 this.persons[0].sex = "男" ......
对一列数据进行数据清洗
1、将文件中的数据导入进去之后，再创建一个字段名一模一样的表 create table test2(day_id varchar(30),sale_nbr varchar(30),buy_nbr varchar(30),cnt varchar(30),round varchar(30)) row f ......
数据库建表
数据库设计范式：第一范式每一列不能在进行换划分，第二范式每一张表都有自己的使命，且做的事相近。 三大范式：https://pan.baidu.com/s/1YXUpAIwYCOMFO_1kxtOfaQ?pwd=b596 建表准则：主键（一张表必须有主键且自增） 外键 创建人 创建时间（当初创建后不在 ......
2023数据采集与融合技术实践作业一_by liyishui
作业1 要求 用requests和BeautifulSoup库方法定向爬取给定网址（http://www.shanghairanking.cn/rankings/bcur/2020 ）的数据，屏幕打印爬取的大学排名信息。 输出信息 Code from bs4 import BeautifulSoup ......
2023数据采集与融合技术实践作业一
作业一 爬取的大学排名信息 import requests import pandas as pd from lxml import etree url='http://www.shanghairanking.cn/rankings/bcur/2020' headers = { 'cookie':' ......
2023数据采集与融合技术实践作业一
作业① 实验要求 o 要求：用requests和BeautifulSoup库方法定向爬取给定网址（http://www.shanghairanking.cn/rankings/bcur/2020 ）的数据，屏幕打印爬取的大学排名信息。 o 输出信息： 排名 学校名称 省市 学校类型 总分 1 清华大 ......
2023数据采集与融合技术实践作业一
作业1 实验要求 具体要求 用requests和BeautifulSoup库方法定向爬取给定网址的数据，屏幕打印爬取的大学排名信息。 输出信息 排名 学校名称 省市 学校类型 总分 1 清华大学 北京 综合 852.5 2... 具体代码 import bs4 as bs import urllib ......