基础 笔记 数据spark
路由基础
路由协议基础知识 什么是路由？ 路由是指导IP报文发送的路径信息。路由表只存在于终端计算机、路由器和三层交换机中，二层交换机中不存在路由表。 IP路由过程 路由器关键功能 检查数据包的目的地 确定信息源 发现可能的路由 选择最佳路由 验证和维护路由信息 路由表 一条路由信息三要素:目的地/掩码、出接 ......
Goalng：基础复习一遍过
Go（又称Golang）是Google开发的一种静态强类型、编译型、并发型，并具有垃圾回收功能的编程语言。 剖析 Hello world 新建文件 main.go 写入以下内容： package main import "fmt" func main() { fmt.Println("Hello W ......
子组件传递数据给父组件的三种方法
1.props <template> <!-- App.vue --> <div id="app"> <!-- 向子组件中传入函数 --> <Student :receive="receive"></Student> </div> </template> <script> import Studen ......
表格 表格 编辑之间数据联动需要注意的事项
1. let newList = JSON.parse(JSON.stringify(this.questionsList)) 把要赋值的数据转成json字符串，然后再转成json数据赋值2. newList = [...this.questionsList]如果数组的每项不是对象，可以通过结构赋值 ......
电商产品评论数据情感分析
第一部分：数据处理 代码12-1 评论去重的代码 import pandas as pdimport reimport jieba.posseg as psgimport numpy as np # 去重，去除完全重复的数据reviews = pd.read_csv("D:\大三下大数据分析\第七周 ......
蓝图的使用、g对象、数据库连接池
1 蓝图的使用 # blueprint 翻译过来的，称之为蓝图 # 作用是：之前全在一个py中写flask项目，后期肯定要划分目录 # 不用蓝图，划分目录 no_blueprint_flask # 项目名 src #核心源码位置 __init__.py # 包 里面实例化得到了app对象， mode ......
oracle数据库按用户备份恢复,使用 expdp、impdp
1，在数据库本机执行 su - oracle 切换oracle用户 sqlplys / as sysdba 使用超级用户登select * from dba_directories; 查看管理员目录，一般会存在几个。 2，导出命令， expdp user/passwd@orcl schemas=us ......
g_main_loop 基础用法
/* test.c */ int main(int argc, char const *argv[]) { /* 1.创建一个 GMainLoop 结构体对象，作为一个主事件循环 */ GMainLoop *loop = g_main_loop_new(NULL, FALSE); /* 2.添加超时 ......
Go基础：iota关键字的使用
Go基础：iota关键字的使用 iota介绍 iota是go语言的常量计数器，只能在常量的表达式中使用。 其值从０开始，在const中每新增一行将使得iota计数一次，即iota自己增长１（从这点来看，iota可以看成const块中的行索引，记录行数），其值一直自增１直到遇到下一个const关键字， ......
salesforce学习笔记（1-1）- salesforce apex代码测试类的编写
由于salesforce的硬性要求，salesforce apex代码覆盖率至少要达到75%、且所有的测试方法都成功执行完成，才能正常部署到生产环境。 我理解的编写测试类分为4个步骤： 理解代码逻辑（数据的增删改） 创建测试数据 用测试数据模拟代码逻辑执行 验证结果 案例:某企业员工的薪资组成为Ba ......
Git及Github使用笔记
Git概述 Git是一个免费的、开源的分布式版本控制系统，可以快速高效地处理从小型到大型的各种项目。 Git易于学习，占地面积小，性能极快。它具有廉价的本地库，方便的暂存区域和多个工作流分支等特性。 Git的工作机制 Git和代码托管中心 代码托管中心是基于网络服务器的远程代码仓库，一般我们简单称为 ......
A7--Spark部署
一、版本信息 JDK 1.8 spark 3.2.1 二、安装部署 1）上传解压缩文件 tar -zxvf spark-3.2.1-bin-hadoop3.2.tgz 2）配置环境变量 vim /etc/profile # Spark export SPARK_HOME=/opt/spark-3.2 ......
Grafana+Prometheus监控mysql数据库
在做性能测试的时候难免会被定位搞得晕头转向，那么有一套好的监控系统对于测试来说那就是天眼，今天我们就来搭建一套监控mysql数据库的监控系统 Grafana+Prometheus+MySQL+Mysqld_Exporter。 准备工具： MySQL：5.7 InfluxDB：1.7.9 Grafan ......
A0--集群基础环境
文件下载： ansible_v2.9.9 flink-1.16.0 hadoop-3.1.3 hive-3.1.3 kafka_2.13-3.3.1 python-3.8.10 spark-3.2.1 tools.tgz zookeeper-3.6.3 一、安装并配置ansible自动化工具 1）上 ......
大数据带来新机遇：如何利用大数据技术优化跨境电商运营？
互联网和电商的不断发展，跨境电商已经成为一种全新的商业模式。然而，跨境电商的运营需要面对很多挑战，如物流、支付、语言文化等。如何利用大数据技术优化跨境电商运营成为一个重要的课题。 一、大数据技术在跨境电商中的应用 数据挖掘 数据挖掘是大数据技术的核心之一，它可以对跨境电商的数据进行深入挖掘，帮助企业 ......
初始数据库
数据库 一、数据库管理软件的由来 基于我们之前所学，数据要想永久保存，都是保存于文件中，毫无疑问，一个文件仅仅只能存在于某一台机器上。 如果我们暂且忽略直接基于文件来存取数据的效率问题，并且假设程序所有的组件都运行在一台机器上，那么用文件存取数据，并没有问题。 很不幸，这些假设都是你自己想象出来的， ......
oracle-基础概念
1.数据库启动流程 the spfile or pfile is read oracle instance is started the controfile is read the database is mount datafiles and redo logfile are opened th ......
跨境电商时代的“智慧引擎”：探索大数据如何推动跨境电商发展
如今跨境电商成为了国际贸易领域的一个新热点，而大数据技术的应用，则为跨境电商的发展提供了强大的助力。本文将从大数据的角度探讨如何推动跨境电商的发展，以及大数据技术在跨境电商中的应用。 一、大数据与跨境电商 随着全球化的加速，跨境电商已成为全球贸易的一部分。跨境电商将消费者、企业、政府等各个领域的参与 ......
[小迪安全]笔记 day12、13 MySQL注入
1. 简单案例 1.1 简易代码分析SQL注入原理 http://localhost:8085/sqli-labs/Less-2/index.php?id=2 id=2 正常查询 http://localhost:8085/sqli-labs/Less-2/index.php?id=-2 id=-2 ......
python基础六（函数基础及参数使用）
一、 函数定义 1、什么是函数 函数就相当于具备某一功能的工具 函数的使用必须遵循一个原则： 先定义 后调用2、为何要用函数 代码冗余，程序的组织结构不清晰，可读性差 可维护性、扩展性差3、如何用函数 # 定义函数# 定义的语法 def 函数名(参数1,参数2,...): """文档描述""" 函数 ......
Windows批处理文件初始化数据库
前提是MySQL服务必须启动，Windows添加了MySQL的环境变量。 批处理文件： @ECHO OFF SET dbhost=127.0.0.1 SET dbuser=root SET dbpasswd=root SET dbName=xc_ntpclientmonitor SET sqlfil ......
面向chatgpt.finetune:将一段话转成finetune用的数据
Crafted by Genie You 根据这段话生成finetune json格式的数据源：学‛的主语解决了，那‚学‛的宾语是什么？也就是说，‚君子‛要学什么才能成就‚圣人‛？千古以来，基本所有的解释都把这‚学‛ 当成各种一般技能、学问的学习了。如果真这样，那不妨把‚房中术‛当成宾语，这话就变成 ......
自学Python爬虫笔记（day1）
环境python3.9版本及以上，开发工具pycharm 君子协议：robots.txt协议 规定了网站中哪些数据可以被爬虫爬取哪些不可以被爬虫爬取 下面是我学习的第一个爬虫的开发： from urllib.request import urlopen url = "http://www.baidu ......
力扣---剑指 Offer 41. 数据流中的中位数
如何得到一个数据流中的中位数？如果从数据流中读出奇数个数值，那么中位数就是所有数值排序之后位于中间的数值。如果从数据流中读出偶数个数值，那么中位数就是所有数值排序之后中间两个数的平均值。 例如， [2,3,4] 的中位数是 3 [2,3] 的中位数是 (2 + 3) / 2 = 2.5 设计一个支持 ......
SQL Server 2008 R2安装教程【详细安装笔记】
SQL Server 2008 R2安装教程 ① Microsoft SQL Server2008密钥Developer: PTTFM-X467G-P7RH2-3Q6CG-4DMYBEnterprise: JD8Y6-HQG69-P9H84-XDTPG-34MBB ② Microsoft SQL S ......
selenium Java基础一
1、下载相应的浏览器驱动包 //设置环境变量 System setProperty("webdriver.firefox.marionete","D:\\geckodriver.exe"); //初始化driver WebDriver driver =new FirefoxDriver(); /请求 ......
安装MYSQL_5.0/8.0教程（附数据库和客户端工具下载链接）
1. Mysql5.7下载 网盘下载（推荐）： 链接：https://pan.quark.cn/s/d98d2536f847提取码：kbyN 官网下载： mysql下载地址： https://dev.mysql.com/downloads/windows/installer/8.0.html 跳转到 ......
高效简单的.Net数据库“访问+操作”技术
高效简单的.Net数据库“访问+操作”技术 本文技术源自外企，并已在多个世界500强大型项目开发中运用。 本文适合有初步C#、Linq、Sql知识的同学阅读。 相关技术在IDataAccess接口中提供。 IDataAccess所在的命名空间是：DeveloperSharp.Framework.Qu ......