数据结构 算法 素质 结构
大数据经典论文解读 - Kafka - 流批一体架构
Kafka 大数据系统架构是什么样？为什么需要Kafka这样的桥梁作为连接？ Kafka的系统设计与传统MQ有什么不同？ 如何实现分布式？如何动态添加 Broker并通知上下游？ 有了 Kafka 和 Storm 后如何搭建流式处理系统？如何处理故障带来地数据不准确？ Realtime Data P ......
百度高德地图JS-API学习手记:地图基本设置与省市区数据加载
无论是百度还是高德地图开发，还是高德地图开发。官方的给的案例启示很多，copy再修改下，就完成了 https://lbs.amap.com/api/javascript-api/summary http://lbsyun.baidu.com/index.php?title=jspopular3.0 ......
【Java 并发】【十】【JUC数据结构】【六】SynchronousQueue同步阻塞队列原理
1 前言 看过了LinkedBlockingQueue、ArrayBlockingQueue、DelayQueue等阻塞队列，这节我们又要看一个不一样的队列，SynchronousQueue同步阻塞队列。 2 SynchronousQueue是什么 SynchronousQueue的同步队列，使用的 ......
数据库添加数据
这个方法整体感觉太麻烦，每次都得重新保存一下数据库，在用插件显示出来。 在MainActivity中写上添加的代码 Button add = (Button) findViewById(R.id.add); add.setOnClickListener(new View.OnClickListene ......
axios写了前端，如何从后台获取到List列表数据（涉及到JSON）
问题描述 我将前端写完之后，一直没有理解axios后台的写法，导致进度一直拖慢，这里我就来叙述一下我后来是怎么写出后台代码的吧，或者说，这样的后台代码是怎么写出来的! 问题解决 经过友友的点拨，这里就需要将我们的list数据转换成json数据； 然后将转换好的json数据传到axios写出来的htm ......
数据分析第十二章实践
# 代码12-1 评论去重的代码 import pandas as pd import re import jieba.posseg as psg import numpy as np # 去重，去除完全重复的数据 reviews = pd.read_csv("C:/Users/Lenore/Des ......
数据库升级
修改的地方 1.MydatabaseHelper中的onUpgrade： 增加了两条语句，并且执行onCreate方法 2.MainActivity中将版本号改成2 ......
flask之信号，flask-script，sqlalchemy介绍和快速使用，创建操作数据表
flask之信号，flask-script，sqlalchemy介绍和快速使用，创建操作数据表 昨日回顾 # 1 local对象 并发编程中的一个对象 它可以保证多线程并发访问数据 本质原理是：不同的线程 操作的是自己的数据 不支持协程 # 2 自己定义local 支持线程和协程 # 注意点一： t ......
数据结构
数据结构，也就是 Data Structure，是一种存储数据的结构体，数据与数据之间存在着一定的关系，这样的关系有数据的逻辑关系、数据的存储关系和数据的运算关系。 在 Java 中，数据结构一般可以分为两大类：线性数据结构和非线性数据结构。 数组 数组这种数据结构最大的好处，就是可以根据下标（或者 ......
Android 数据库
activity_main.xml <?xml version="1.0" encoding="utf-8"?> <androidx.constraintlayout.widget.ConstraintLayout xmlns:android="http://schemas.android.com/ ......
自适应辛普森算法
名字很高大上，事实上是计算机与数学深度结合后诞生的一种算法。 求积分，我们知道一定存在一个函数，保证 事实上，我们并不需要其中微不足道的那部分，只需保证我们所需的精度即可 #include<bits/stdc++.h> #define int long double using namespace ......
数据库sqlalchemy
sqlalchemy 是一个基于python的orm框架，可以让我们在python中可以使用sql操作数据库 flask 中没有orm框架 都是使用sqlalchemy作为操作数据库表的模块 fastapi 也是使用的sqlchemy 1.安装 pip3.8 install sqlalchemy # ......
【Java 并发】【十】【JUC数据结构】【五】DelayQueue延迟阻塞队列原理
1 前言 前两节我们看了BlockingQueue阻塞队列的两个子类，LinkedBlockingQueue、ArrayBlockingQueue，它们都是使用了ReentrantLock、Condition的来实现的，在进行插入操作、拉取数据操作之前为了并发安全都需要进行加锁；然后插入时候在容量满 ......
.NET Core MongoDB数据仓储和工作单元模式封装
前言 上一章我们把系统所需要的MongoDB集合设计好了，这一章我们的主要任务是使用.NET Core应用程序连接MongoDB并且封装MongoDB数据仓储和工作单元模式，因为本章内容涵盖的有点多关于仓储和工作单元的使用就放到下一章节中讲解了。仓储模式（Repository ）带来的好处是一套代码 ......
几种常用的Java 算法
package jsh.mg.msg.service.msg.test;import java.util.Arrays;import static java.util.Arrays.binarySearch;/** * * 几种常用的Java 算法 */public class TestClass ......
AES算法
（一）设计思路（可包含部分关键代码说明） /*通过密钥计算规则计算余下数组 * *1.如果i不是4的倍数，那么第i列由如下等式确定： *W[i]=W[i-4]⨁W[i-1] *2.如果i是4的倍数，那么第i列由如下等式确定： *W[i]=W[i-4]⨁T(W[i-1]) *其中，T是一个有点复杂的函 ......
SpringSecurity体系结构
我是通过松哥的博客学习SpringSecurity的，地址是http://itboyhub.com/2021/01/26/spring-security-guide/。对SpringSecurity的使用有了初步的认识。并根据松哥的博客跟了源码，但是每个人的思路不一样，看完之后还有点模糊。对其中的一 ......
C# 连接数据库
一、SQL SERVER 连接字符串语法： 1、SQL SERVER验证（两种写法）（安全连接） string connStr = "Data Source=.;Initial Catalog=DatabaseName;User Id=sa;Password=123"; 或 string connS ......
爬虫最后一天,爬取到的数据存到mysql中，爬虫和下载中间件、加代理、cookie、header、selenium、随机生成uersagent、去重规则源码分析(布隆过滤器)、scrapy-redis实现分布式爬虫、扩展去重规则
==爬到的数据存到mysql中== class FirstscrapyMySqlPipeline: def open_spider(self, spider): print('我开了') self.conn = pymysql.connect( user='root', password="", h ......
推荐算法在商城系统实践
一、简介 本文博主给大家讲解如何在自己开源的电商项目newbee-mall-pro中应用协同过滤算法来达到给用户更好的购物体验效果。 newbee-mall-pro项目地址: 源码地址：https://github.com/wayn111/newbee-mall-pro 在线地址：http://12 ......
多条数据并成一条后合并查询（Power Query）
问题：两表合并，其中一表有重复的数据需要事先求和或合并 let 源 = Excel.CurrentWorkbook(){[Name="表1"]}[Content], 合并查询 = Table.NestedJoin(源, {"订单号"}, 表2, {"订单号"}, "表2", JoinKind.Lef ......
sqlite数据库在close()之后任然不能释放与db文件的连接
conn.Close();conn.Dispose(); 在close和dispose后，必须要加上以下两句代码，让垃圾回收机制启动，否则仍不能释放与db文件的连接 GC.Collect(); GC.WaitForPendingFinalizers(); ......
算法思想
$\mathcal{Part}$ 1. 前提提要 注意：本文为提高组难度的算法思想，主要为前缀和，差分等优化 因为是思想，讲的会比较玄乎，能理解就好 $\mathcal{Part}$ 2. 双指针 双指针通常解决区间问题 步骤是，确定一个右节点或左节点作为一个参考点，通常取右节点，记为 $j$ 我们 ......
人工智能概率算法-模拟神经元结构预测价格
最近研究人工智能概率算法，想通过统计学的方式预测未来 比较好的例子就是股票，历史数据很丰富 输入端：4个参数（开盘价、最高价、最低价、收盘价） 输出端：4个参数 第二天（开盘价、最高价、最低价、收盘价） 把价格从-10到+10，每次迭代0.1，分类成200个特征 刚开始神经元的输入端不敏感，细胞核不 ......
算法基础
语言基础 取地址符 我们可以用 & 读取变量的地址。 特别的，对于数组，使用 "数组名+元素" 可以获得该变量的地址。 例如 $f+1$ 就是 $f$ 数组第 $1$ 个元素的地址。 在 C/C++ 中，指针变量的类型为类型名后加上一个 *，例如 int 类型的指针为 int*。 要想访问指针变量地 ......
排序算法
排序算法 1. 排序的分类 内部排序 指将需要处理的所有数据都加载到内部存储器中进行排序。 外部排序法 数据量过大时，无法全部加载到内存中，需要借助外部存储进行排序。 2. 算法的时间复杂度 2.1 概述 一般情况下，算法中的基本操作语句的重复执行次数是问题规模n的某个函数，用T(n)来表示。若有某 ......
本地数据库忘记密码
一、概述 系统：win11 数据库： SQL SERVER 忘记了sa的密码。 二、重置密码 2.1 Windows身份认证登入 2.2 选择账户属性 有机sa,选择属性。 2.3 确认服务器角色 sa一般都是公共角色和系统管理员 2.4 重置密码 直接在密码和确认密码中完成密码重置 2.5 退出登 ......
html_table获取当前数据
<!DOCTYPE html> <html lang="en"> <head> <meta charset="UTF-8"> <title>Title</title> </head> <body> <table border="1px"> <tr id="filed"> <td id="id">ID ......
第7章_InnoDB数据存储结构
1. 数据库的存储结构：页 索引结构给我们提供了高效的索引方式，不过索引信息以及数据记录都是保存在文件上的，确切说是存储在页结构中。另一方面，索引是在存储引擎中实现的，MysQL服务器上的存储引擎负责对表中数据的读取和写入工作。不同存储引擎中存放的格式一般是不同的，甚至有的存储引擎比如Memory都 ......
CSCI561 算法解析
CSCI561CSCI561 First Order Logic ResolutioGuidelinesThis is a programming assignment. You will be provided with sample inputs and outputs (see below). ......