架构 分布式storming笔记
全站抓取与分布式增量抓取
scrapy的crawlspider爬虫 学习目标： 了解 crawlspider的作用 应用 crawlspider爬虫创建的方法 应用 crawlspider中rules的使用 1、crawlspider是什么 回顾之前的代码中，我们有很大一部分时间在寻找下一页的url地址或者是内容的url地址 ......
程序员的思维修炼：开发认知潜能的9节课阅读笔记03
主动学习 瞄准SMART目标 使用SMART方法实现目标能够更加专注，在这里，SMART代表具体的、可度量的、可实现的、相关的和时间可控的（Specific, Measurable, Achievable, Relevant, and Time-boxed）； 我们往往对于这两个词目标（goal）和 ......
程序员的思维修炼：开发认知潜能的9节课阅读笔记02
新手与专家 新手看重的规则， 专家不关注规则关注于感觉 。 因此他们的认知是难以直接表达出来的。 就像每个会滑冰的人告诉不会滑冰的人技巧他们无法懂得， 但是你要教他们规则就可以。模型的五个阶段 作者说新手阶段一般需要指令清单去沿着做， 但是出现问题不知道怎么解决， 而且解决问题的规则会有无限递归的， ......
《代码大全》 读书笔记1
在王建民老师的推荐下，最近拜读了 Code complete《代码大全》，这部大块头确实经典，涉及到了软件开发的方方面面。有点后悔没有早些阅读，值得推荐给还没读过的朋友。它并不是针对某种语言的武林秘籍，应该可以看作是基础内功修炼吧。笔记比较简略，只供简单查阅~ 一、开发前期准备相关1.需求阶段： 发 ......
vue-element-admin 运行踩坑笔记
npm WARN deprecated svgo@1.3.2: This SVGO version is no longer supported. Upgrade to v2.x.x. npm ERR! Error while executing: npm ERR! G:\ForCodeSoftwa ......
Half-UNet:用于医学图像分割的简化U-Net架构
Half-UNet简化了编码器和解码器，还使用了Ghost模块(GhostNet)。并重新设计的体系结构，把通道数进行统一。 论文动机 编码器的不同类型的架构图，编码器(A-C)的结构分别来源于U-Net的编码器、解码器和全的Unet结构。 下面是上图的一些结果指标 将U-Net 的编码器和解码器都 ......
读Java性能权威指南（第2版）笔记27_线程和同步性能上
1. 线程和硬件 1.1. 给CPU增加超线程并不能使应用程序性能翻倍 2. 线程池 2.1. 任务被提交到一个队列（可能有不止一个队列），然后一定数量的线程会从队列中取出任务并执行它们 2.2. 线程池的大小对获取最佳性能至关重要 2.2.1. 在某些情况下，过大的线程池会对性能造成损害 2.3. ......
谈谈架构设计
在软件行业，对于什么是架构，都有很多的争论，每个人都有自己的理解。在不同的书籍上, 不同的作者, 对于架构的定义也不统一, 角度不同, 定义不同。此君说的架构和彼君理解的架构未必是一回事。因此我们在讨论架构之前，我们先讨论架构的概念定义, 因为概念是人认识这个世界的基础和用来沟通的手段，如果对架构概... ......
《用户故事与敏捷方法》读书笔记2
书接上回，上回说到用户故事三要素，那么什么是一个好的用户故事呢？ 用户故事的编写准则 好的用户故事应该遵循以下的编写原则 INVEST原则 Independent—独立的：用户故事之间需要保持独立性便于更改，并且不影响整体。 Negotiable—可协商的：用户故事的内容需要可协商，更多的细节会在沟 ......
Java学习笔记（九）网络编程
网络编程 概述 计算机网络： 计算机网络是将地理位置不同的具有独立功能的多台计算机及其外部设备，通过通信线路连接起来，在网络操作系统，网络管理软件及网络通信协议的管理和协调下，实现资源共享和信息传递的计算机系统。 网络编程的目的： 无线电台···传播交流信息，数据交换，通信 想要达到这个效果需要什么 ......
Django笔记七之ManyToMany和OneToOne介绍
ManyToMany 是一种多对多的关系，在用途和使用方法上和外键 ForeignKey 类似。 以下是本篇笔记的目录： ManyToMany 的介绍 through 参数 through_fields 参数 ManyToMany关系数据的增删改查 OneToOne介绍 1、ManyToMany 的 ......
go 笔记 init函数
来自：go init函数 1、golang里的main函数是程序的入口函数，olang还有另外一个特殊的函数init函数，先于main函数执行 init函数的主要作用： 初始化不能采用初始化表达式初始化的变量。 程序运行前的注册。 实现sync.Once功能。 其他 init函数的主要特点： ini ......
stream流笔记
#stream流笔记 map 转换元素 List<Long> ids = list.stream().map(DictionaryMetaPO::getId).collect(Collectors.toList()); Collectors.joining 拼接字符串 String s = list ......
[学习笔记] 树链剖分
树链剖分的用处 使用树剖将整棵树剖分为若干条链，组成线性结构，可以方便用其他的数据结构维护信息。 一些定义 重儿子：该节点的所有子节点中子树大小最大的点。 轻儿子：该节点的所有除重儿子外的子节点。 重边：连接重儿子与父节点的边。 轻边：除重边外的边。 重链：由一串重边组成的链。 轻链：由一串轻边组成 ......
组合数学课程笔记（四）：容斥原理
$$一切繁复都洗涤，却染上重叠的星$$ 容斥原理 是容斥原理的基本公式。 但是我们并不经常的使用这个公式本身，我们一般使用这个公式的推论： 具体的理解这个式子，就是在全集 $\mathbb{U}$ 中，我们有若干个子集 $A_i$，其中的元素是坏的。现在我们需要找到不被任何子集包含的元素个数。 容斥 ......
Deep Transfer Learning综述阅读笔记
这是一篇linkedin发表的深度迁移学习综述, 里面讲了一些对于search/recommend system中的迁移学习应用. 有不少指导性的方法, 看完后摘录出来 对于ranking方向的TL, 主要有两种transfer方式: Model transfer 对于参数量非常大的预训练模型, F ......
不要依赖业务逻辑和系统架构处理一些判断
今天上线前就遇到一个NullPointException，原本依赖于前端处理，如果字段没值就不会传递改key进入json中， 但是上线的数据铺垫是直接解析的excel和api调用的，跳过了前端的一些逻辑处理，导致显式传递null，dto的默认值0没有赋予，出现了NulllPointException ......
.NET+Consul+Ocelot实现微服务分布式部署
一、ConSul和Ocelot Consul：是一个服务网格解决方案，提供了一个功能齐全的控制平面，具有服务发现、配置和分段功能。这些功能中的每一项都可以根据需要单独使用，也可以一起使用来构建一个完整的服务网格。Consul需要一个数据平面，并支持代理和原生集成模型。Consul提供了一个简单的内置 ......
华为擎云L420笔记本统信UOS配置
启动到UOS安装程序 安装包可以直接从UOS的cdimage镜像下载，注意找名字有HISILICON、arm64字眼的ISO，不清楚是KLV还是KLU之类的话可以看固件设置里面怎么说。 按F2进入固件设置，按F12选择启动设备。字很小，看不清楚的话可以把脸凑过去或者上摄像头。 P.S. 如果启动到U ......
[vue] 脚手架笔记
笔记 脚手架文件结构 ├── node_modules ├── public │ ├── favicon.ico: 页签图标 │ └── index.html: 主页面 ├── src │ ├── assets: 存放静态资源 │ │ └── logo.png │ │── component: 存放 ......
论文阅读笔记（五）：Hire-MLP Vision MLP via Hierarchical Rearrangement
论文阅读笔记（五）：Hire-MLP: Vision MLP via Hierarchical Rearrangement 摘要 先前的MLPs网络接受flattened 图像patches作为输入，使得他们对于不同的输入大小缺乏灵活性，并且难以捕捉空间信息，本问Hire-MLP通过层次化重排构建视 ......
Android Hybird架构之整合XwalkView，让你的App内置chromium内核
使用XwalkView的目的无非是为了提升Android4.4以下版本（非chromium内核）的Html5渲染性能，并且能够使得H5页面在众多定制化的ROM上拥有一致的体验。 当然了，App内置Chromuim内核的缺点也是显而易见的，那就是App的包体积会增大20M左右。但是从hybrid应用开 ......
React Native学习笔记（二）————（RN）初始化项目
一、创建ReactNative项目 1.1、React Native 有一个内置的命令行界面，你可以用它来生成一个新项目。您可以使用 Node.js 附带的 访问它，而无需全局安装任何内容。让我们创建一个名为“AwesomeProject”的新 React Native 项目：npx npx rea ......
IPv6基础学习笔记
IPv6网络地址长度为128位，是 IPv4（32位）的 4倍；于是IPv4点分十进制格式不再适用，采用十六进制表示。IPv6有3种表示方法： 一、冒分十六进制表示法： 格式为 X:X:X:X:X:X:X:X, 即分为 8个段，由X代表的每一段为 16位 二进制（0000 0000 0000 000 ......
软件系统架构质量属性--测试性
正常系统的可测试性通常在于是否能发现错误，而微服务系统架构通常是长期运营的分布式系统，而对于该系统来说，分布式会带来问题已发现但不易解决，因为消息链长且位于地理位置不同，架构不同的子系统上，发生错误后无法定位错误发生地点，如果在错误发生后有错误发生点向上提交错误信息的话会容易导致线路拥堵，且并不是所 ......
SPRING学习笔记
优点： Spring是一个开源的免费的框架（容器）! Spring是一个轻量级的、非入侵式的框架！ 控制反转(IOC),面向切面编程(AOP)! 支持事务的处理，对框架整合的支持！ 总结一句话：Spring就是一个轻量级的控制反转(IOC)和面向切面编程(AOP)的框架！ 搜索 复制 ......
算法笔记的笔记——第9章 树
概念 定义 树枝分叉处、树叶、树根抽象为结点（node） 树根抽象为根结点（root），一棵树最多存在一个根结点 树叶抽象为叶子节点（leaf），不再延伸出新的结点 茎干和树枝抽象为边（edge），一条边只用来连接两个结点 树中的结点不能被边连成环 子结点（child）、子树（subtree） 性质 ......
算法笔记的笔记——第8章 搜索专题
深度优先搜索（DFS） 枚举所有完整路径以遍历所有情况 栈 实现 使用递归可以实现深度优先搜索 可以通过条件限制节省DFS计算量，方法称作剪枝 广度优先搜索（BFS） 优先访问能直接到达的所有结点 队列 实现 void BFS(int s) { queue<int> q; q.push(s); wh ......
算法笔记的笔记——第7章 栈、队列和链表
栈 后进先出 栈顶指针始终指向最上方元素 栈为空时栈顶指针为-1 常用操作 清空（clear）：TOP = -1 获取栈内元素个数（size）：size = TOP + 1 判空（empty）：TOP == -1 进栈（push）：st[++TOP] = x 出栈（pop）：TOP-- 取栈顶（to ......