实战 功能 工具 数据
银行业数据架构的前世今生
分享大纲： 1. 银行信息系统架构 2. 数据架构的主要内容 3. 数据架构的未来 银行信息系统架构 （一）银行信息化发展历程 银行信息化发展历程包括四个阶段：20世纪70年代的信息孤岛阶段、20世纪80-90年代的互联互通阶段、20世纪90年代至2012年的信息化阶段、2012年至今的数字化阶段。 ......
UCB Data100：数据科学的原理和技巧：第十一章到第十五章
十一、恒定模型、损失和转换 原文：Constant Model, Loss, and Transformations 译者：飞龙 协议：CC BY-NC-SA 4.0 学习成果 推导出在 MSE 和 MAE 成本函数下恒定模型的最佳模型参数。 评估 MSE 和 MAE 风险之间的差异。 理解变量线性 ......
UCB Data100：数据科学的原理和技巧：第十六章到第二十章
十六、交叉验证和正则化 Cross Validation and Regularization 译者：飞龙 协议：CC BY-NC-SA 4.0 学习成果 认识到需要验证和测试集来预览模型在未知数据上的表现 应用交叉验证来选择模型超参数 了解 L1 和 L2 正则化的概念基础 在特征工程讲座结束时（ ......
Dating Java8系列之用流收集数据
给我馍馍/文 收集器简介 1.收集器介绍 Java 8中流支持两种类型的操作:中间操作(如filter或map)和终端操作(如count、findFirst、forEach和reduce)。 中间操作可以链接起来，将一个流转换为另一个流。这些操作不会消耗流，其目的是建立一个流水线。与此相反，终端操作 ......
Dating Java8系列之并行数据处理
翎野君/文 分支合并框架 分支合并框架介绍 分支/合并框架的目的是以递归的方式将可以并行的任务拆分成更小的任务，然后将每个子任务的结果合并起来生成整体结果。 它是ExecutorService接口的一个实现，它把子任务分配给线程池(称为ForkJoinPool)中的工作线程。把任务提交到这个池，必须 ......
UCB Data100：数据科学的原理和技巧：第一章到第五章
一、引言 原文：Introduction 译者：飞龙 协议：CC BY-NC-SA 4.0 学习成果 了解 Data 100 的总体目标 了解数据科学生命周期的阶段 数据科学是一个跨学科领域，具有各种应用，并且在解决具有挑战性的社会问题方面具有巨大潜力。通过建立数据科学技能，您可以赋予自己参与和引领 ......
UCB Data100：数据科学的原理和技巧：第六章到第十章
六、正则表达式 原文：Regular Expressions 译者：飞龙 协议：CC BY-NC-SA 4.0 学习成果 了解 Python 字符串操作，pandas Series方法 解析和创建正则表达式，使用参考表 使用词汇（闭包、元字符、组等）描述正则表达式元字符 这些内容在第 6 和第 7 ......
10.App 抓包实战练习
目录 抓包原理 常用应用场景 接口抓包分析实战 抓包原理 常用应用场景 解决移动端接口测试 解决接口测试过程中检查传参错误问题 mock 测试 接口抓包分析实战 抓取接口数据 Overview：接口的大体情况 Content：请求信息和响应信息 上半部分：请求，请求头信息，请求参数，cookie 下 ......
mybatis-generator:generate生成器将另外的数据库内同名表生成
问题： 在使用mybatis-generator:generate生成器时，会生成别的数据库内同表名； 因为是相同表名。 解决： 在生成器的配置文件中的数据库连接地址内添加： <!--放置生成其他库同名表--> <property name="nullCatalogMeansCurrent" val ......
开发医疗保险欺诈识别监测模型如何进行数据集分析与预处理
数据集加载： 使用工具如Pandas库加载数据。使用pd.read_csv()等函数加载数据集到DataFrame。 初步数据探索： 使用head()、info()、describe()等方法查看数据的前几行、基本信息和统计摘要。 使用shape属性获取数据集的大小。 处理缺失值： 使用isnull ......
2024年更新「GIS数据」全国的GeoJSON、shp格式数据下载获取(精确到乡镇街道级)
发现个可以免费下载全国 geojson 数据的网站，推荐一下。支持全国、省级、市级、区/县级、街道/乡镇级以及各级的联动数据，支持导入矢量地图渲染框架中使用，例如：D3、Echarts等 geojson 数据下载地址：https://geojson.hxkj.vip 该项目 github 地址：ht ......
云平台大数据系统需求有哪些？
高性能计算资源：需要具备强大的计算能力来处理大规模的数据和进行复杂的数据分析、机器学习训练等任务。这可以通过采购高性能的服务器和配备适当的处理器、内存和存储设备来实现。同时，需要选择适合的数据处理和机器学习框架，如TensorFlow、PyTorch等，以提高计算效率和性能。 大规模存储能力：需要足 ......
09.抓包工具证书配置
目录 Charles 基础设置 Charles 电脑证书配置 Charles 移动端代理配置 Charles 基础设置 电脑证书配置 Mac 系统安装证书 注意：选择始终信任 Windows 系统安装证书 Charles 端设置 ssl 移动端代理配置 设备和电脑处于同一 WIFI（模拟器不需要配置 ......
Mysql 数据同步
本地数据库 同步到远程数据库 表结构 表数据 如果 远程数据库是8.0 需要注意事项： mysql> select host,user,plugin from mysql.user; | % | admin_user | mysql_native_password | 需要设置 为 mysql_na ......
银行数据治理该怎么做
数据治理是银行数据建设必不可少的一个环节。好的数据治理体系可以盘活整条数据链路，最大化保障银行数据的采集、存储、计算和使用过程的可控和可追溯。本篇文章，作者介绍了银行数据治理该如何去做，包括数据治理有哪些环节，又有哪些误区，一起来看看吧，希望能够给你带来帮助。 数据治理的目的是什么？数据治理的最终目 ......
限流：计数器、漏桶、令牌桶 三大算法的原理与实战（史上最全）
限流：计数器、漏桶、令牌桶 三大算法的原理与实战（史上最全） 令牌桶算法原理及实现(图文详解) https://mikechen.cc/20379.html Redis 实现限流的三种方式 https://juejin.cn/post/7033646189845151757 ......
【专题】2022云上新型电力系统报告PDF合集分享（附原数据表）
原文链接：https://tecdat.cn/?p=33446 原文出处：拓端数据部落公众号 报告合集根据实践创新，我们提出了“云上新型电力系统”，该系统将加速电力流、信息流和价值流的融通流动，通过更灵活高效的能源资源优化配置平台，支持大规模的新能源开发和利用。这一系统将为电力业务创新、电力行业发展 ......
【专题】新零售下品牌消费者为中心的数字化转型报告PDF合集分享（附原数据表）
报告链接：http://tecdat.cn/?p=32130 原文出处：拓端数据公众号 白皮书显示，阿里巴巴目前拥有超过五亿用户，成为中国领先的网上商城和各大品牌争相发力平台。作为B2C模式为代表的天猫，也逐渐成为了品牌运营的核心阵地。在数据银行、会员通等一系列数字化消费者运营工具被引入天猫平台后， ......
【专题】2023中国经济高质量发展中的商业地产趋势与机遇专题报告PDF合集分享（附原数据表）
原文链接：https://tecdat.cn/?p=34818 原文出处：拓端数据部落公众号 在摆脱了三年的新冠疫情后，2023年的中国经济开始复苏，但步伐仍显蹒跚。前三季度，GDP同比增长5.29%，但短期内仍面临诸多挑战，如外部经济和地缘政治环境的多变，以及企业和居民消费信心尚待修复。阅读原文， ......
数据结构里的一棵树
一、树是什么？ 有根有枝叶便是树！根只有一个，枝叶可以有，也可以没有，可以有一个，也可以有很多。 就像这样： 嗯，应该是这样： 二、一些概念 1、高度 树有多高，嗯，我一米八三！ 树的高度怎么算？ 高度是啥，就是从下往上到最顶端，从叶节点到根节点。 从每个叶节点开始，一个节点一个节点往上数，数到根节 ......
边缘数据采集网关无法上传数据是什么原因？如何解决？
边缘数据采集网关是物联网系统中的常见设备，对于提高物联网感知和响应效率、加强物联网联动协同能力、提升数据安全性等方面都具有重要意义。 ......
matlab使用长短期记忆（LSTM）神经网络对序列数据进行分类|附代码数据
全文下载链接：http://tecdat.cn/?p=19751 本示例说明如何使用长短期记忆（LSTM）网络对序列数据进行分类 。 最近我们被客户要求撰写关于LSTM的研究报告，包括一些图形和统计输出。 要训练深度神经网络对序列数据进行分类，可以使用LSTM网络。LSTM网络使您可以将序列数据输入 ......
POT超阈值模型和极值理论EVT分析|附代码数据
全文链接：http://tecdat.cn/?p=16845 最近我们被客户要求撰写关于极值理论的研究报告，包括一些图形和统计输出。 本文依靠EVT对任何连续分布的尾部建模。尾部建模，尤其是POT建模，对于许多金融和环境应用至关重要 POT模型其主要动机是为高洪水流量的概率模型提供实用工具。但是，E ......
保护企业信息防止数据泄露是每个人的义务和责任！
在今天的数字社会，数据已经成为现代企业的生命线。对于企业来说，无论是客户数据、内部研发文档，还是员工个人信息，它们都是企业运营的重要支柱。然而，这些数据的价值也引来了无数的威胁，可能来自于黑客攻击，或者内部员工的误操作，甚至是恶意泄露。一旦企业的关键数据泄露，恶劣的影响远超过金钱损失，甚至可能给企业 ......
SQL Server 数据库备份成sql文件
安装有Microsoft SQL Server Management Studio 备份成sql文件，恢复时不受SQL Server的版本限制 连接本地数据库 连接远程数据库，服务器名称(ip,port) 右键选择数据库--任务--备份 数据库恢复或者导入时，注意修改ipt.mdf、ipt_log. ......
按照文件夹时间提取或归类相应数据
System：Ubuntu 22.04.1 Python Version：3.11.6 ''' 按照文件夹名称的时间来获取需要的数据 文件夹名称eg./home/yuh/WRFCHEM/WPS-4.5/1km/2019010100_2019010900 ''' import os import pa ......
数据库 - 已成功与服务器建立连接，但在登录过程中发生错误。（提供程序：SSL提供程序，错误：0-证书链是由不受信任的颁发机构颁发的。)”asp.net core:8.0
asp.net core:8.0，本地开发一切正常，发布线上docker后出现如下错误： Microsoft.Data.SqlClient.SqlException (0x80131904): A connection was successfully established with the se ......
新年的第一个项目管理计划借助工具制定，真高效！
年终总结刚提交没多久，新年的第一个项目就接踵而来了，是一个中大型项目，也是我做的比较少的类型。之前主要做一些中小型项目，项目的交付周期不长、所需资源也较少，基本上都能顺利的交付，所以一般简要规划下就开工了。 之前做过一次这种中大型的项目，我按照做小型项目的经验来，结果各种风险问题频发以及被迫变更，所 ......
世微AP630X地摊灯 手电筒方案 可充电多功能LED灯
1,信息来源：深圳市世微半导体有限公司 Augus 2,产品的特性有： 全集成单芯片控制 5 照明循环模式可选 0.5A/1A 固定充电电流可选 内置 MOS 1.8A 驱动电流 可外置 MOS 驱动更大电流 充电指示/低电提示/短路提示 3A 手电筒过流保护? 预设 4.22V 电池充满电压 温度 ......
08.抓包工具 Fiddler
目录 工具介绍 界面简介 抓取 HTTP 请求 抓取 HTTPS 请求 抓取移动端请求 查看接口信息 AutoResponder 断点 弱网 工具介绍 官网：https://www.telerik.com/fiddler/fiddler-classic Fiddler 是位于客户端和服务器端的 HT ......