数据表 品牌营销2022流量
解读JVM级别本地缓存Caffeine青出于蓝的要诀3 —— 讲透Caffeine的数据驱逐淘汰机制与用法
上一篇文章中我们聊了Caffeine的同步、异步的数据回源方式。本篇文章我们再一起研讨下经Caffeine改良过的异步数据驱逐处理实现，以及Caffeine支持的多种不同的数据淘汰驱逐机制和对应的实际使用。 ......
2022已逝，2023｜生活不止眼前的苟且，还有远方与诗
序言 2022年，这是特别的一年，也许也是我可以对子子孙孙们讲述的关于一个特别年代的故事。2022年，对于我而言，年末的钟声即将敲响，好的坏的这一年都终将要过去了 本来不想写年终总结了，但看到网络上各种各样的年终总结，终究还是动了心思，也许是内心深处还是想为即将过去的一年记录着一些什么吧。 提笔前不 ......
如何轻松做数据治理？开源技术栈告诉你答案
搭建一套数据治理体系耗时耗力，但或许我们没有必要从头开始搞自己的数据血缘项目。本文分享如何用开源、现代的 DataOps、ETL、Dashboard、元数据、数据血缘管理系统构建大数据治理基础设施。 ......
react 高效高质量搭建后台系统 系列 —— 请求数据
其他章节请看： react 高效高质量搭建后台系统 系列 请求数据 后续要做登录模块（主页），需要先和后端约定JSON数据格式，将 axios 进行封装，实现本地的数据模拟 mockjs。 Tip：spug 中后端返回 json 通常有 data 和 error两个 key。就像这样：{data: ......
手把手教你玩转 Excel 数据透视表
1. 什么是数据透视表 数据透视表是一种可以快速汇总、分析大量数据表格的交互式分析工具。使用数据透视表可以按照数据表格的不同字段从多个角度进行透视，并建立交叉表格，用以查看数据表格不同层面的汇总信息、分析结果以及摘要数据。 使用数据透视表可以深入分析数值数据，以帮助用户发现关键数据，并做出有关企业中 ......
【爬虫+数据分析+数据可视化】python数据分析全流程《2021胡润百富榜》榜单数据！
用python爬取并分析《2021胡润百富榜》的榜单数据！
1、python爬虫讲解（requests向接口请求）。
2、python数据分析讲解（pandas数据分析及可视化画图）含：直方图、柱形图、饼图、词云图等。 ......
【深入浅出Sentinel原理及实战】「基础实战专题」零基础实现服务流量控制实战开发指南（2）
你若要喜爱你自己的价值，你就得给世界创造价值。 Sentinel的组成部分 Sentinel 主要由以下两个部分组成。 Sentinel核心库（Java客户端） ：Sentinel的核心库不依赖任何框架或库，能够运行于Java 8及以上的版本的运行时环境中，同时对 Spring Cloud、Dubb ......
2022年总结-五年的时间才明白业务的重要性
一: 因起 从事软件开发工作了几年了，总感觉缺少一些**"灵魂"的东西，为此很纠结，困惑，一直彷徨不定，很苦恼，以前认为技术**很重要，学习和工作的重心都在技术上，了解各种基础的组件，以及技术的知识，后来发现了解的技术依旧很浅薄，依然停留在“表面”上，在结合经验和认知，以及自己的学历，背景，发现 ......
2022年度总结
不知不觉，2022年已经远去，时间来到了2023年，本来这篇文章要上周或者元旦写，种种原因，延迟到了现在才写这篇总结，但是还是要总结下2022年的工作，回顾下2022年当初许下的目标。 1.测试体系知识梳理整理。 2.组建群，在群内分享，带动大家技术的进步。 3.python，java知识整体的串联 ......
Visual Studio 2022 MAUI NU1105(NETSDK1005) 处理记录
故障说明 MAUI项目是日常使用的项目,一直都好好的 某一天修改了几行代码后,突然项目无法编译了,提示NU1105错误 从Git重新拉取一份之前的代码编译也是同样的错误,经过半天的查阅,尝试了几种方案都没有效果 删除obj/project.assets.json 删除obj 删除.vs 修复Visu ......
一个理想的数据湖应具备哪些功能？
介绍 从数据库到数据仓库，最后到数据湖，随着数据量和数据源的增加，数据格局正在迅速变化。 数据湖市场预计增长近 30%，将从 2020 年的 37.4 亿美元增长到 2026 年的 176 亿美元。 此外从 2022 年数据和人工智能峰会来看，数据湖架构显然是数据管理和治理的未来。 由于 Datab ......
2022年终总结：点滴积累让我不再迷茫
今年是开始写作的第二年，如果说第一年是起步的话，今年就是开始有了一些小收获了，通过点滴积累让我知道积累的充实感，通过一点一点粉丝或阅读量的积累，增加写作的自信。 今年的收获 首先看一下今年的阅读量和粉丝量: 粉丝数量： | 平台 | 粉丝| | : : | : : | | 头条 | 251 | | ......
做算法的这一年——2022年个人年终总结
做算法的这一年——2022年个人年终总结 前言 按照往年的惯例和园子的规矩，随着网易云音乐以及众多App的个人使用报告陆续出来，也到了自己该做个全年复盘总结的时候了。 这一年想起来好像是做了很多事情，但又好像什么都没有做，对着电脑想了许久，要怎么用一句话或者一个字来概括这一整年的过往与历程，奈何 ......
比Sqoop功能更加强大开源数据同步工具DataX实战
前面两篇连续介绍两个数据同步组件后，好事应有三，大满贯收场，本篇介绍主流的异构数据源离线同步工具DataX的框架设计和执行流程，将其与大名鼎鼎大数据同步组件Sqoop做对比，部署安装并通过配置基于MySQL和HDFS互为读写的实例场景和关键配置说明。 ......
工业数据分析为什么要用FusionInsight MRS IoTDB？
摘要：MRS IoTDB，它是华为FusionInsight MRS大数据套件中的时序数据库产品，在深度参与Apache IoTDB社区开源版的基础上推出的高性能企业级时序数据库产品。 本文分享自华为云社区《工业数据分析为什么要用FusionInsight MRS IoTDB？》，作者：高深广 。 ......
痞子衡嵌入式：Farewell, 我的写博故事2022
-- 题图：苏州荷塘月色 2022 年的最后一天，写个年终总结。困扰大家三年之久的新冠疫情终于在 12 月全面放开了，痞子衡暂时还没有阳，计划坚持到总决赛。对于 2023 年，痞子衡还是充满期待的，慢慢要恢复到 2019 年及之前的生活方式了（当然是要长期和各种毒株共存了）。 说回正题，今年一共写了 ......
一次SQL调优 聊一聊 SQLSERVER 数据页
一：背景 1.讲故事 最近给一位朋友做 SQL 慢语句 优化，花了些时间调优，遗憾的是 SQLSERVER 非源码公开，玩起来不是那么顺利，不过从这次经历中我觉得明年的一个重大任务就是好好研究一下它，争取在 SQLSERVER 性能优化上做一些成绩，哈哈！ 个人觉得要想深入研究 SQLSERVER， ......
一款简单易用的远程日志查看器，可实时查看云服务器上的日志数据
本文主要内容 介绍一款开发者工具（远程日志查看器）的使用说明和技术实现思路 源码地址：https://github.com/HackyleShawe/RemoteLogViewer 前置知识 SpringBoot基础知识 SSH：Secure Shell Web前端基础：HTML、CSS、JavaS ......
平淡详和的一年——2022年个人总结与思考
概述 2022年转瞬即逝，一年又过去了。毕业后已经习惯了在博客园回顾自己的一年，今年也不例外，2022年对我而言总体来说是平稳，化身为无情的赚钱机器。2022要说最大的波动那就是新冠政策的变化了，记得年初还在各种封控，下个高速路口都得核酸检测开路，误入风险区都得强制隔离，但在2022年的尾巴，没想到 ......
ClickHouse数据副本引擎
我的gitee地址：https://gitee.com/ddxygq/bigdata-technical-pai ，相关文章都放到这个仓库里了。 只有 MergeTree 系列里的表可支持副本： ReplicatedMergeTree ReplicatedSummingMergeTree Repli ......
（数据科学学习手札148）geopandas直接支持gdb文件写出与追加
本文示例代码已上传至我的Github仓库https://github.com/CNFeffery/DataScienceStudyNotes 1 简介 大家好我是费老师，在我之前的某篇文章中为大家介绍过如何在windows系统上，基于ESRI FileGDB驱动为geopandas补充针对gdb文件 ......
Redis数据结构与对象
参考《Redis设计与实现》 系列文章目录和关于我 一丶简单动态字符串 当redis需要的不仅仅是一个字符串字面量，而是一个可以被修改的字符串值时，就会使用SDS（simple dynamic string）来表示字符串值。比如set msg "hello world"将创建一个新键值对，键值对的键 ......
火山引擎DataLeap数据调度实例的 DAG 优化方案
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，并进入官方交流群 实例 DAG 介绍 DataLeap 是火山引擎自研的一站式大数据中台解决方案，集数据集成、开发、运维、治理、资产管理能力于一身的大数据研发治理套件。在平台中，一个核心的功能为任务的调度，会根据任务设置的调度频率（月级，日 ......
transforms模块—PyTorch图像处理与数据增强方法
计算机视觉任务中，对图像的变换（Image Transform）往往是必不可少的操作，例如在迁移学习中，需要对图像尺寸进行变换以使用预训练网络的输入层，又如对数据进行增强以丰富训练数据。
作为深度学习领域的主流框架，pytorch中提供了丰富的图像变换API。本文将对pytorch中torchvi... ......
Pytorch基础-tensor数据结构
torch.Tensor 是一种包含单一数据类型元素的多维矩阵，类似于 numpy 的 array。 Tensor 可以使用 torch.tensor() 转换 Python 的 list 或序列数据生成，生成的是dtype 默认是 torch.FloatTensor。 ......
2021 & 2022年终回顾：山河无恙，烟火寻常
前言 又到了一年一度年终回顾的时候了，回想起去年年底圣诞节的时候由于忙着参加黑客松大赛，一下子就进入了新的一年，失去了年终回顾的动力，所以今年提前两个月开始进行回顾，这样的话今年最后一天就可以顺利发文。 时间过得很快，这两年来也经历了不少事情，2021年年初的时候公司经营不善，失业了，还好借助社区大 ......
我希望来年，更多是靠关系和模式挣钱——2022年我的总结与思考
我记得是2017年开始在博客园写博客，那年我儿子出生，并与当年年底写了17年的年度总结。 n年前，我没钱但年轻，我怕n年后我老时，还是一无所成——2017我的收获和反思，在随后的几年的年末，写总结文也已经成为了我的惯例，后面几年的总结文链接如下。 2018我跳出了舒适区，发现自己缺的不仅是技术，另外 ......
TiDB上百T数据拆分实践
背景 提高TiDB可用性，需要把多点已有上百T TiDB集群拆分出2套 挑战 1、现有需要拆分的12套TiDB集群的版本多(4.0.9、5.1.1、5.1.2都有)，每个版本拆分方法存在不一样 2、其中5套TiDB，数据量均超过10T、最大的TiDB集群目前数据量62T、单TiDB集群备份集大，消耗 ......