量子 火山bytehouse大地
提升数据决策时效，火山引擎DataLeapCDC分库分表能力升级！
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 近日，大数据研发治理套件DataLeap数据集成更新CDC分库分表能力，可做到将多个实例的多个数据库的多个分表同步到目标端的一个表中，先离线同步，然后实时同步。适用于分库分表场景。同时，支持将 MySQL 同步到E ......
火山引擎 ByteHouse：双十一即将到来，直播商家如何用数据“点播成金”？
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 “双十一”电商大促脚步渐近，各大平台的战火又将燃起。直播电商以低成本、高转化率等优势备受商家青睐。据智研咨询数据显示，2022 年我国直播电商市场规模为 34879 亿元，较 2017 年的 196.4 亿元增长近 ......
9月活动回顾（免费领取PPT）｜火山引擎DataLeap、ByteHouse多位专家带来DataOps、实时计算等前沿技术分享！
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 在上月举行的火山引擎开发者社区 Meetup 第12期暨超话数据专场《数智化转型背景下的火山引擎大数据技术揭秘》上，来自火山引擎DataLeap、EMR、DataSail、Bytehouse、LAS的五位专家，分别 ......
Shell子串_变量子串案例_统计字符长度以及命令执行时长
子串案例 shell截取字符串通常由两种方式：从指定位置开始截取和从指定字符开始截取 从指定位置开始截取：这种方式需要两个参数，除了指定的起始位置，还需要截取长度，才能确定要截取的字符串。既然需要指定其实位置，到底是从字符串的左边开始计数，还是从字符串右边开始计数，答案是shell同时支持两种计数方 ......
Shell子串_变量子串案例_批量修改文件名
实际案例批量修改文件名 准备测试数据 [root@localhost sub_str]# touch xujianbing_{1..5}_finished.jpg [root@localhost sub_str]# touch xujianbing_{1..5}_finished.png [root ......
Shell子串_变量子串的语法介绍
变量子串的语法介绍 name="Mrxujbing" #该变量的值，有索引是从0,1,2,3,4... ${变量} 返回变量值 ${#name} 返回变量长度 ${变量:start} 返回变量start数值之后的字符串，且包含start的数字(start值就是索引值) ${变量:start:leng ......
可视大盘 + 健康分机制，火山引擎 DataLeap 为企业降低资源优化门槛！
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 随着数仓及研发技术团队维护的数据量大、资源使用量大、成本越高、优化压力越大。如何主动发现无效或低效使用的资源，并且可以周期性高效的进行主动治理变为团队治理目标核心诉求之一。在传统情况下，资源优化多数依靠团队经验和人 ......
火山引擎开发者社区一周资讯精选（9.16-9.22）
🔥活动推荐 1. 【视频回放】数智化转型背景下的火山引擎大数据技术揭秘 | 火山引擎开发者社区 Meetup 第 12 期 2. 【有奖征文】ByConity云上快速部署体验有奖召集令 🔥技术干货 1. 实战：超低延时直播技术的落地实践 2. 字节跳动大规模多云CDN管理与产品化实践 3. EL ......
火山引擎DataLeap一站式数据治理解决方案及平台架构
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 在字节跳动内部，DataLeap数据平台数据治理团队致力于建立一站式、全链路的数据治理解决方案平台。 数据治理的概念 数据治理是一种数据管理的概念，确保组织能在数据的全生命周期中具有高质量的数据质量能力，并且实现对 ......
火山引擎 ByteHouse：TB 级数据下，如何实现高效、稳定的数据导入
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 近期，火山引擎开发者社区、火山引擎数智平台（VeDI）联合举办以《数智化转型背景下的火山引擎大数据技术揭秘》为主题的线下 Meeup。活动主要从数据分析、数据治理、研发提效等角度，带领数据领域从业者全面了解数智化转 ......
火山引擎 ByteHouse 与白鲸开源完成兼容性认证，加速数据价值释放
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 数据作为新型生产要素，已快速融入生产、分配、流通、消费和社会服务管理等各环节，深刻改变着生产方式、生活方式和治理方式。越来越多企业也在尝试充分利用数据要素，开辟全新发展路径，进一步实现业务价值提升。 在数字化转型的 ......
火山引擎 ByteHouse：如何提升 18000 节点的 ClickHouse 可用性？
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 ClickHouse 是业内被广泛使用的 OLAP 引擎。当集群规模过大时，ClickHouse 则面临使用局限性的问题。如何提升 ClickHouse 的可用性，成为困扰广大开发者的难题之一。 目前，字节跳动内部 ......
生态兼容性进一步提升！白鲸开源 WhaleStudio 与火山引擎ByteHouse完成产品互认
数据作为新型生产要素，已快速融入生产、分配、流通、消费和社会服务管理等各环节，深刻改变着生产方式、生活方式和治理方式。越来越多企业也在尝试充分利用数据要素，开辟全新发展路径，进一步实现业务价值提升。 在数字化转型的大背景之下，白鲸开源旗下WhaleStudio与火山引擎ByteHouse依托于双方完 ......
《【求证】东方学帝共量子论不定方程的最简有理数解……》 回复
《【求证】东方学帝共量子论不定方程的最简有理数解……》 https://tieba.baidu.com/p/8621363558 《【征解】东方学帝共量子论不定方程组……》 https://tieba.baidu.com/p/8619121646 ......
线下Meetup：在数智化转型背景下，火山引擎VeDI的大数据技术揭秘
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 近日，联合火山引擎开发者社区，火山引擎数智平台（VeDI）《数智化转型背景下的火山引擎大数据技术揭秘》主题Meetup暨超话数据特别场正式在深圳举办，邀请到了Datasail、DataLeap、 ByteHouse ......
《分享: 深挖物理基础理论-五行量子六维度理论》 回复
《分享: 深挖物理基础理论-五行量子六维度理论》 https://tieba.baidu.com/p/8614503968 对于 黎兄 的 理论， 不知道评论什么 。 但 我 看到 @理论物理新体系 （ @时空形变论 ） 和 你在 反相吧 原帖 《深挖物理基础理论-五行量子六维度理论》 https: ......
火山引擎DataLeap推出两款大模型应用： 对话式检索与开发 打破代码语言屏障
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 自上世50年代，以“计算机”作为代表性象征的信息革命开始，社会对于先进生产力的认知便开始逐步更迭——从信息化（通常认为是把企业中的信息资源与信息技术有机结合，从而提高企业的管理水平和效率）到数字化（普遍认为是以数据 ......
后量子密码研究思考与实践
后量子密码研究思考与实践 中国电信翼支付后量子密码研究思考与实践 量子计算的威胁 2022年10月，法国物理学家阿兰•阿斯佩Alain Aspect，美国理论与实验物理学家约翰•弗朗西斯•克劳泽John F. Clauser以及奥地利科学家安东•塞林格Anton Zeilinger共同获得了诺贝物理 ......
ELT in ByteHouse 实践与展望
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 谈到数据仓库， 一定离不开使用Extract-Transform-Load (ETL)或 Extract-Load-Transform (ELT)。 将来源不同、格式各异的数据提取到数据仓库中，并进行处理加工。 传 ......
火山引擎A/B测试在消费行业的案例实践
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 近日，火山引擎数智平台举办了“走进火山-全链路增长：数据飞轮转动消费新生力”的活动，其中火山引擎数智平台DataTester产品负责人分享了火山引擎AB测试（DataTester）在消费行业的应用实践，并发布了产品 ......
数据探索神器：火山引擎 DataLeap Notebook 揭秘
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 背景介绍 Notebook 解决的问题 部分任务类型（python、spark等）在创建配置阶段，需要进行分步调试； 由于探索查询能力较弱，部分用户只能通过其他平台 or 其他途径进行开发调试，但部署到 Dorad ......
直击火山引擎V-Tech峰会！仅需简单登录，即可极速体验数据引擎ByteHouse
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 9月19日，火山引擎“数据飞轮·V-Tech数据驱动科技峰会”在上海举办。会上重磅发布数智平台VeDI应用大模型（Large Language Models）能力，并进一步解读了数据飞轮的行业应用与实践。作为核心参 ......
如何快速从 ETL 到 ELT？火山引擎 ByteHouse 做了这三件事
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 前言 当涉及到企业分析场景时，所使用的数据通常源自多样的业务数据，这些数据系统大多采用以行为主的存储结构，比如支付交易记录、用户购买行为、传感器报警等。在数仓及分析领域，海量数据则主要采按列的方式储存。因此，将数据 ......
企业如何高效平滑迁移数据？火山引擎DataLeap上线整库搬迁解决方案
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 近日，火山引擎大数据研发治理套件DataLeap上线整库搬迁解决方案，包括整库离线同步、整库实时同步两大能力，大大提升数据上云便捷性，降低数据迁移成本，使用户易上手，低运维。 该解决方案基于成熟的技术引擎底座，同时 ......
最高提升10倍性能！揭秘火山引擎ByteHouse查询优化器实现方案
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 作为企业级数据库的核心组件之一，查询优化器的地位不可忽视。对于众多依赖数据分析的现代企业来说，一个强大且完善的查询优化器能够为数据管理和分析工作带来巨大的便利。 作为火山引擎推出的一款云原生数据库产品，ByteHo ......
火山引擎 ByteHouse：两个关键技术，揭秘 OLAP 引擎中的数据导入技术
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 数据导入是衡量 OLAP 引擎性能及易用性的重要标准之一，高效的数据导入能力能够加速数据实时处理和分析的效率。 作为一款 OLAP 引擎，火山引擎云原生数据仓库 ByteHouse 源于开源 ClickHouse， ......
中企出海，用火山引擎DataTester开启增长第一步
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 今年 Google 宣布其提供的A/B测试工具 Optimize 将在2023年9月30号停止服务。在全球化浪潮席卷下，越来越多的中国企业正在加速走向全球市场，要在出海业务中实现降本增效，只依赖人为经验远远不够，不 ......
如何实现数据流畅转换？火山引擎ByteHouse推出ELT能力
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 在数据分析场景中，企业使用的数据通常具备来源多样化的特点，如支付交易记录、用户行为等，且数据格式各异，有的为行式存储结构，有的为列式存储结构。这就要求企业数仓具备一定的数据转换能力。 传统方式是采用Extract- ......
火山引擎DataLeap的数据血缘用例与设计概述
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 数据血缘描述了数据的来源和去向，以及数据在多个处理过程中的转换。数据血缘是组织内使数据发挥价值的重要基础能力。本文从字节的数据链路概况开始，介绍了数据血缘在字节的应用场景，总体设计，数据模型以及衡量指标。 字节数据 ......