cloudcanal starrocks doris emr
为什么要以电子病历（EMR）为核心，建设医院信息集成平台？
一个完善的医院信息系统通常由上百个子系统组成，牵涉众多的专业领域。这么庞大的系统需要非常专业化的软件开发分工，整合不同厂商有特色的专业系统是医院信息系统的发展趋势。 电子病历是现代医疗机构临床工作开展所必需的业务支撑系统，也是居民健康档案的主要信息来源和重要组成部分。电子病历建设是实现区域范围以居民 ......
Apache Pulsar 在火山引擎 EMR 的集成与场景
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 近年来，基于云原生架构的新一代消息队列和流处理引擎 Apache Pulsar 在大数据领域发挥着愈发重要的作用，其应用场景和客户案例也在不断地丰富与扩充。 火山引擎是字节跳动的企业服务品牌，主要面向 To B 业 ......
轻松存储千亿级数据，知乎基于Doris的DMP系统架构实践
1）提升查询效率
自动探测 SQL 复杂查询条件预先合并成一个派生特征的 bitmap，预测和圈人时对复杂条件 SQL 重写为派生特征。
2）提升导入速度
Spark 直接写 Doris Tablet 文件，并挂载到 FE。
针对大导入场景与 Doris 团队共建，提升写入效... ......
CloudCanal x OceanBase 数据迁移同步优化
简述 CloudCanal 去年支持 OceanBase 数据迁移同步能力后，随着使用用户增多以及问题反馈，近期对该能力进行了一轮较大规模的优化。 本篇文章简要介绍这些优化点，以及未来该能力的演进方向。 优化点 大幅提升同步性能 CloudCanal 目前使用 OceanBase LogProxy ......
StarRocks 3.0 集群安装手册
本文介绍如何以二进制安装包方式手动部署最新版 StarRocks 3.0集群。 什么是 StarRocks StarRocks 是新一代极速全场景 MPP (Massively Parallel Processing) 数据库。StarRocks 的愿景是能够让用户的数据分析变得更加简单和敏捷。用户 ......
CentOS系统使用docker-compose安装Doris数据库
doris当前最新版本为1.2.3 1、docker与docker-compose安装 docker安装：CentOS安装Docker docker-compose安装：docker-compose安装与使用 2、doris相关下载 1）doris-be、doris-fe 2） 3、修改 vi /e ......
多库多表场景下使用 Amazon EMR CDC 实时入湖最佳实践
一、前言 CDC(Change Data Capture) 从广义上讲所有能够捕获变更数据的技术都可以称为 CDC，但本篇文章中对 CDC 的定义限定为以非侵入的方式实时捕获数据库的变更数据。例如：通过解析 MySQL 数据库的 Binlog 日志捕获变更数据，而不是通过 SQL Query 源表捕 ......
步步高：starrocks 部署记录
1、在虚拟机安装CENOTS7； 2、配置网卡IP地址为手动； 3、开启SSH访问方式； 4、安装 java ,mysql 5、解压 安装starrocks ......
doris 部署
doris 部署 官方文档 https://doris.apache.org/zh-CN/docs/summary/basic-summary 下载doris uname -a 查看CPU架构信息 cat /proc/cpuinfo 查看flags中有无 avx2 ,判断是否支持 下载对应版本dor ......
doris odbc连接PostgreSQL外部表异常
环境 CPU: x86_64 操作系统: ArchLinux(单节点, 虚拟机, in vmware workstation 16 player) Kernel: Linux archlinux 6.2.9-arch1-1 doris docker版本: apache/doris 1.2.1-be- ......
Apache/doris docker启动异常
环境 CPU: x86_64 操作系统: ArchLinux(单节点, 虚拟机, in vmware workstation 16 player) Kernel: Linux archlinux 6.2.9-arch1-1 doris docker版本: apache/doris 1.2.2-be- ......
CloudCanal 落地 DB2 数据迁移同步功能
简述 Db2 是一款具有悠久历史的关系型数据库，由 IBM 公司开发和维护，广泛应用于金融级业务场景。 CloudCanal 近期提供了 Db2 为源端的数据迁移同步 功能，用户可以便利地将 Db2 中数据实时同步到其他数据库，实现数据更广泛、更实时的应用。 功能介绍 目标数据库和能力 | 目标端数 ......
doris日常维护
1.分区相关 创建分区表CREATE TABLE `app_message_all_new` ( `user_id` bigint(20) NOT NULL, `message_type` int(11), `massive_type` int(11), `status` int(11), `del ......
使用 Alluxio 优化 EMR 上 Flink Join
业务背景&痛点 流式处理的业务场景，经常会遇到实时消息数据需要与历史存量数据关联查询或者聚合，比如电商常见的订单场景，订单表做为实时事实表，是典型的流式消息数据，通常会在 kafka 中，而客户信息，商品 SKU 表是维度表，通常存在业务数据库或者数仓中，是典型的离线数据。实时订单数据在实时处理时通 ......
火山引擎 EMR StarRocks 场景案例分享
更多技术交流、求职机会，欢迎关注字节跳动数据平台微信公众号，回复【1】进入官方交流群 日前 ，火山引擎数智平台（VeDI）旗下产品 E-MapReduce（简称“EMR”）正式上线 StarRocks 集群，为企业客户带来业界领先的引擎性能和产品使用体验。 StarRocks 在业务侧可支撑报表系统 ......