国际会议 会议 国际 分布式

使用docker搭建deepspeed多机多卡分布式微调大模型环境

前置环境:两台可以互通的centos服务器(服务器1、服务器2),docker,NVIDIA驱动 docker创建overlay共享网络 1)选用服务器1作为manage节点进行初始化,执行docker swarm init Swarm initialized: current node (ly4d ......
分布式 deepspeed 模型 环境 docker

中间件 ZK分布式专题与Dubbo微服务入门 4-2 session的基本原理与create命令的使用

0 课程地址 https://coding.imooc.com/lesson/201.html#mid=12697 1 重点关注 1.1 watcher常用使用场景 集群中统一资源配置 2 课程内容 3 Coding ......
分布式 中间件 命令 原理 session

分布式事务管理

南航航班号sno,日期sdate,国航航班号zno,日期zdate,姓名uname,身份证号uid,用户账号uno,电商账号bno 根代理ROOT begin transcation; input(sno, sdate, zno, zdate, uname, uid, uno, bno); EXEC ......
事务管理 分布式 事务

中间件 ZK分布式专题与Dubbo微服务入门 4-7 watcher常用使用场景

0 课程地址 https://coding.imooc.com/lesson/201.html#mid=12703 1 重点关注 1.1 watcher常用使用场景 集群中统一资源配置 2 课程内容 3 Coding ......
分布式 中间件 场景 常用 watcher

中间件 ZK分布式专题与Dubbo微服务入门 4-4 理解watcher机制

0 课程地址 https://coding.imooc.com/lesson/201.html#mid=12700 1 重点关注 1.1 理解watcher机制 针对每个节点的操作,都会有一个监督者 wathcer 当监控的某个对象 ( znode) 发生了变化,则触发watcher事件 zk中的w ......
分布式 中间件 机制 watcher 专题

分布式架构设计思路和要点

分布式架构设计 设计分布式架构时,需要考虑以下几个关键思路和要点: 弹性和可伸缩性:分布式架构应具备弹性和可伸缩性,能够根据负载情况自动调整资源分配。这可以通过采用水平扩展和自动化调度等技术实现。 容错和高可用性:分布式系统应具备容错和高可用性能力,即使部分组件或节点发生故障,整个系统仍能正常运行。 ......
分布式 架构 要点 思路

分布式锁

分布式锁 在多线程环境中,如果多个线程同时访问共享资源(例如商品库存、外卖订单),会发生数据竞争,可能会导致出现脏数据或者系统问题,威胁到程序的正常运行。 为什么需要分布式锁? 举个例子,假设现在有 100 个用户参与某个限时秒杀活动,每位用户限购 1 件商品,且商品的数量只有 3 个。如果不对共享 ......
分布式

CSIG青年科学家会议圆满举行,合合信息打造智能文档处理融合研究新范式

近期,第十九届中国图象图形学学会青年科学家会议(简称“会议”)在广州召开。会议由中国图象图形学学会(CSIG)主办,琶洲实验室、华南理工大学、中山大学、中国图象图形学学会青年工作委员会承办。会议面向国际学术前沿与国家战略需求,致力于支持图象图形领域的优秀青年学者,提供学术交流与研讨的平台,促进学者之 ......
范式 科学家 青年 文档 会议

使用 vve-i18n-cli 来一键式自动化实现国际化

不可否认的是,如果没有这个自动化脚本,根本就没法在领导期望的时间内完成国际化的工作 自从有了这个脚本后,从以前的跟领导评估说要 4 天的国际化工作量到现在只评估了 1 天工作量,实际上跑下脚本分分钟就解决了,我还可以愉快的滑一天水,领导开心,我也开心~ ......
国际 vve-i n-cli vve cli

太强了!全新一代分布式任务调度与计算框架!

PowerJob(原 OhMyScheduler) —— 全新一代分布式调度与计算框架,能让您轻松完成作业的调度与繁杂任务的分布式计算。 ......
分布式 一代 框架 任务 全新

分布式存储ceph——(6)ceph osd故障硬盘更换

故障状态: 实施更换步骤: (1)关闭ceph集群数据迁移: osd硬盘故障,状态变为down。在经过mod osd down out interval 设定的时间间隔后,ceph将其标记为out,并开始进行数据迁移恢复。为了降低ceph进行数据恢复或scrub等操作对性能的影响,可以先将其暂时关闭 ......
分布式 ceph 故障 硬盘 osd

分布式存储ceph——(5)ceph 添加/删除osd

一、添加osd: 当前ceph集群中有如下osd,现在准备新添加osd: (1)选择一个osd节点,添加好新的硬盘: (2)显示osd节点中的硬盘,并重置新的osd硬盘: 列出节点磁盘:ceph-deploy disk list rab1 擦净节点磁盘:ceph-deploy disk zap ra ......
分布式 ceph osd

分布式存储ceph——(4)ceph常用命令

1、查看ceph集群配置信息 1 ceph daemon /var/run/ceph/ceph-mon.$(hostname -s).asok config show 2、在部署节点修改了ceph.conf文件,将新配置推送至全部的ceph节点 1 ceph-deploy --overwrite-c ......
分布式 ceph 命令 常用

如何用 vscode 捞出还未国际化的中文词条

做国际化一个很头疼的坑就是,你不知道项目里到底还有哪些中文词条没有国际化处理 纯靠人工去检查不现实,也不靠谱,而且浪费资源 所以还是得通过脚本工具来检查,思路是: 先保存好本地代码变更,准备好一个无文件变更的本地环境 再通过脚本把代码里的非展示性中文移除掉 注释里的中文、console 里的中文,已 ......
词条 vscode 国际

中间件 ZK分布式专题与Dubbo微服务入门 4-1 zookeeper常用命令行操作

0 课程地址 https://coding.imooc.com/lesson/201.html#mid=12698 1 重点关注 1.1 常用命令操作 ./zkCli.sh 启动客户端ls / 查看节点信息ls2 / 查看节点状态信息stat / 查看节点状态信息ls2 = ls+statget / ......
分布式 中间件 zookeeper 命令 常用

中间件 ZK分布式专题与Dubbo微服务入门 3-3 zookeeper的作用体现

0 课程地址 https://coding.imooc.com/lesson/201.html#mid=12696 1 重点关注 1.1 zookeeper的作用 master节点选举,主节点挂了以后,从节点就会接手工作,并且保证这个节点是唯一的,这也是所谓首脑模式,从而保证我们的集群是高可用的 统 ......
分布式 中间件 zookeeper 作用 专题

中间件 ZK分布式专题与Dubbo微服务入门 3-2 zk客户端连接关闭服务端,查看znode

0 课程地址 https://coding.imooc.com/lesson/201.html#mid=12695 1 重点关注 1.1 zookeeper客户端操作命令 启动 ./zkCli.sh 停止 Ctrl C 其他命令 启动后 help 查看节点 ls / 2 课程内容 2.1 操作步骤 ......
分布式 中间件 客户端 客户 专题

中间件 ZK分布式专题与Dubbo微服务入门 3-1 zk数据模型介绍

0 课程地址 https://coding.imooc.com/lesson/201.html#mid=12694 1 重点关注 1.1 zookeeper数据模型概念介绍 zk的数据模型也可以理解为linux/unix的文件目录 : /usr/local/. 每一个节点都称之为znode,它可以有 ......
分布式 中间件 模型 专题 数据

一图看懂深圳产业分布

龙华区的产业关键词离不开:电子信息、人工智能、生命健康、时尚创意; 坪山区的主导产业为:生命健康、新能源产业、新一代信息技术产业; 光明区牢牢抓紧:智能产业、新材料产业、生命科学产业以及现代服务业等“3+1”产业; 龙岗区则以:ICT、AIoT、电子元器件、绿色能源、生命科学、创意生活等六大产业集群 ......
产业

中间件 ZK分布式专题与Dubbo微服务入门 2-4 zookeeper配置文件介绍,运行zk

0 课程地址 https://coding.imooc.com/lesson/201.html#mid=12692 1 重点关注 1.1 最常用的目录 bin 执行启动关闭zookeeper命令 conifg 进行配置文件配置 recipes 案例代码 docs 文档参考 2 课程内容 2.1 zo ......
分布式 中间件 zookeeper 文件 专题

泛CG第67期直播:国际CG盛会的国人研发团队新技术分享

Renderbus瑞云渲染为大家带来了泛CG第67期直播,直播内容为:国人研发团队新技术分享内容,让大家了解到CG行业最新发展动态! 直播预告 国际CG盛会的国人研发团队新技术分享 1:影眸在内容生成/数字人/3D生成方面的探索 2:电影音效制作中的脚步点检测 3:SIGGRAPH与SIGGRAPH ......
盛会 国人 新技术 团队 国际

分布式存储ceph——(3)openstack对接ceph存储后端

ceph对接openstack环境 一、使用rbd方式提供存储如下数据: (1)image:保存glanc中的image; (2)volume存储:保存cinder的volume;保存创建虚拟机时选择创建新卷; (3)vms的存储:保存创建虚拟机时不选择创建新卷; 二、实施步骤: (1)客户端也要有 ......
分布式 ceph openstack

分布式日志追踪ID实战 | 京东物流技术团队

本文通过介绍分布式应用下各个场景的全局日志ID透传思路,以及介绍分布式日志追踪ID简单实现原理和实战效果,从而达到通过提高日志查询排查问题的效率。 背景 开发排查系统问题用得最多的手段就是查看系统日志,相信不少人都值过班当过小秘吧:给下接口和出入参吧,麻烦看看日志里的有没有异常信息啊等等,但是在并发 ......
物流技术 分布式 实战 团队 物流

助力项目快捷实现国际化,造个多语言轮子

前段时间跟同事吹水聊天时,吐槽一个话题,就是公司项目都需要做多语言,前端后端都需要做。 而且是需要支持8国语言翻译,每次弄起来都特麻烦,每加一个Key就需要去翻译其他7个语言出来添加,每新增一个项目就需要弄一遍多语言资源,重复且枯燥费时的体力活。 项目想法 本项目主打一个一处配置多语言,多处使用的想 ......
轮子 项目 国际

QT6国际化

Qt多国语言做的还是比较人性化,在多国语言中,可以添加几个Ts文件,使用Qt语言家翻译好用,发布成qm文件就可以在程序中直接调用了。步骤如下: 1.创建项目后,添加ts文件 2.在项目中,所有需要进行国际化的字符 都采用Tr(" ") qml中采用 qsTr(" ") 3.项目编写好后,ts是不会自 ......
国际 QT6 QT

中间件 ZK分布式专题与Dubbo微服务入门 2-3 zookeeper文件夹主要目录介绍

0 课程地址 https://coding.imooc.com/lesson/201.html#mid=12690 1 重点关注 1.1 最常用的目录 bin 执行启动关闭zookeeper命令 conifg 进行配置文件配置 recipes 案例代码 docs 文档参考 2 课程内容 2.1 zo ......

中间件 ZK分布式专题与Dubbo微服务入门 2-2 zookeeper下载、安装

0 课程地址 https://coding.imooc.com/lesson/201.html#mid=12686 1 重点关注 1.1 zookeeper的安装 下载zookeeper 在以下链接下载3.4.11 http://archive.apache.org/dist/zookeeper/ ......
分布式 中间件 zookeeper 专题 Dubbo

中间件 ZK分布式专题与Dubbo微服务入门 2-1 JDK的安装(linux)

0 课程地址 https://coding.imooc.com/lesson/201.html#mid=12684 1 重点关注 1.1 jdk的安装 下载jdk 用fileZilla上传jdk到linux环境 home路径下 在home路径下解压压缩包 tar -zxvf jdk-8u202-1i ......
分布式 中间件 专题 Dubbo linux

分布式数据库测试

分布式数据库的测试涉及多个方面,因为它们需要在多个节点上运行、处理大量数据并保证数据一致性和可靠性。以下是测试分布式数据库时可以考虑的不同方向和方法: 功能测试: 基本功能测试:验证数据库的基本功能,如数据插入、查询、更新和删除操作是否正常工作。 事务管理测试:确保分布式事务在不同节点上的协调与管理 ......
分布式 数据库 数据

项目国际化的难点痛点是什么

如果没有相关经验的,经常会以为国际化只有词条相关工作项,这就是第一个坑点:工作量的评估过于乐观,遗漏其他工作项。 但当你真正去开发一个国际化项目后,你会发现,国际化的难点、痛点、坑点远不止表面看到的这些,尤其是后期维护,痛点更大。 相反,词条工作可能都是最轻松的工作了,因为圈子里有各种各样的自动化脚... ......
痛点 难点 项目 国际
共4000篇  :2/134页 首页上一页2下一页尾页