OpenBuddy

OpenBuddy-LLaMA2-70B的三种部署方式

根据实际测试,加载模型需要130G显存,最低需要4张A100*40G显卡。 1.基于Transformers库推理: 首先安装最新版本的transformers: git clone https://github.com/huggingface/transformers.git cd transfo ......
OpenBuddy-LLaMA OpenBuddy 方式 LLaMA 70
共1篇  :1/1页 首页上一页1下一页尾页