排行
数据库百科
核心案例
行业报告
月度解读
大事记
产业图谱
中国数据库
向量数据库
时序数据库
实时数据库
搜索引擎
空间数据库
图数据库
数据仓库
大调查
2021年报告
2022年报告
年度数据库
2020年openGauss
2021年TiDB
2022年PolarDB
2023年OceanBase
首页
资讯
活动
大会
学习
课程中心
推荐优质内容、热门课程
学习路径
预设学习计划、达成学习目标
知识图谱
综合了解技术体系知识点
课程库
快速筛选、搜索相关课程
视频学习
专业视频分享技术知识
电子文档
快速搜索阅览技术文档
文档
问答
服务
智能助手小墨
关于数据库相关的问题,您都可以问我
数据库巡检平台
脚本采集百余项,在线智能分析总结
SQLRUN
在线数据库即时SQL运行平台
数据库实训平台
实操环境、开箱即用、一键连接
数据库管理服务
汇聚顶级数据库专家,具备多数据库运维能力
数据库百科
核心案例
行业报告
月度解读
大事记
产业图谱
我的订单
登录后可立即获得以下权益
免费培训课程
收藏优质文章
疑难问题解答
下载专业文档
签到免费抽奖
提升成长等级
立即登录
登录
注册
登录
注册
首页
资讯
活动
大会
课程
文档
排行
问答
我的订单
首页
专家团队
智能助手
在线工具
SQLRUN
在线数据库即时SQL运行平台
数据库在线实训平台
实操环境、开箱即用、一键连接
AWR分析
上传AWR报告,查看分析结果
SQL格式化
快速格式化绝大多数SQL语句
SQL审核
审核编写规范,提升执行效率
PLSQL解密
解密超4000字符的PL/SQL语句
OraC函数
查询Oracle C 函数的详细描述
智能助手小墨
关于数据库相关的问题,您都可以问我
精选案例
新闻资讯
云市场
登录后可立即获得以下权益
免费培训课程
收藏优质文章
疑难问题解答
下载专业文档
签到免费抽奖
提升成长等级
立即登录
登录
注册
登录
注册
首页
专家团队
智能助手
精选案例
新闻资讯
云市场
微信扫码
复制链接
新浪微博
分享数说
采集到收藏夹
分享到数说
首页
/
Deepseek异构集群基于LAXCUS分布式操纵系统可否跑通?
Deepseek异构集群基于LAXCUS分布式操纵系统可否跑通?
LAXCUS分布式操作系统
2025-02-17
102
异构卡+集群模式,Deepseek怎样才能跑起来,可能大家对于这个问题有些不理解,Deepseek就是蒸馏模型,就是用来做私有化部署的,为什么要进行异构+集群部署呢,带着诸多疑问,我突击采访了正在敲代码的vock,躺床上敲代码的宇哥,熬了一宿敲代码的磊子和铭哥.
前言:2025年春节,ds横空出世。中美两国都在进行宏达的经济体制转型,美国在进行自我革命,没错,大家看的没错,美国现在就是在进行zhengfu层面的革命。我们也在进行经济转型,土地财政向股权财政过渡,科技和消费是今年的重头戏,代表科技的deepseek和代表消费的哪吒,相当层面上代表了某些方面的信心和决心,我们针对deepseek,更是关心laxcus的开发者,做了一个对deepseek延伸思考。采访如下。
我: 来来来,看看上面的问题。
vock:(瞟了我一眼)集群的话,可以用并行处理的方法提高这个计算效率,这是最根本的。集群N台,达到N的平方的计算效率。
我:异构问题呢?
vock:异构其实也是一样,它主要是那个CPU跟GPU之间的这个协同,CPU呢,主要负责一个中心调度的工作,大脑的工作。GPU,说主要负责具体干活,大概是这么一个情况。如果完完全全靠CPU,它的计算能力是不足的,所以要那个GPU来加持。
我:宇哥,deepseek目前不能实现一个异构协同。不同的GPU或者GPU和CPU混合,无法实现协同运作?
宇哥:...........................(
肯定的眼神看着我
)
vock:再说ds的问题啊,就按照老刘之前说的那个,现在ds是不能实现这个异构的。就是说,我要么是一堆如英伟达的显卡来跑,要么什么CPU来跑。但是我这某台机子有CPU,或者某台机子没有GPU。但是我还是想通过这种并行的方式,或者提高计算效率方式,让他们一起工作。这个目前ds 做不到,而我们可以把这个事情给它实现了,就是后续要
通过分我们这个分布式命令来完成这个工作,不管他有没有GPU或者有没有NPU,我们都可以让他协同起来。
我:现在ds全国都在接入,都是进行私有化部署,未来集群部署,甚至是异构+集群部署的模式会爆发吗?
铭哥:ds不等同于毁掉算力,所谓的算力平权其实是让AI走进寻常百姓家,更多的大规模的算力训练需求和海量的推理需求还未启动,现在只是引爆了,未来还有很远很长的路要走,所以以ds为代表的私有化部署仅仅是个爆点,后面大量的需求启动,高效利用现有资源和购买异构资源会是一个很巨大的市场,已有的资源不能浪费,未来的服务器也是多元化的,所以异构加集群一定会爆发的。
集群提高算力增效 异构提升灵活 盘活资源
我:目前我们LAXCUS实现ds异构加集群的方式具体是什么?之前积累的6.0的几百条分布式命令移植到7.0多少就能实现?还要多久?
(这是开发者要我问的,不是我问的?)
vock:目前将6.0差不多400条分布式命令代码移植过来的话,主要是兴姐(大姐大)在做,大概移植20%--30%的量,主要是集群方向的,就可以让开发者通过分布式命令实现调度。是从技术理论、经验和成本上讲,我们LAXCUS 是可以做到的。
我:
兴姐,LAXCUS6.0几百条分布式命令30%的移植工作量,有没有压力?
(已经瑟瑟发抖中~~~~)
大姐大:
嗯
~~~
你这个图配的不错
~~~~
我:
好好好~~ 磊子,你要出门买啥,等等我~~
磊子:
==========================================
最后几行,纯属杜撰。
商务合作股权洽谈,联系上面微信哦
文章转载自
LAXCUS分布式操作系统
,如果涉嫌侵权,请发送邮件至:contact@modb.pro进行举报,并提供相关证据,一经查实,墨天轮将立刻删除相关内容。
评论
领墨值
有奖问卷
意见反馈
客服小墨