水木社区手机版
首页
|版面-编程技术(Programming)|
新版wap站已上线
展开
|
楼主
|
同主题展开
|
溯源
|
返回
上一篇
|
下一篇
|
同主题上篇
|
同主题下篇
主题:Re: 测试了一下不同硬件平台LLM的性能
iwannabe
|
2025-10-24 17:37:21
|
应该不至于,hw是生产环境,gpustack是一直加载的
云主机反而是刚装好。
另外,llm用的不是相同的模型,有一个是nl2sql的
【 在 adamhj 的大作中提到: 】
: 我看这个测试华为的数据里,token数和时间不是线性的,感觉像是载入模型花了不少
: 时间
: 是不是云环境里模型的文件在内存里有缓存,在华为的机器测的时候没有先缓存?
--
修改:iwannabe FROM 111.55.204.*
FROM 111.55.204.*
上一篇
|
下一篇
|
同主题上篇
|
同主题下篇
选择讨论区
首页
|
分区
|
热推
BYR-Team
©
2010.
KBS Dev-Team
©
2011
登录完整版