
本地 llama.cpp 和 ollama 跑 相同 模型,效果不一样 paranoiagu • 162 天前 • 最后回复来自 tool3d | 7 |
![]() |
打算用 AI 来做企业知识库,最佳的组合是什么? xubingok • 4 天前 • 最后回复来自 GavinY | 20 |
![]() |
单卡 2080ti 22gb 装机其他怎么配啊 NoahBishop • 167 天前 • 最后回复来自 NoahBishop | 8 |
![]() |
本地跑 AI,该买什么设备,不想折腾又想省点钱, mac m4 怎样,有哪些坑需要注意 MHPSY • 167 天前 • 最后回复来自 tomczhen | 1 |
![]() |
本地 AI 工作站装机 fcten • 168 天前 • 最后回复来自 coefuqin | 17 |
![]() |
mcp 支持力度探讨 nl101531 • 170 天前 • 最后回复来自 nl101531 | 4 |
![]() |
100+全语种翻译 , 海量翻译数据,并且有速度要求。 有什么经济实惠的本地 LLM 方案么? zzNaLOGIC • 171 天前 • 最后回复来自 paopjian | 11 |
请教模型部署和管理的问题 Legman • 171 天前 • 最后回复来自 Legman | 4 |
![]() |
ubuntu + 双 N 卡 本地部署 DS-R1,性能优化请教 crac • 169 天前 • 最后回复来自 crac | 6 |
通过 dify 搭建了基于企业内部知识库的问答机器人,但是效果非常差 maoqiucute • 89 天前 • 最后回复来自 cshaptx4869 | 15 |
![]() |
本地部署 LLM 并启用网络搜索,有什么现成的方案吗?
villivateur PRO |
5 |
![]() |
Deepseek R1 671B 本地部署方案 mcsddjyd • 142 天前 • 最后回复来自 businessch | 15 |
无 GPU 服务器部署小模型框架求推荐(需兼容 Kafka 数据流) Daybyedream • 175 天前 • 最后回复来自 Daybyedream | 4 |
跑 AI 模型,显卡的购买咨询 xiniu • 179 天前 • 最后回复来自 Foxii | 23 |
半个小时前, ollama 上线了目前单显卡里,最强的中小模型 gemma3 tool3d • 130 天前 • 最后回复来自 mizuhashi | 51 |
![]() |
一块 4090,怎么来评估部署大模型后(假设为 DeepSeek-R1-Distill-Qwen-7B)的并发数?、、 bushnerd • 181 天前 • 最后回复来自 jroger | 1 |
![]() |
请问此配置如何加速 ollama ds-r1 32b 的速度,好慢 littlemis • 182 天前 • 最后回复来自 littlemis | 4 |
MacMin M4 +国补很香,想买一个内存大一点的跑 pytorch 训练是否可行 python35 • 173 天前 • 最后回复来自 hefish | 3 |
![]() |
如何估算一个大模型需要用到什么性能配置的硬件? zcm3579 • 182 天前 • 最后回复来自 ChristopherY | 16 |
![]() |
A30 显卡-24G 显存,推荐部署什么大模型呢 ZimaBlueee • 173 天前 • 最后回复来自 hefish | 8 |