IT之家 5 月 2 日消息,目前大多数 AI 聊天机器人都需要连接到云端进行处理,即使可以本地运行的也配置要求极高。那么是否有轻量化的、无需联网的聊天机器人呢?
一个名为 MLC LLM 的全新开源项目已在 GitHub 上线,完全本地运行无需联网,甚至集显老电脑、苹果 iPhone 手机都能运行。
▲ 图源 tomshardware此外,ThinkPad X1 Carbon(第 6 代)也测试成功运行 MLC LLM,这是一款搭载 i7-8550U 处理器的笔记本,没有独立显卡,配有英特尔 UHD 620 GPU。MLC LLM 在 PC 平台需要通过命令行运行,外媒测试表现一般般,回复时间需要将近 30 秒,而且几乎没有连续对话能力,希望能在后续版本中得到改进吧。
▲ 图源 tomshardware相关文章
猜你喜欢