凯发k8国际首页登录科技
微信号:UnionScience
扫描关注,更多最新动态
IT之家 5 月 2 日消息◈✿◈,目前大多数 AI 聊天机器人都需要连接到云端进行处理◈✿◈,即使可以本地运行的也配置要求极高◈✿◈。那么是否有轻量化的◈✿◈、无需联网的聊天机器人呢?
一个名为MLC LLM的全新开源项目已在 GitHub 上线◈✿◈,完全本地运行无需联网◈✿◈,甚至集显老电脑◈✿◈、苹果 iPhone 手机都能运行◈✿◈。
MLC LLM 项目介绍称◈✿◈:“MLC LLM 是一种通用解决方案凯发k8官方网站◈✿◈,它允许将任何语言模型本地部署在一组不同的硬件后端和本地应用程序上◈✿◈,此外还有一个高效的框架◈✿◈,供每个人进一步优化自己用例的模型性能TIKTOK黄版破解◈✿◈。一切都在本地运行◈✿◈,无需服务器支持凯发k8官方网站凯发k8官方网站◈✿◈,并通过手机和笔记本电脑上的本地 GPU 加速◈✿◈。我们的使命是让每个人都能在设备上本地开发◈✿◈、优化和部署 AI 模型◈✿◈。”
IT之家查询 GitHub 页面发现◈✿◈,这个项目的开发者来自卡内基梅隆大学的 Catalyst 计划TIKTOK黄版破解TIKTOK黄版破解◈✿◈、SAMPL 机器学习研究小组以及华盛顿大学凯发k8官方网站◈✿◈、上海交通大学和 OctoML 等◈✿◈。他们还有一个名为Web LLM的相关项目TIKTOK黄版破解TIKTOK黄版破解◈✿◈,该项目可以完全在网络浏览器中运行 AI 聊天机器人◈✿◈。
此外◈✿◈,ThinkPad X1 Carbon(第 6 代)也测试成功运行 MLC LLM◈✿◈,这是一款搭载 i7-8550U 处理器的笔记本◈✿◈,没有独立显卡TIKTOK黄版破解◈✿◈,配有英特尔 UHD 620 GPU◈✿◈。MLC LLM 在 PC 平台需要通过命令行运行◈✿◈,外媒测试表现一般般◈✿◈,回复时间需要将近 30 秒◈✿◈,而且几乎没有连续对话能力◈✿◈,希望能在后续版本中得到改进吧凯发k8官方网站◈✿◈。k8凯发◈✿◈。智慧生活◈✿◈,ChatGPT◈✿◈,凯发k8◈✿◈,
0871-63302133 63302233
昆明市盘龙区新兴路霖岚国际凯发k8国际首页登录
http://www.jinfupenquan.com