U的地A点网天机目免安 基器人I聊 蓝源项于W开开发装本中

项目地址 ：https://github.com/mlc-ai/web-llm

演示地址：https://mlc.ai/web-llm/#chat-demo

注：演示聊天使用的开源模型是 vicuna-7b-v0。不需要服务器支持、项目根据开源团队说明 ，基于机器

这个项目可以大幅度简化搭建 AI 聊天机器人的安装步骤，所以如果你的本地显卡显存比较小的话可能无法运行 。使用不同的聊天蓝点模型显存要求可能还会增加。因为这个 AI 模型是人开 “你” 控制的 ，显存至少为 6.4GB ，发中

所以在 GitHub 上有开源团队构建了 Web-LLM 项目，开源直接利用 WebGPU 特性运行。项目

早前谷歌在 Google Chrome Canary 版里发布了 WebGPU 项目，基于机器而且可以保护隐私，安装

本地一切都在浏览器内运行，聊天蓝点你提交的人开数据不会被共享给开发者进行模型训练。

当然由于是相当于在本地运行的
，该项目可以让开发者基于浏览器调用本机显卡算力。即基于 Web 的大型语言模型，不需要安装、

必要条件：Google Chrome 113.0+、所以显卡性能至关重要
，

这个项目还在开发中， 显存至少需要 6.4GB，有兴趣的开发者可以参与该项目。