所以在 GitHub 上有开源团队构建了 Web-LLM 项目,项目
项目地址 :https://github.com/mlc-ai/web-llm
演示地址:https://mlc.ai/web-llm/#chat-demo
注 :演示聊天使用的基于机器模型是 vicuna-7b-v0。
这个项目还在开发中,安装直接利用 WebGPU 特性运行 。本地
必要条件 :Google Chrome 113.0+、聊天蓝点一切都在浏览器内运行,人开 显存至少需要 6.4GB,发中显存至少为 6.4GB ,开源
项目不需要服务器支持、基于机器有兴趣的安装开发者可以参与该项目 。而且可以保护隐私 ,本地![[开源项目] 基于WebGPU的聊天蓝点免安装本地AI聊天机器人 (开发中)](https://img.lancdn.com/landian/2023/04/98381.png)
当然由于是相当于在本地运行的 ,该项目可以让开发者基于浏览器调用本机显卡算力 。人开即基于 Web 的大型语言模型,
这个项目可以大幅度简化搭建 AI 聊天机器人的步骤,使用不同的模型显存要求可能还会增加。
早前谷歌在 Google Chrome Canary 版里发布了 WebGPU 项目,所以显卡性能至关重要,所以如果你的显卡显存比较小的话可能无法运行。因为这个 AI 模型是 “你” 控制的,你提交的数据不会被共享给开发者进行模型训练 。不需要安装 、
邮箱:admin@aa.com
电话:020-123456789
传真:020-123456789
Copyright © 2026 Powered by 追梦心灵网 https://ifksf.com/