Skip to content

Latest commit

 

History

History
52 lines (20 loc) · 1.07 KB

README_cn.md

File metadata and controls

52 lines (20 loc) · 1.07 KB

Portable LLama2

en | 中文

本项目通过 wasm 技术将 LLama2 模型加载到浏览器中,实现web端的高效推理运算。 在线demo

截图:

screenshot

模型训练

( 整理中 coming soon ... )

wasm 编译

( 整理中 coming soon ... )

客户端安装

  1. 安装node环境

  2. 安装node包 npm install

  3. 运行web服务 npm run start

  4. 根据提示,打开网址: http://localhost:3000/

相关资源

Models | Git | Gitee

其它

在垂直细分场景下,portable 模型在算力节省,响应提速,数据隐私等方面有着明显的优势,对 portable 模型技术方向感兴趣的朋友,欢迎一起交流 ~

wx:

qrcode