扫一扫分享
Paddle.js 是百度 PaddlePaddle 的 web 方向子项目,是一个运行在浏览器中的开源深度学习框架。Paddle.js 可以加载提前训练好的 paddle 模型,或者将 paddle hub 中的模型通过 Paddle.js 的模型转换工具 paddlejs-converter 变成浏览器友好的模型进行在线推理预测使用。目前,Paddle.js 可以在支持 webGL/webGPU 的浏览器中运行。
Paddle.js项目基于Atom系统构建,该系统是一个通用框架,可支持WebGL上的GPGPU操作。 它非常模块化,可以通过利用WebGL来更快地执行计算任务。
paddlejs-core,推理引擎的核心部分,负责整个引擎的推理流程运行
paddlejs-converter,模型转换工具,将 PaddlePaddle 模型(或称为 fluid 模型)转化为浏览器友好的格式
paddlejs-models,封装好的模型工程库,提供简易 api 方便用户落地 AI 效果
paddlejs-examples,Paddle.js AI 效果样例
paddlejs-mediapipe,数据流处理工具库,支持 webrtc 视频流、轻量 opencv 等工具
paddlejs-backend-webgl,webgl 方案,目前算子支持最多的方案,算子支持列表
paddlejs-backend-webgpu,webgpu 方案,该计算方案仍然是实验阶段,WebGPU 仍处于草案阶段 ,算子支持列表
paddlejs-backend-cpu,cpu 方案,算子支持列表
paddlejs-backend-nodegl, nodegl 方案, 在 Node.js 环境中执行预测, 使用 webgl 方案的算子 算子支持列表
PC浏览器: Chrome、Safari、Firefox
手机浏览器: Baidu App、Safari、Chrome、UC and QQ Browser
小程序: 百度小程序、微信小程序
系统: MacOS、Windows
上面的转换脚本生成两种类型的文件:
model.json (数据流图和权重清单文件)
chunk_x.dat (二进制权重文件的集合)
手机预览