FastDeploy:基于飞桨的大语言模型与视觉语言模型推理部署工具包项目

High-performance Inference and Deployment Toolkit for LLMs and VLMs based on PaddlePaddle

分支36Tags17

项目介绍

一款易于使用且高效的深度学习模型部署工具包,适用于☁️云、📱移动设备以及📹边缘计算环境。涵盖图像、视频、文本和音频等20+主流应用场景,以及150+端到端的优化、支持多平台和多框架的SOTA模型。【此简介由AI生成】

定制我的领域
483.71 K758访问 GitHub