heliqi ac2750910e Develop encryption (#934) il y a 4 ans
..
cmake d4f745add9 add dygrah il y a 4 ans
demo ac2750910e Develop encryption (#934) il y a 4 ans
docs ac2750910e Develop encryption (#934) il y a 4 ans
encryption f0ba8601f6 Develop encryption (#919) il y a 4 ans
model_deploy ac2750910e Develop encryption (#934) il y a 4 ans
scripts 4c4a1ba1e6 fix trt6 bug (#927) il y a 4 ans
tools c39072c9e8 add build lib (#893) il y a 4 ans
CMakeLists.txt ac2750910e Develop encryption (#934) il y a 4 ans
CMakeSettings.json f0ba8601f6 Develop encryption (#919) il y a 4 ans
README.md 7b5df2cda9 Develop doc (#924) il y a 4 ans

README.md

PaddlePaddle模型C++部署

本目录下代码,目前支持以下飞桨官方套件基于PaddleInference的部署。

模型套件支持

硬件支持

  • CPU(linux/windows)
  • GPU(linux/windows)
  • Jetson(TX2/Nano/Xavier)

文档

PaddleInference编译说明

模型部署说明

模型预测示例

API说明

ONNX模型部署

Paddle的模型除了直接通过PaddleInference部署外,还可以通过Paddle2ONNX转为ONNX后使用第三方推理引擎进行部署,在本目录下,我们提供了基于Triton和TensorRT两个引擎的部署支持。