Files
FastDeploy/examples/vision/headpose/fsanet/cpp
WJJ1995 2d508a40ec [Doc] Fixed Typo in headpose (#544)
* add paddle_trt in benchmark

* update benchmark in device

* update benchmark

* update result doc

* fixed for CI

* update python api_docs

* update index.rst

* add runtime cpp examples

* deal with comments

* Update infer_paddle_tensorrt.py

* Add runtime quick start

* deal with comments

* fixed reused_input_tensors&&reused_output_tensors

* fixed docs

* fixed headpose typo

* fixed typo

Co-authored-by: Jason <928090362@qq.com>
2022-11-09 17:03:49 +08:00
..
2022-11-04 15:49:28 +08:00
2022-11-04 15:49:28 +08:00
2022-11-09 17:03:49 +08:00

FSANet C++部署示例

本目录下提供infer.cc快速完成FSANet在CPU/GPU以及GPU上通过TensorRT加速部署的示例。

在部署前,需确认以下两个步骤

以Linux上CPU推理为例在本目录执行如下命令即可完成编译测试保证 FastDeploy 版本0.6.0以上(x.x.x >= 0.6.0)支持FSANet模型

mkdir build
cd build
wget https://bj.bcebos.com/fastdeploy/release/cpp/fastdeploy-linux-x64-x.x.x.tgz
tar xvf fastdeploy-linux-x64-x.x.x.tgz
cmake .. -DFASTDEPLOY_INSTALL_DIR=${PWD}/fastdeploy-linux-x64-x.x.x
make -j

#下载官方转换好的 FSANet 模型文件和测试图片
wget https://bj.bcebos.com/paddlehub/fastdeploy/fsanet-var.onnx
wget https://bj.bcebos.com/paddlehub/fastdeploy/headpose_input.png
# CPU推理
./infer_demo --model fsanet-var.onnx --image headpose_input.png --device cpu
# GPU推理
./infer_demo --model fsanet-var.onnx --image headpose_input.png --device gpu
# GPU上TensorRT推理
./infer_demo --model fsanet-var.onnx --image headpose_input.png --device gpu --backend trt

运行完成可视化结果如下图所示

以上命令只适用于Linux或MacOS, Windows下SDK的使用方式请参考:

FSANet C++接口

FSANet 类

fastdeploy::vision::headpose::FSANet(
        const string& model_file,
        const string& params_file = "",
        const RuntimeOption& runtime_option = RuntimeOption(),
        const ModelFormat& model_format = ModelFormat::ONNX)

FSANet模型加载和初始化其中model_file为导出的ONNX模型格式。 参数

  • model_file(str): 模型文件路径
  • params_file(str): 参数文件路径当模型格式为ONNX时此参数传入空字符串即可
  • runtime_option(RuntimeOption): 后端推理配置默认为None即采用默认配置
  • model_format(ModelFormat): 模型格式默认为ONNX格式

Predict函数

FSANet::Predict(cv::Mat* im, HeadPoseResult* result)

模型预测接口,输入图像直接输出头部姿态预测结果。

参数

  • im: 输入图像注意需为HWCBGR格式
  • result: 头部姿态预测结果, HeadPoseResult说明参考视觉模型预测结果

类成员变量

用户可按照自己的实际需求,修改下列预处理参数,从而影响最终的推理和部署效果

  • size(vector<int>): 通过此参数修改预处理过程中resize的大小包含两个整型元素表示[width, height], 默认值为[112, 112]