# YOLOv6量化模型 C++部署示例 本目录下提供的`infer.cc`,可以帮助用户快速完成YOLOv6s量化模型在CPU/GPU上的部署推理加速. ## 部署准备 ### FastDeploy环境准备 - 1. 软硬件环境满足要求,参考[FastDeploy环境要求](../../../../../../docs/cn/build_and_install/download_prebuilt_libraries.md) - 2. FastDeploy Python whl包安装,参考[FastDeploy Python安装](../../../../../../docs/cn/build_and_install/download_prebuilt_libraries.md) ### 量化模型准备 - 1. 用户可以直接使用由FastDeploy提供的量化模型进行部署. - 2. 用户可以使用FastDeploy提供的[一键模型量化工具](../../../../../../tools/quantization/),自行进行模型量化, 并使用产出的量化模型进行部署. ## 以量化后的YOLOv6s模型为例, 进行部署 在本目录执行如下命令即可完成编译,以及量化模型部署. ```bash mkdir build cd build wget https://bj.bcebos.com/fastdeploy/release/cpp/fastdeploy-linux-x64-0.3.0.tgz tar xvf fastdeploy-linux-x64-0.3.0.tgz cmake .. -DFASTDEPLOY_INSTALL_DIR=${PWD}/fastdeploy-linux-x64-0.3.0 make -j #下载FastDeloy提供的yolov6s量化模型文件和测试图片 wget https://bj.bcebos.com/paddlehub/fastdeploy/yolov6s_quant.tar tar -xvf yolov6s_quant.tar wget https://gitee.com/paddlepaddle/PaddleDetection/raw/release/2.4/demo/000000014439.jpg # 在CPU上使用Paddle-Inference推理量化模型 ./infer_demo yolov6s_quant 000000014439.jpg 0 # 在GPU上使用TensorRT推理量化模型 ./infer_demo yolov6s_quant 000000014439.jpg 1 ```