场景描述 本方案适用于使用GPU进行AI在线推理的场 景。在推理之前,模型已经训练完成。例如,刷脸 支付中,我们在刷脸的时候,就是推理的一个过 程。再比如图像分类,目标检测,语音识别,语 义分析等返回结果的过程。 解决问题 使用GPU云服务器搭建推理环境 使用容器服务Kubernetes版构建推理 环境 使用NAS存储模型数据 使用飞天AI加速推理工具加速推理 产品列表 GPU云服务器 容器服务Kubernetes版 NAS共享存储
实例中采用 mobilenet v2已经训练好的模型,来识别图片,实例中成功识别了图片中的熊猫。最佳实践实例 2 使用飞天 AI加速推理工具加速推理过程,提供了两种方式,一种是 http方式,一种是 grpc的调用 方式。发布日期:20220320 III 企业上云实践 基于弹性计算的 AI推理最佳实践|演示环境说明 前置条件 在进行本实践前,您...