Case Studies

针对问题

现有方法:PVT任务假设目标在预设镜头内,在视频维度进行跟踪

现实任务:现实视觉任务,目标具有高动态特性,主动控制相机以提升视觉准确率是主要挑战

VAT任务:VAT任务同时建模视觉跟踪和控制,更具现实意义

强化学习解决VAT任务

现有方法:直接串联VT模型和控制模型进行VAT(siamask+PID)

局限1:VT模型的延迟带来控制输入的滞后,甚至导致控制器发散

局限2:控制模型对参数特别敏感,需要对每个场景微调参数

RL优点:可以用MDP将视觉和控制同时建模,用单模型解决

仿真环境:RL现实环境试错和数据采集太昂贵,需建构仿真环境

复杂多样的仿真环境

真实性:建模真实环境的多样性,丢弃真实场景不可获取的变量

多样性:多场景,多种tracker和target,多传感器

不可获取的变量:target相对于tracker的位置,速度,加速度

  • 01

    CityStreet

  • Village

    02

  • Lake

    03

  • Downtown

    04

  • Farmland

    05

  • Desert

    06

  • MOTORBIKE

  • SCOOTER

  • TRAILER

  • TRUCK

  • BUS

  • TESLAModel3

  • LINKOLNMKZ

  • RANGEROVER

  • BENZSprinter

  • TOYOTAPrius

  • BMWX5

  • CITROENCZero

  • PEDESTRIAN

  • SHRIMP

  • CREATE

  • SOJOURNER

  • MANTIS

  • BB_8

  • AIBOERS7

  • BIOLOIDDOG

  • FIREBIRD6

  • SCOUT

  • GHOSTDOG2

  • HOAP2

Stack

Upgrade your Web
presence with Framer

Schedule a call with Goran B.

Get Athos Pro