AI alapú objektum követés Xilinx Versal platformon
mesteroktató
Szoba: IE336
Tel.:
+36 1 463-2066 Email: szanto (*) mit * bme * hu |
A kiírás adatai
Az objektum követés számos felhasználási területének köszönhetően az AI alapú algoritmusok egyik legfontosabbika. A számos megoldás közül az egyik legnépszerűbb a DeepSORT, ami mind az objektumok detektálására, mind pedig azok jellezőinek meghatározására neurális hálózatot alkalmaz.
A feladat megvalósítása során a DeepSORT megismerése után fel kell térképezni az algoritmus teljesítmény-kritikus részeit, amelyeket hardver gyorsítók alkalmazásával gyorsítunk, míg a kevésbé kritikus részek az FPGA-ban található processzoros alrendszeren hajtódnak végre. A neurális hálózatok gyorsítására a Xilinx DPU IP áll rendelkezésre (amely a Versal AI engine-eknek köszönhetően igen hatékony), míg az egyéb funkciók gyorsíthatók az AI engine-ek használatával vagy elkészíthetők akár HDL, akár HLS segítségével.