FPGA alapú rendszámfelismerő rendszer készítése CNN segítségével (Gamma Zrt.)

Tanszéki konzulens: 
A munkatárs fényképe
mesteroktató
Szoba: IE336
Tel.:
+36 1 463-2066
Email: szanto (*) mit * bme * hu

A kiírás adatai

A téma státusza: 
Korábbi (jelenleg nem aktív, de látszik)
Kiírás éve: 
2020
A kiírás jellege: 
önálló labor, szakdolgozat/diplomaterv

A Gamma Műszaki Zrt. 1920 óta működő, budapesti székhelyű, magyar tulajdonban lévő műszaki fejlesztő cég. Katonai, katasztrófavédelmi és környezetvédelmi feladatokra specializált rendszerek, eszközök fejlesztésével foglalkozik. Az elmúlt időszak egyik jelentősebb fejlesztése a könnyű páncélvédettségű Komondor járműcsalád megvalósítása volt.

A feladat részletezése:

Napjainkban a konvolúciós neurális hálózatokat (CNN) előszeretettel alkalmazzák a gépi látás algoritmusokban azok nagy kapacitású mintafelismerő tulajdonságai miatt. Beágyazott környezetben ezek az algoritmusok csupán szoftveres megvalósítással sokszor nem képesek valós idejű képfeldolgozásra, ezért a megfelelő működésre FPGA-kban célhardver készíthető.

A megvalósítás során a kamerát MIPI interfészen keresztül illesztjük az FPGA-hoz, melyben a rendszám felismerésre alkalmas algoritmus kerülne implementálásra. A hallgató munkája során megismerkedik az FPGA-kra történő hardverfejlesztéssel, deep learning és neurális hálózatok működésével és tanításával.

A teljes projekt végigvitele során a hallgató hallgató feladatai:

  • Kamera FPGA-hoz való illesztése MIPI interfészen
  • A szükséges előfeldolgozó lépések meghatározása és implementációja
  • CNN tanítása vagy megfelelő előre tanított modell kiválasztása
  • A megfelelő algoritmus implementálása FPGA-n

Továbbfejlesztési lehetőségek:

  • Objektumdetektálás (feliratok, matricák) mozgó járművön

A teljes projekt időtartama több félév, az egyes részfeladatok ütemezése pedig a hallgató képzési szintjétől is függ. 

Lehetőség van gyakornoki pozíció betöltésére.

Részletekről érdeklődni a gamma@gammatech.hu címen lehet.

© 2010-2024 BME MIT