Intelligente transportsystemer basert på bilder fra kamera og videostrøm
I de senere årene har det blitt etablert et fagfelt som kalles Intelligente Transportsystemer (ITS). Dette går blant ut på anvendelse i kjørety for å monitorere både fører og omgivelsene rundt kjøretøyet. Hovedmålsetningen er å redusere antall ulykker. Gjenkjenning av fartsskilt er et aspekt som vil kunne føre til økt trafikksikkerhet. Det er samtidig en krevende oppgave, siden kjørety er i bevegelse (bildeanalyse i sanntid) og bildeanalyse skal gjøres under mange forskjellige lysforhold. Derfor er et slikt system avhengig av spesialtilpasset maskinvare. Det er tidligere gjennomført masteroppgaver innen analyse av stillbilder for trafikkskiltgjenkjenning. Denne oppgaven, som vil bygge på tidligere arbeid, går ut på å ta prosjektet videre mot en fungerende prototyp.
Halvlederprodusenten Micron har en norsk avdeling (lokalisert i forskningsparken som er nabo til Ifi-bygget) som jobber med utvikling av CMOS bildesensorer . Disse er i løpet av de siste rene blitt en sterk konkurrent til tradisjonelle CCD bildesensorer. Noen av fordelene med CMOS teknologien er lavere pris og høy lysfølsomhet. Dette er viktige egenskaper for vår anvendelse. I denne oppgaven ønsker vi å videreføre prosjektet ved å utvikle digital maskinvare som utfører bildebehandlings-operasjoner som typisk trengs i et ITS system. Utviklingen skal gjøres i FPGA med tanke på framtidig integrasjon i bildesensoren. Dette vil være viktig for effektiv prosessering til lav kostnad.
Det er ønskelig at det utvikles et system der det er mulig å analysere en videostrøm som er tatt opp på forhånd fra et kjørety. Det betyr å integrere eksisterende programvare for trafikkskiltgjenkjenning med et egenutviklet sanntidsgrensesnitt som kan jobbe med bilder i sanntid. Dette innebærer at vi i en overgangsfase ønsker å jobbe med systemet på laben og ikke måtte teste det i et virkelig kjørety. Det er viktig at overgangen fra videostrøm til kamera blir minst mulig, slik at en utviklet prototyp basert på videostrøm enkelt kan overføres til kameraprototyp i et kjørety. Du kan lese mer om tidligere arbeid på prosjektet i følgende artikler: ITSC04.pdf + Norchip04.pdf
Oppgaven går ut på:
- Sette seg inn i grunnleggende bildebehandling og bildesensorteknologi (Ifi kurs).
- Studere pågående prosjekt innen trafikkskiltgjenkjenning.
- Gjøre videoopptak av skilt med CMOS kamera-system.
- Teste og forbedre algoritmer og lage maskinvareimplementering for de mest aktuelle videoanalyse-trinnene.
- Gjøre simuleringer/målinger for å dokumentere ytelsen.
- Levere essay etter 3 mnd og til slutt en Master-rapport
Verkty: C-kompilator, FPGA-verkty og Eksisterende fartsskiltgjenkjenningsprogramvare
Anbefalt faglig bakgrunn: INF2270, INF1400, INF2310, INF3430/4430
Anbefalte kurs: INF 4300, INF5440, FYS4260
| Type: | 60 ECTS |
| Tilknyttet forskningsgruppe(r): | ROBIN |