Content-Based Semantic Retrieval of Video Documents, Application to Navigation, Research and Automatic Content Abstraction.

 

 CNCSIS project RP-2

Introducere: Care este tematica proiectului ?

In societatea in care traim accesul la informatiile multimedia este foarte important si face parte din viata noastra cotidiana.

Datorita exploziei tehnologice, volumul datelor multimedia cu care suntem confruntati (text, sunet, imagini, video, etc.) a devenit foarte mare. Printre acestea, un interes deosebit stiintific si economic il prezinta documentele video.

Problema actuala nu este lipsa de informatie ci accesul la colectii vaste de informatii. Solutia existenta sunt sistemele de indexare. Conceptul de indexare presupune adnotarea datelor in functie de continut.

                   

Exemplu de interpretare automată a conţinutului video folosind analiza de imagini: secventă de gol

 

Printre sistemele existente un interes sporit il prezinta sistemele ce folosesc adnotarea semantica a continutului.

Astfel, in cazul secventelor video accesul este realizat la un nivel apropiat de nivelul de perceptie umana, utilizatorul folosind un limbaj familiar cum ar fi „cauta filmelor de actiune”, sau „cauta secventele de gol”. Din pacate, aceasta categorie de sisteme necesita o intelegere completa a continutului video, ce nu este inca posibila in totalitate cu nivelul actual de dezvoltare stintifica.

Partea inovanta a proiectului propus consta tocmai abordarea acestei directii in plina dezvoltare stintifica. Astfel, propunem dezvoltarea de metode si tehnici innovatoare de „intelegere” automata a continului documentelor video in vederea accesarii acestuia. Acestea propun fuziunea diverselor surse de informatii, precum culoare, textura, miscare, structura temporala, text, etc.

De asemenea, propunem dezvoltarea de tehnici inteligente de rezumare automata a continutului indispensabile etapei de cautare in baza de date. In ceea ce priveste navigarea in baza de date propunem ca solutie cartografierea semantica dupa continut.

Tinta finala este punerea in functiune a unui sistem ce va permite utilizatorului neavizat accesul cat mai simplu la continutul video printr-un limbaj natural si intuitiv. Acesta va fi aplicabil atat pentru uzul profesional (baze de date comerciale) cat si personal (filme personale).