Third party funded individual grant
Acronym: 2D/3D Video
Start date : 01.10.2009
End date : 30.04.2013
Website: https://www.cs12.tf.fau.de/forschung/projekte/2d3d-video
Goal of this project is to use the information of a 2D/3D camera for video surveillance. First, an appropriate camera platform has to be built using a high resolution CCD sensor and a low resolution Infrared-Time-of-Flight sensor for the third dimension. Then, we plan to merge the two sensors and analyze the data on the camera itself. Instead of merging the sensors by simply overlaying the values, we want to use the information from both sensors to solve typical and novel surveillance tasks. These tasks could be for example reliable detection of objects of interest, exact tracking of moving objects, or the measurement of distance, length, and velocity without complex calibration. With this approach, it should be possible to solve the task of video surveillance without a human actively watching the video.
Ziel des Vorhabens ist es, eine Möglichkeit zu schaffen, um Bildinformationen von einer hybriden 2D/3D-Kamera für die Videoüberwachung zu nutzen. Dazu soll ein Kamerasystem entstehen, das über zwei Sensoren verfügt, nämlich einen optischen hochauflösenden CCD-Sensor und einen niedrig aufgelösten Infrarot-Time-of-Flight-Sensor, der einen Tiefen-Information der sichtbaren Szene liefert. Die Bildinformationen sollen in der Kamera selbst fusioniert und (vor-) ausgewertet werden. Der Begriff Fusion ist hierbei nicht als das überlagern der 2D/3D-Informationen mit dem Ziel eines dreidimensionalen Farbbildes zu verstehen. Vielmehr sollen die Informationen aus beiden Quellen gemeinsam dazu verwendet werden, um typische oder neuartige Aufgaben der Videoüberwachung zu bewältigen, die mit einem einzelnen Sensor nicht oder nur schwer lösbar wären. Dies wären bspw. die zuverlässige Detektion sicherheitsrelevanter Objekte, die genaue Objektverfolgung oder die Messung von Abständen, Längen und Geschwindigkeiten im Bild ohne eine aufwändige Größenkalibrierung. Mit diesem Ansatz wollen wir erreichen, dass eine automatischen Videoüberwachung ohne die Hilfe eines menschlichen Betrachters möglich ist.