Summary

This project addresses the creation of intelligent content for multimedia and virtual reality applications. As observed by Roberto Cencione in [Cencioni] the explosion in the availability of networked multimedia content brings about problems of scale, usability and democratisation of the tool chain that need to be addressed. Also, the proliferation of data that has been produced by devices is in need of interpretation and integration and they create novel demands on knowledge representation and reasoning. We target here this problem by introducing on the one hand intelligent tools that are able to produce and present the information to the user in a more clever (creating both adaptable and adaptive multimodal interfaces), and somehow aesthetical way (see for instance [Neumann05]), and on the other hand by borrowing from computer game technology and advanced hardware, that allow for faster and interactive tools. Application areas targeted are computer games, simulation, animation, broadcasting, GIS. Examples of applications aimed are automatic multiple light positioning for virtual scenes, intelligent search of 3D objects for game setting, best viewpoint for scene and object exploration taking user perceived preferences into account, editing tools for virtual scene automatic content creation such as landscapes, buildings, for easier selection of camera and light positioning in an animation by offering the editor an unprecedented choice of light and camera paths [Méndez06]. We envisage also interactive, memory efficient and visually realistic display of both artificial single 3D objects (manufactured objects, characters, etc..) and complex natural environments (trees, forest, landscape etc…), as well as software tools for user-friendly edition of material and lighting properties for this kind of scenarios, with emphasis on immediate realistic visual feedback.

Researchers

Games

Gallery

Partners

Publications

Resumen

El proyecto trata la creación de contenido inteligente para aplicaciones multimedia y de Realidad Virtual. Roberto Cencioni observa en [Cencioni] que la explosión en la disponibilidad de contenidos multimedia en red plantea nuevos problemas como la escala, la usabilidad y la democratización de la cadena de herramientas necesarias para producir dichos contenidos. Asimismo, existe una proliferación de datos producidos por los dispositivos los cuales tienen que ser integrados e interpretados y que crean nuevas demandas relativas a la representación del conocimiento y al razonamiento. En el proyecto se aborda este problema a partir de dos estrategias complementarias. La primera consiste en introducir herramientas inteligentes capaces de producir y presentar información al usuario de una forma más inteligente (creando interfaces multimodales adaptables y adaptativas) y, de alguna manera, más estética (ver por ejemplo [Neumann05]). La segunda consiste en incorporar la tecnología existente en los juegos por ordenador y hardware avanzado para disponer de herramientas más rápidas e interactivas. Los campos de aplicación contemplados en el proyecto son los juegos por ordenador, simulación, animación, broadcasting y Sistemas de Información Geográfica. Algunos ejemplos de aplicaciones propuestas son: el posicionamiento automático de múltiples luces para escenas virtuales, búsqueda inteligente de objetos 3D para disponer juegos, selección del mejor punto de vista para explorar objetos y escenas teniendo en cuenta las preferencias percibidas del usuario, herramientas de edición para la creación automática de contenidos en escenas virtuales como paisajes y edificios, y para facilitar la selección del posicionamiento de cámaras y luces poniendo a disposición del editor un abanico de posibilidades de recorridos de luces y cámaras [Méndez06] sin precedentes. Contemplamos también la visualización realista interactiva y eficiente de objetos aislados 3D (procedentes de fabricación, personajes, etc..) y entornos naturales complejos (árboles, bosques, paisajes, etc.), así como herramientas de software para la edición de las propiedades de iluminación y materiales para este tipo de escenas, con énfasis en un inmediato feed-back realista.

References / Bibliografía

[Cencioni] Roberto Cencioni & Stefano Bertolo, From Intelligent Content to Actionable Knowledge:Research Directions and Opportunities under Framework Programme 7

[Mendez06] Alex Méndez, Mateu Sbert, The Frame Array, Efficient rendering of light and camera animation for navigating a frame array, Computer Animation and Social Agents, CASA 2006

[Neumann05] Laszlo Neumann, Mateu Sbert, Bruce Gooch, Werner Purgathofer, editors. Proceedings of First Computational Aesthetics Workshop, Eurographics/ACM, 2005

Código del proyecto

Proyecto coordinado TIN2007-68066-C04.

-TIN2007-68066-C04-01 (Subproyecto Universidad de Gerona)

-TIN2007-68066-C04-02 (Subproyecto Universidad Jaume I)

Financiación

175 000 €

Entidad financiadora: CICYT (Ministerio de Educación)

Fechas

2007-2010