En Paradox D&D hemos preparado una demostración en la que utilizamos un iPad como marcador de Realidad Aumentada. De esta forma, es posible aprovechar las capacidades multitáctiles para aumentar, desplazar o rotar el modelo 3D. Para la aplicación se ha modelado un Audi R8 con todo lujo de detalles. Además se han incluido tres botones que permiten: encender el motor del coche, cambiar el color (entre rojo, negro y blanco) y encender el reproductor.

Hace unos meses que me embarqué en un proyecto empresarial con unos compañeros de la universidad, se trata de una empresa de nuevas tecnologías llamada Paradox D&D. Decidimos dar el paso adelante a pesar de la crisis (sí, todavía quedan jóvenes ilusionados por salir del barrizal). Emprender no es fácil, lleva un tiempo establecer unas bases sólidas sobre las que empezar a construir. No conocemos otro secreto que el trabajo diario, pero creemos en lo que hacemos y funcionamos muy bien como equipo.

De momento hemos focalizado nuestros productos en tres tecnologías de futuro: Realidad aumentada, interfaces naturales y superfícies interactivas. Formamos un equipo que puede desarrollar un proyecto de manera integral: desarrollo de tecnología, programación gráfica, diseño, modelado y sonido.

Hemos preparado unos videos demostración de nuestra tecnología aplicada a distintos casos de uso:

Si estáis interesados en alguna aplicación para este tipo de tecnología, no dudéis en contactarnos a través de nuestra página web www.pdxstudio.com o seguirnos a través de los medios sociales facebook y twitter.

Ya está aquí la nueva aplicación de Paradox para felicitar la Navidad. Se trata de un pequeño cuento en el que te conviertes en Espíritu de la Navidad para llevarle un mensaje a tus amigos y familiares.

Es muy sencillo, simplemente tienes que dirigirte a tresespiritus.com (o su alternativa en facebook) y seguir las instrucciones. Muy pronto estarás gnomonizado (puedes probar tantas expresiones como quieras) y ya podrás enviar la postal a las tres personas que hayas elegido. Además, la web permite tomar fotografías de tu versión gnomo para que las coloques en tu perfil.

El desarrollo de esta aplicación se realizó con el novedoso motor Flare3D para Flash. Flare permite combinar el entorno web con elementos 3D en movimiento de forma mucho más óptima y mejorada que Papervision3D. Pronto se ha convertido en la nueva promesa para llevar el 3D a Internet.

No pasará mucho tiempo antes de que el invento de las cámaras de profundidad (Z-cams) lleguen a nuestros ordenadores y salones de casa. Aunque la tecnología ya existía, con la aparición de la cámara Kinect se ha conseguido inundar el mercado con una versión de Z-cams muy asequibles para el usuario medio (que ronda actualmente los 120 €).

¿Qué permiten estás cámaras? Las Z-Cam proporcionan una imagen con información de profundidad, es decir, cada píxel toma un valor entre 1 y 10000 (en el caso de kinect) que presenta el valor en milimetros de la distancia hasta el primer objeto que “ve” la cámara. Esta información resulta muy útil para la detección y seguimiento de objetos, pues cuenta con la posibilidad de hacer cortes por distancia, abstrayendo el fondo por ejemplo, o situando el foco a una distancia exacta que podemos elegir.

Subiendo un nivel más, las z-cam proporcionan información suficiente para crear aplicaciones de seguimiento de personas, obtención del esqueleto (para aplicarlo a avatares) o interpretación de gestos para lanzar eventos. Es un gran avance en la dirección de los interfaces naturales ya que permite crear todo tipo de aplicaciones y herramientas donde nuestro cuerpo se convierte en periférico.

Sin embargo, hasta ahora el kinect es terreno vedado de Microsoft. Por el momento no es posible crear aplicaciones comerciales con él. No obstante, desde el mismo lanzamiento de kinect se consiguió un hack al sistema que permite obtener la información de la cámara a través de un PC. La explicación paso a paso para instalar el kinect en vuestro ordenador podéis encontrarla en la página de kinect hacks junto a una gran cantidad de aplicaciones que han lanzado los desarrolladores. Los hacks de kinect trabajan con las librerías de OpenNi y PrimeSense, que proporcionan un SDK completo con herramientas de tracking y detección. Para empezar a utilizarlo se requieren buenos conocimientos en programación C++ y estar familiarizados con las tecnologías de interfaces naturales.

Afortunadamente, ya existe una alternativa a Kinect que utiliza el mismo PrimeSense, es la nueva z-cam de Asus, que lleva el nombre de Wavi Xtion. Se trata de un clon del propio Kinect, pero de uso libre. En prestaciones cabe señalar que no dispone de cámara VGA, lo que puede resultar un inconveniente si se buscan realizar aplicaciones de Realidad Aumentada. Esta cámara ha empezado a comercializarse en Japón, aunque es posible pedirla a distintas tiendas europeas. Lo que pretende el proyecto de Wavi Xtion es dar el salto al usuario normal, de forma que la Z-cam se convierte en un accesorio de nuestra televisión. ¡Ya no volveremos a perder el mando a distancia! Bastará con un gesto para cambiar de canal.

Por otro lado, Microsoft no quiere perder este mercado que ha empezado a comer Asus y piensa liberar su propio SDK para desarrolladores. En su primera versión llegará este mes de Junio, aunque sólo para fines de investigación y docencia. Es previsible que las licencias para uso comercial se ofrezcan a finales de año.

Entonces quedará planteada la disyuntiva de Kinect o su alternativa libre. Microsoft hará pagar un precio, aunque puede que su SDK sea más completo y robusto (en las comparativas entre aplicaciones PrimeSense y los juegos de Xbox360 queda de manifiesto). El punto clave es cuanto dará Microsoft y cuanto se guardará en secreto. Por ahora, queda esperar un poco. Mientras, aprendemos y preparamos las primeras aplicaciones.

Los que hace algún tiempo acogimos con entusiasmo las primeras librerías 3D para Flash nos dimos de bruces con una dura realidad: Flash no soportaba bien el 3D (no muchos polígonos, no muchas animaciones) y además, la exportación Collada no era ni mucho menos la panacea. Portar un modelo desde 3DStudio resultaba algo tedioso e imprevisible.

Después del largo silencio de Papervision, y la aparición de otras alternativas al mismo (Away3D, Alternativa3D) que ofrecían más fucionalidad pero pecaban de los mismo defectos, llega algo nuevo y fresco. Esto es Flare3D.

Flare3D supone un paso de gigante hacia la web 3D. Estos chicos argentinos estudiaron muy bien las deficiencias de sus predecesores para obtener una librería muy completa y más fácil de manejar. Y, quizás lo más importante, más transparente en cuanto a la comunicación entre 3DStudio y Flash. Realmente, si ya sabéis ActionScript 3.0 utilizar Flare3D es muy sencillo. Con el paquete gratuito (para uso no comercial) podéis exprimir todas sus capacidades.

Flare3D se integra con 3DStudio a través de un plugin. De esta manera, podréis visualizar los modelos 3D desde el propio 3DStudio sin tener que llevarlos previamente a Flash. Además, añade una serie de materiales y modificadores que facilitan enormemente la tarea de exportación. Pero también incorpora muchas más opciones de motor gráfico que cabe destacar: luces dinámicas, shaders programados, control de colisiones, interactividad con los objetos 3D, o exportación de animaciones y huesos.

Como requisitos, necesitaréis una versión de Flash que trabaje con AS3.0 y FlashPlayer 10 (CS4 o CS5) y un 3DStudio que soporte el plugin (versiones 2009, 2010 y 2011, tanto x86 como x64)

Flare3D cuenta con una página web con la información y tutoriales que necesitaréis para empezar a funcionar. Además de un foro bastante activo (en inglés y castellano) donde los desarrolladores de la librería ofrecen soporte técnico de forma rápida. También merece la pena echar un vistazo a los trabajo de muestra que aparecen en el Showcase de la web principal:

Ejemplos con Flare3D

Ejemplos de aplicaciones de usuarios (algunos muy interesantes que incluyen Realidad Aumentada y Partículas)

Por último, dejo el enlace al proyecto que desarrollamos entre unos amigos para experimentar con el motor: tresespiritus

Sólo queda felicitar desde aquí al equipo de Flare3D por su gran trabajo (esperamos impacientes la versión 2.0) y animarlos en su comienzo para que lleguen a ser referentes en el Web 3D.

Hoy llega a las tiendas españolas el nuevo periférico de Xbox 360. KINECT (anteriormente conocido como Proyecto NATAL) quiere revolucionar el mercado con una propuesta arriesgada, la jugabilidad sin mandos. Aparece para hacer frente a sus competidoras (al WiiMote de Nintendo y al PS3 Move de Sony), con la expectativa de encabezar la lista de regalos de Navidades.

El precio no es desorbitado (bendita competencia) si puede garantizar todo lo que promete. Desde hoy se puede adquirir por 150 € o bien, acompañado de una Xbox Slim por 300 – 350 € (según el disco duro de la consola).

¿Qué hace Kinect? ¿Qué magia Voodoo emplea para que nuestro cuerpo se convierta en el único periférico que necesitamos para jugar? La clave está en el tracking. El aparato consigue una imagen 3D gracias a una cámara “sonar” que arroja miles de puntos infrarojos sobre toda la habitación.  Gracias a ello, puede construir una imagen con diferentes niveles de profundidad, de forma que es posible disociar elementos según su posición (cercanía a la cámara) e independizarlos del fondo (que resulta uno de los mayores problemas del tracking óptico convencional). Además, gracias a utilizar infrarojos se vuelve menos sensible a condiciones de luz adversas.

Hoy mismo encontré un video donde se destripa la esencia del KINECT y se muestra un ejemplo de la detección corporal (aunque no estoy completamente seguro de que sea el mismo KINECT de Microsoft, pero al menos el funcionamiento sería muy similar)

Pero ¿hasta dónde llega la precisión de este nuevo sistema? Evidentemente no será posible alcanzar la excelente precisión de los mandos tradicionales. Aunque los videos promocionales ya llenan Internet defendiendo sus bondades, no se encuentran juegos donde sea requerida una alta precisión. KINECT puede intuir movimientos, incluso nos creemos un leve tracking de manos, pero de momento, no parece que vaya a ir más allá de los típicos WII Sports a los que ya nos tiene acostumbrados (y aburridos) la Wii: correr, saltar, bailar, batear o hacer surf.

Queda mucho camino por recórrer, pero no es malo que vayan apareciendo este tipo de aparejos y que las consolas se peleen por trackear el mundo. Esto beneficia a la tecnología y multiplica las posibilidades de futuro de la Realidad Aumentada.

Si bien el tracking óptico de cabeza es relativamente sencillo de conseguir (a través de las múltiples librerías en open que ya hay disponibles en internet), por ahora llegar a un afinado tracking de cara en tiempo real resulta muy complicado.

Lo importante para las aplicaciones que vayan a utilizarlo es conseguir mantener las proporciones de las facciones encontradas: ojos, nariz y boca, de manera que se pueda mantener una coherencia entre los modelos 3D y la distancia real a la que se encuentra la persona.  Además, debe ser robusto ante la variedad de rostros a detectar y funcionar bien independientemente de quién lo esté utlizando sin excesivos procesos de calibrado.

Hasta ahora había probado diversas aplicaciones de tracking de cara que cubrían sus limitaciones y el jitter con filtrados o complejas calibraciones. Un ejemplo de este tipo de aplicaciones:

El virtual mirror de Rayban, con el que te puedes probar distintos modelos de gafas:

Sin embargo, hoy he experimentado con una nueva librería para el tracking de cara que funciona realmente bien (mejor que cualquiera de las que había probado hasta ahora). Se trata de faceapi, disponible para descarga en su versión no comercial desde faceapi.com

Esta librería realiza una detección muy rápida de distintos puntos de interés del rostro. Así tenemos información de la posición de ojos, nariz y boca, pero en su versión avanzada incluso podemos detectar las cejas y los labios. Esto permitiría realizar aplicaciones de motion en tiempo real, con la posibilidad de mover modelos 3D sólo con nuestra gesticulación.

Aquí tenemos un ejemplo de lo que podríamos conseguir con esta librería (atentos al último ejemplo que es realmente impresionante):

Este tipo de herramientas abren grandes posibilidades tanto para animación como para la industria de videojuegos. Se me ocurre por ejemplo, uno de los clásicos Multijugador donde además de controlar las acciones de tus personajes, puedas hablar y gesticular directamente con tu expresión.

Tras las incontables actualizaciones de la versión 2, por fin llega una nueva versión de WordPress. Para los blogueros que utilizamos su gestor de contenidos como base de nuestro sitio (como es mi caso) esta es una buena noticia.

Como principales novedades encontramos una revisión del escritorio de administración, la posibilidad de añadir menus más dinámicos (y si, por fin, menus widget para nuestro sidebar), más opciones de personalización en el tema (cabeceras dinámicas, fondos editables …), una ayuda en todas las páginas del administrador, la posibilidad de obtener los enlaces cortos de todo nuestro contenido y un tema muy atractivo y editable llamado Twenty Ten.

Os dejo el video del lanzamiento donde se explican estas novedades (aunque en inglés):

La actualización está disponible para descargar directamente desde el escritorio del administrador de WordPress o también a través de la sección de descargas de la página oficial. Yo de momento prefiero esperar un poco a que la versión se estabilice y saquen las primeras 3.1 con la corrección de los posibles errores que pueda llevar la actualización, además, falta ver si la mayoría de plugins se adaptarán bien a esta nueva versión.

Adobe Flash no es sólo una herramienta para hacer páginas webs bonitas, con mil efectos y animaciones (a la par que pesadas y poco usables si al diseñador se le va la mano). Flash es mucho más. Es una plataforma que permite crear todo tipo de aplicaciones o juegos, compatibles con infinidad de dispositivos (basta con que dispongan del Flash Player) y fácilmente portables a cualquier tipo de formato (el mundo vectorial es tan fácil de manejar…). Pero sin duda, lo más destacable de Flash, es la comunidad de desarrolladores que trabajan alrededor de la plataforma, que escriben librerías AS3 y permiten incorporar a Flash capacidades innovadoras a los navegadores web: ya existen motores 3d, liberías de partículas, motores de físicas e incluso liberías para trabajar la Realidad Aumentada. Aprovecharé este post para hablaros de FLARToolkit, una librería de RA perfectamente integrada con Papervision3D que permite producir Realidad Aumentada de forma sencilla.

Flartoolkit es una libería escrita en ActionScript 3.0 que está basada en el ARToolkit de Java. Es una librería bajo licencia GPL (gratuita para uso no comercial, siempre que se ponga el código fuente a disposición de la comunidad) y desarrollada por Saqoosha.

¿Cómo funciona una aplicación de FLARToolkit? Como comentábamos, la versatilidad del Flash, permite lanzar aplicaciones de RA sobre cualquier dispositivo que tenga instalado alguna de las últimas versiones del Flash Player (9, 10, 10.1) . Es el caso de más del 90% de los ordenadores personales. Basta una webcam y la marca impresa en papel. Esta es una forma muy barata de conseguir Realidad Aumentada.

La aplicación  de RA busca en la captura de la imagen el patrón de la marca. Una vez lo identifica calcula su situación en el mundo 3D y la equipara al motor 3D de Papervisión. Así, es posible superponer modelos 3D sobre la propia marca. Modelos que podemos orientar, acercar y alejar con total libertad.

FLARToolkit tiene también sus limitaciones. El FlashPlayer dispone de unos recursos limitados, debido a que funciona como una máquina virtual. Los algoritmos de Realidad Aumentada y tratamiento de imagen requieren mucho procesado y por ello, nuestro navegador puede verse saturado bajo ciertas condiciones. La meta del tiempo real (sobre los 24-30 frames por segundo) es difícil de alcanzar. Y modelados complicados, con gran cantidad de polígonos y de lento renderizado, también hacen caer los frames de nuestra webcam. Pero FLARToolkit es un paso importante para la Realidad Aumentada y con el tiempo (en cuanto mejoren las prestaciones de los equipos y saquen nuevas versiones de Flash Player más optimizadas) encontraremos frecuentemente aplicaciones de RA en la red.

Si sois  desarrolladores Flash y domináis mínimamente el Papervision3D descubriréis que FLARToolkit es muy fácil de utilizar. Podéis encontrar la guía de inicio en la página de su creador -> http://saqoosha.net/en/flartoolkit/start-up-guide Incluye el código fuente y algunos ejemplos para empezar.

Yo ya he jugado un poco con la librería. ¿Queréis sacar a xii de Mundo Xiibi y sostenerla sobre vuestra mano?

Sólo necesitáis activar la webcam e imprimir esta marca.

(Si no os carga el flash directamente sobre esta página haced clic aquí)

Y el código fuente, como véis muy sencillo, basado en el ejemplo SimpleCube de iniciación.

Os presento una de las últimas aplicaciones de Realidad Aumentada que he encontrado en la red. Es una pequeña demo que ha acompañado a la campaña comercial de la película Iron Man 2. Gracias a la Realidad Aumentada, podréis probaros distintos modelos de cascos de Iron Man haciendo únicamente uso de vuestra webcam y un pequeño plugin de Total Inmersion (una de las empresas punteras en este tipo de tecnología), que se descarga directamente al acceder a la página web y permite ejecutar la aplicación sobre el propio navegador.

Este tipo de Realidad Aumentada está basada en el Head-Tracking o seguimiento de cabeza, que consiste en buscar en la captura de la imagen un modelo genérico de cara. Una vez identificado el modelo, localizados los ojos y marcadas las proporciones, el objeto 3D se superpone directamente sobre la cabeza del usuario. Es un tracking muy interesante ya que responde fielmente a los movimientos del cuello y resulta muy natural ya que prescinde de elementos adicionales y markers.

La encontraréis en la página I am Iron-Man. Aquí tenéis el video promocional de la aplicación.