Facebook para iOS pronto presentará efectos en vivo con tecnología de IA para fotos y videos

FAcebook AI foto efectos de video iPHone screnshoot 001

Según el director de tecnología de Facebook, Mike Schroepfer, las aplicaciones móviles de la compañía para iPhone, iPad, iPod touch y teléfonos inteligentes y tabletas con Android pronto mostrarán filtros y efectos avanzados similares a Prism para sus fotos y videos.

Mediante el uso de algoritmos de inteligencia artificial y redes neuronales de alta eficiencia que se ejecutan directamente en el dispositivo, estos filtros permitirán a los usuarios convertir sus fotos y videos en obras de arte, dijo Schroepfer.

La red social ha revelado que los próximos efectos de foto y video en vivo hacen uso de Caffe2Go, una nueva plataforma de aprendizaje profundo de Facebook que puede capturar, analizar y procesar píxeles en tiempo real en un dispositivo móvil.

El ingeniero revela que pudieron proporcionar inferencia de IA en algunos teléfonos móviles a menos de 1/20 de segundo, lo que equivale a 50 ms. En comparación, un parpadeo del ojo humano ocurre a 1/3 de segundo o 300 ms.

Según Schroepfer:

Hace solo tres meses, nos propusimos hacer algo que nadie más había hecho antes: enviar una transferencia de estilo basada en IA que se ejecute en vivo, en tiempo real, en dispositivos móviles.

Este fue un gran desafío de ingeniería, ya que necesitábamos diseñar un software que pudiera ejecutar operaciones informáticas de alta potencia en un dispositivo con limitaciones de recursos únicas en áreas como la potencia, la memoria y la capacidad informática.

El resultado es Caffe2Go, una nueva plataforma de aprendizaje profundo que puede capturar, analizar y procesar píxeles en tiempo real en un dispositivo móvil.

El ingeniero explica que tuvieron que condensar el tamaño del modelo de inteligencia artificial utilizado para procesar los medios en un factor de cien para poder ejecutar redes neuronales profundas con alta eficiencia en iOS y Android.

Con Caffe2Go, la aplicación de efectos a sus fotos, videos o incluso videos en vivo está sucediendo en tiempo real, directamente en la palma de su mano, similar a los efectos de video y fotos en tiempo real integrados en la aplicación de cámara en el iPhone.

El marco Caffe2Go ahora está completamente integrado en las aplicaciones de Facebook.

“Podemos reconocer las expresiones faciales y realizar acciones relacionadas, como poner un filtro” yay “sobre tu selfie cuando sonríes”, señaló Facebook.

Para tener una mejor idea de cómo funcionan estos filtros en tiempo real y se pueden controlar fácilmente con gestos con las manos, consulte los videos incrustados en el artículo fuente vinculado a continuación o lea esta publicación de blog para saber cómo pudieron lograr todo esto .

Fuente: Facebook

Deja un comentario

Tu dirección de correo electrónico no será publicada. Los campos obligatorios están marcados con *