Seguimiento de píxeles de video html5

Question

Sé que en general, no es un problema superponer HTML (e incluso hacer operaciones de composición avanzada) a Video nativo de HTML5. He visto trucos geniales con las pantallas verdes en tiempo real, en el navegador, por ejemplo.

Sin embargo, lo que aún no he visto es algo que rastrea el contenido en video, tal vez a nivel de píxel, y modifica la superposición compuesta de acuerdo. Seguimiento de movimiento, básicamente. Un buen ejemplo sería una especie de aplicación de realidad aumentada (aunque por el bien de Simplicity, digamos aumentar una superposición sobre el video a pedido en lugar de videos en vivo).

¿Alguien ha visto algún proyecto como este, o incluso mejor, cualquier marcado para la superposición de video HTML5 (que no sean controles de transporte)?

Answer 1

Si usamos la etiqueta Canvas para capturar las instancias del video, podemos obtener la información de nivel de píxeles del video. Entonces podemos detectar el seguimiento de movimiento, creo. Puede ser el trabajo de HTML5 estará hasta tomar la información del píxel, entonces es nuestro trabajo detectar las cosas que necesitamos.

Y no encontré ningún cuadro de este cuadro para la etiqueta de video HTML5, ya que no hay un formato de video común compatible con todos los navegadores ...

Answer 2

El modo de video de la etiqueta de lienzo no es compatible con iOS.

WireWax construyó una API abierta para eso. Funciona bastante bien, incluso en iPhone.

http://www.wirewax.com/