Cómo opera realmente un instrumento controlado por gestos
Un instrumento gestual en el navegador combina visión por ordenador con síntesis acústica digital. Cuando sitúas tu mano ante la cámara web, un modelo de aprendizaje automático analiza los fotogramas en la memoria del navegador y calcula veintiún puntos de referencia anatómicos: nudillos, articulaciones, muñeca y yemas de los dedos. A partir de esas coordenadas, el algoritmo determina en tiempo real cuántos dedos tienes extendidos y en qué posición espacial se encuentra tu mano.
Estas coordenadas modifican de forma instantánea los parámetros de la Web Audio API. No necesitas rozar cuerdas ni tocar teclas físicas: esculpes el sonido en el aire libremente. Como todos los cálculos se realizan de forma local en tu procesador, no hay demoras de red ni riesgos para tu privacidad.
Así se convierten los gestos en armonía, energía dinámica y luz
Contar los dedos extendidos es un método idóneo para activar acordes: resulta visualmente inequívoco, fácil de recordar y previene fallos involuntarios. Un dedo toca el acorde fundamental, dos dedos pasan al segundo grado, tres dedos aportan una atmósfera menor conmovedora y cuatro dedos cierran la secuencia armónica. El instrumento se encarga de que todo suene afinado mientras tú diriges el compás.
La expresividad musical va mucho más allá de encender o apagar notas. La elevación de tu mano modula el filtro de paso bajo, la fuerza del bajo y la reverberación. Con la mano arriba, el sonido se vuelve luminoso y enérgico; al bajarla, se torna cálido e íntimo. Estelas de luz interactiva acompañan tus movimientos, proporcionándote una respuesta visual instantánea.
Referencia completa de gestos y combinaciones →Probar el instrumento en directo en el reproductor →
Empieza a tocar en cuatro sencillos pasos
Utiliza un navegador web actualizado y confirma que ninguna otra aplicación esté ocupando la cámara. Una iluminación frontal suave y un fondo despejado garantizan un seguimiento estable desde el primer momento.
- Abre el reproductor de Gesture Synth y elige una atmósfera (Dreamy, Lo-fi o Cinematic).
- Concede permiso de cámara cuando el navegador te lo solicite.
- Muestra de 1 a 4 dedos frente a la lente para iniciar el primer acorde y la percusión.
- Sube o baja la mano para modular la energía acústica y cierra el puño para pausar.
Por qué la iluminación y el encuadre marcan la diferencia
El modelo de visión artificial necesita distinguir con nitidez la palma de la mano y las yemas de los dedos del fondo de la estancia. Un contraluz potente provocado por ventanas a tu espalda oscurece la mano como una sombra chinesca, los movimientos rápidos producen desenfoque y los fondos desordenados entorpecen la detección. Son factores propios de la visión artificial, no carencias del instrumento.
Colócate a la distancia aproximada de un brazo respecto a la cámara web, asegúrate de mantener la mano completa dentro del encuadre y sitúa una luz suave frente a ti. Si notas que las notas dan saltos, realiza transiciones pausadas entre gestos en lugar de mover los dedos con prisa.
Cómo optimizar la iluminación y la cámara paso a paso →Preguntas frecuentes sobre permisos de cámara →
El modo teclado cuando no tienes cámara disponible
El modo teclado es la alternativa perfecta para ordenadores sin webcam, entornos de trabajo silenciosos o momentos en los que prefieres no activar la cámara web. Mantiene la misma calidad acústica y reemplaza el seguimiento gestual por las teclas numéricas del 1 al 4 y el movimiento vertical del ratón.
Es fantástico además para ensayar progresiones armónicas de antemano. Si el sonido responde a la perfección con las teclas pero los gestos titubean, sabrás de inmediato que debes corregir la luz de la habitación y no los ajustes de audio.
Aprender a tocar música con el teclado del ordenador →Tocar sin necesidad de cámara →
Privacidad absoluta: tus imágenes nunca salen de tu equipo
Gesture Synth procesa todos los fotogramas de la cámara exclusivamente en la memoria de trabajo de tu navegador web. En ningún momento se transmiten fotografías, vídeos ni flujos de datos a servidores externos, ni se guardan en la nube. Además, el instrumento solo requiere acceso a la cámara: jamás solicita acceso al micrófono.
Para conocer todos los detalles sobre seguridad técnica y gestión de permisos, consulta nuestra página de ayuda de cámara y la política de privacidad antes de empezar.
Ir a la Ayuda de cámara →Consultar la Política de Privacidad →