Pixel 11 suma una forma de entrada que no depende de la voz. El usuario firma en American Sign Language y Gboard o Live Transcribe lo convierte en texto en ingles.
Google DeepMind presento SL2T el 12 de agosto. La primera version cubre ASL a ingles en Pixel 11, con mas dispositivos e idiomas previstos. La entrada por signos puede usarse en busquedas web, mensajes, documentos, consultas a Gemini y respuestas en Live Transcribe.
La lengua de signos no es ingles en las manos
El punto tecnico clave es que las lenguas de signos son lenguas naturales independientes, con gramatica, lexico, expresiones faciales y estructura espacial propias. Por eso SL2T es un modelo de traduccion, no un reconocedor de gestos cuadro a cuadro.
DeepMind afirma que SL2T fue entrenado con mas de 100.000 horas de datos de mas de 50 lenguas de signos, aproximadamente una cuarta parte en ASL. En FLEURS-ASL para ASL a ingles, reporta 70 BLEURT en zero-shot. Unos 70 millones de personas sordas o con perdida auditiva usan lenguas de signos en el mundo.
La privacidad empieza en los puntos de pose
SL2T no envia directamente el video crudo de la camara para traducirlo. Un modelo MediaPipe Holistic en el dispositivo rastrea landmarks corporales y la secuencia de coordenadas se traduce en el servidor. Reduce la superficie de datos frente al video completo, aunque los datos de pose tambien requieren cuidado.
La prueba practica esta fuera del benchmark. Google dice que trabajo en latencia de streaming, alucinaciones ante entradas que no son signos, usuarios zurdos y signos con una sola mano mientras se sostiene el telefono.
Que mirar ahora
El primer lanzamiento es acotado: ASL a ingles en Pixel 11. La siguiente senal sera si Google puede ampliarlo a mas lenguas de signos, sobre todo a las de pocos datos. Otra senal es si la entrada por signos se convierte en una capa de accesibilidad para llamadas, educacion, atencion al cliente y flujos de IA.
SL2T no es solo otra funcion de IA para telefonos. Une escala de modelos, accesibilidad, arquitectura de privacidad y datos de lenguas minoritarias en una prueba de producto.
Fuentes: publicacion oficial de Google DeepMind, materiales del benchmark FLEURS-ASL, SiliconANGLE, CocoLoop, Engadget; se verifico el alcance de SL2T, la integracion con Pixel 11/Gboard/Live Transcribe, mas de 100.000 horas de entrenamiento, mas de 50 lenguas de signos, alcance de 70 BLEURT, flujo de landmarks MediaPipe Holistic y cobertura inicial ASL-ingles.