La traducción al lenguaje de señas de Huawei HDC2021 está en llamas. ¿Por qué “ella” puede ser tan ingeniosa?
Huawei, tanto duro como blando, necesita ser re-entendido.
El 22 de octubre, se inauguró oficialmente la Huawei Developer Conference 2021 (Together) en Songshan Lake, Dongguan.En el discurso de apertura, Huawei lanzó oficialmente la nueva capacidad de servicio central móvil de Huawei de múltiples terminales, entre sistemas operativos y de escena completa, HMS Core 6, y desarrolladores Cree, comparta y gane un nuevo ecosistema de HMS. Pero no solo pertenece a los desarrolladores, puede pertenecer a cada uno de nosotros. La tecnología de software básica no está lejos de nosotros.
HMS Core (Huawei Mobile Core Services) es una colección de capacidades abiertas de software y hardware de Huawei. Se ejecuta en el sistema operativo y utiliza varias capacidades abiertas para proporcionar una amplia variedad de servicios. Como parte importante del ecosistema HMS, HMS Core conecta a desarrolladores y usuarios, lo que permite a los desarrolladores desarrollar aplicaciones de manera eficiente e innovadora al tiempo que mejora la experiencia del usuario.
Si lo comparas con la construcción de una casa, Huawei proporciona materiales y herramientas de construcción como ladrillos, tejas, concreto, barras de acero, camiones, vidrio, etc. En cuanto a la construcción de casas rurales de madera, villas suburbanas o grandes almacenes en el centro, The el desarrollador decide.
Aunque HDC2021 es una conferencia principalmente para desarrolladores, también hay muchas noticias fuera del círculo. Por ejemplo, el intérprete de lenguaje de señas que acompaña la transmisión en vivo de la conferencia es diferente de la traducción en vivo que vimos en la esquina inferior izquierda de la estación de televisión. La intérprete enviada por Huawei esta vez Ella es un "humano digital". "Ella" realmente ha alcanzado la destreza. La mente se deriva del "algoritmo de traducción automática", y la destreza proviene del "algoritmo de generación humana digital multimodal" .
Este traductor de lenguaje de señas no solo es una muestra de la última tecnología de Huawei, sino también una tecnología básica que puede beneficiar a muchos desarrolladores. Siempre que el desarrollador esté dispuesto, puede contratar un intérprete de lenguaje de señas similar en su propia aplicación, al igual que Huawei. .
Este traductor de lenguaje de señas es una manifestación concreta de una habilidad importante en HMS Core 6 que acaba de ser lanzado.
Para 2021, HMS Core 6 ya ha escapado de las limitaciones del desarrollo de aplicaciones móviles, así que más allá de las limitaciones, ¿dónde se puede expandir su etapa?
¿Qué puede ayudar HMS Core 6 a los desarrolladores?
Una vez que entendamos qué es HMS Core 6, ¿podemos averiguar qué puede hacer? La traducción de lenguaje de señas es una manifestación concreta de la capacidad de HMS Core 6 esta vez. De hecho, la tecnología detrás de ella se llama SignPal Kit. Dado que hay un Kit (kit de herramientas) detrás, significa que los desarrolladores pueden usarlo para hacer más cosas. En resumen, el servicio de lenguaje de señas (SignPal Kit) brinda la capacidad de generar lenguaje de señas, que puede traducir texto en datos de movimiento de lenguaje de señas naturales y fluidos que se ajustan a los hábitos de expresión de los grupos con discapacidad auditiva en tiempo real, lo que ayuda a generar información. aplicaciones innovadoras sin barreras.
Más grave de lo imaginado, los últimos datos de la Organización Mundial de la Salud muestran que aproximadamente 466 millones de personas en todo el mundo sufren de pérdida auditiva por discapacidad, que es casi más del 5% de la población mundial. Por lo tanto, ayude a estas personas también a usar fácilmente productos electrónicos para lograr La accesibilidad a la información es casi una de las responsabilidades sociales importantes de las grandes empresas. SignPal Kit es una herramienta para enseñar a las personas a pescar, pero no es fácil de completar. Primero, Huawei completó el modelo de lenguaje de preentrenamiento de desarrollo propio, el algoritmo de traducción automática y el algoritmo de generación de movimiento humano digital multimodal. Al mismo tiempo, trabajó con el Consejo de Investigación de Accesibilidad a la Información., Y en cooperación con la Facultad de Educación de la Universidad Normal de Beijing, integrar el conocimiento experto de la lingüística del lenguaje de señas para realizar la generación de posturas, gestos y expresiones corporales coherentes y naturales del lenguaje de señas. .
En la actualidad, tiene más de 10,000 vocabulario y la tasa de precisión es superior al 90%. Los desarrolladores también pueden personalizar la imagen del personaje en 3D para expresar movimientos naturales y suaves de las manos, posturas corporales y expresiones faciales que se ajusten a los hábitos humanos.
La capacidad de modelado 3D (3D Modeling Kit) es otra actualización importante de HMS Core 6. De hecho, la capacidad de modelado 3D no es nueva, pero la diferencia esta vez es que solo se necesita una cámara RGB normal para generar 3D de manera eficiente a través de un teléfono móvil. Modelo.
La clave es reducir el "umbral". He visto muchos equipos de escaneo y modelado 3D en muchas exposiciones de tecnología en los últimos años. Todos son voluminosos y costosos, pero ahora solo dependen de un teléfono inteligente común. Junto con esto Kit de modelado 3D, puede soportar segmentación de fondo de objetos, el modelo reconstruido no tiene fondo y los bordes son más claros y limpios. El escenario más fácil para esta capacidad debería ser la aplicación de compras. Ahora quiero ver la imagen completa de un producto, ya sea con ocho o nueve imágenes o tomando un video. Ahora se puede generar un modelo 3D para mostrar el producto en tres dimensiones. Por supuesto, esta capacidad no se limita a las escenas de compras. Muchos accesorios de juegos a menudo se modelan en base a objetos reales y luego se vuelven a dibujar. Naturalmente, el kit de modelado 3D también puede ser conveniente para los desarrolladores de juegos.
HMS Core 6 tiene varias capacidades nuevas que benefician a los desarrolladores de juegos: seguimiento de luz del entorno AR, kit de gráficos de computadora (kit de computación de gráficos) y kit de escena (motor de gráficos).
Si la capacidad de modelado 3D es hacer que lo real sea más real, entonces estas nuevas capacidades son para hacer que lo virtual sea real. Para lograr la inmersión en la experiencia de AR, se requiere la consistencia visual entre el objeto virtual y el objeto real, de lo contrario, hará que las personas se comporten mal. El seguimiento de la luz del entorno AR de Huawei es el primero en darse cuenta de la capacidad de fusión virtual y real de un centímetro. Puede estimar las condiciones de luz ambiental, combinadas con el motor de renderizado, de modo que los objetos virtualizados por AR puedan tener los mismos efectos de luz y sombra que los reales. objetos.
Computer Graphics Kit (kit de cálculo de gráficos) es el primero en lograr efectos de neblina dinámicos en el terminal móvil; el kit de escena (motor de gráficos) es el primero en utilizar la tecnología de trazado de rayos en dispositivos móviles para simular efectos de refracción y reflexión de la luz del mundo real, anteriormente Se pueden simular escenas desarrolladas que sufren dolores de cabeza, como reflejos de lago y reflejos especulares. Al mismo tiempo, el realismo proporcionado por el kit Scene (motor gráfico) también incluye los efectos de colisión, caída y rotación del modelo 3D. También puede proporcionar efectos especiales de posprocesamiento como inundación, profundidad de campo y desenfoque de movimiento. En resumen, muchas veces, los problemas gráficos son en realidad problemas físicos, al final del problema de la física, es el problema de las matemáticas.
En la conferencia de prensa de la serie Huawei P50, hay una tecnología de mejora de la señal llamada tecnología de comunicación heterogénea AI. Como área líder en tecnología de Huawei, esta tecnología también está abierta a todos los desarrolladores junto con HMS Core 6, lo que ayuda a los usuarios a obtener estabilidad de alta velocidad. experiencia de red, esta experiencia cubre redes WiFi y móviles. Por ejemplo, mi juego debe actualizarse. El paquete de actualización tiene 2G. Si el kit de red en la tecnología de comunicación heterogénea AI no está conectado, puede llevar más de diez minutos en la red 4G, pero con el kit de red, a través de la descarga de subprocesos múltiples, el algoritmo de fragmentación inteligente, puede acelerar la velocidad de descarga, a través de la tecnología de compresión transparente, puede reducir la cantidad de datos descargados, los dos superpuestos, la descarga final puede ser en unos minutos. Y después de ingresar al juego, esta tecnología también puede desempeñar un papel, por lo que el retraso de la red del juego se reduce mucho, siempre que sus manos puedan mantenerse al día con su cerebro, la respuesta del teléfono puede mantenerse al día.
Como actualización importante, HMS Core 6 tiene una variedad de nuevas capacidades, y ciertamente es difícil de cubrir con un artículo, pero he dicho tanto, de hecho, solo hay una dirección: use capacidades prácticas para ayudar a los desarrolladores a resolver prácticas problemas y, en última instancia, mejorar la experiencia del usuario. Por ejemplo, el kit de edición de audio puede representar diferentes componentes del audio en la posición espacial especificada para lograr los últimos efectos de audio espacial; la función de guía a nivel de carril de la plataforma Petal Maps puede hacer que la navegación sea más precisa y humana; el módulo de chip de seguridad y el módulo de servicios de gestión de confianza puede ayudar al entorno de aceptación de RMB digital y hacer que las transacciones sean seguras y rápidas …
Entre estas muchas capacidades, algunas son para resolver problemas antiguos, como problemas de velocidad de la señal y de la red; mientras que algunas son multiplataforma y multidispositivo orientadas al futuro, como capacidades de modelado 3D de umbral ultra bajo, seguimiento de luz de entorno AR, etc. Y así sucesivamente, también hay algunos que tienen ambos y tienen un carácter de bienestar público, como los servicios de lenguaje de señas y la tecnología humana digital.
Desde la perspectiva de los gemelos digitales, HMS Core 6 puede incluso aplicarse al concepto de "meta universo".
Antes, escribimos "Metacosm necesita" Infrastructure Madness "", que registró muchos fabricantes que construyeron la infraestructura para Metaverse en la etapa inicial del concepto, como Unity, Nvidia, Epic, etc. Nuestro punto central es que si hablamos de la experiencia real del metauniverso 30 años después, lamentamos no poder darlo ahora. Si habla de una pequeña condición de realización en el camino que conduce a su visión, es probable que los técnicos puedan brindar una solución factible. Al final, cuando muchas condiciones se cumplan gradualmente, la experiencia del metauniverso allí no estará muy lejos.
Este es un viaje de recolección de arena en una torre.
Sin embargo, a veces se acumula arena, se junta, al final sigue siendo arena suelta. Esto requiere una variedad de herramientas de desarrollo para juntar efectivamente los granos de arena para formar una forma final.
Metaverso carece de conceptos y visiones, pero carece de poder de cómputo, redes de alta velocidad y baja latencia, carece de plataformas, carece de contenido, por así decirlo, modelado 3D de bajo umbral en HMS Core 6, transmisión en vivo en lenguaje de señas en tiempo real + humano digital , El seguimiento de la luz ambiental de AR, la tecnología de seguimiento de la luz de los dispositivos móviles y los mapas de pétalos son todas tecnologías que pueden contribuir con contenido futuro al concepto de metauniverso y convertirse en capacidades básicas.
El futuro está demasiado lejos, ¿cuál es el significado práctico de HMS Core 6?
Mucha gente tiene un malentendido básico de que el meta universo es aproximadamente igual a la realidad virtual, y este espacio virtual tiene poco que ver con el mundo real.
Pero de hecho, a los ojos de los expertos técnicos, en su proceso específico de realización, el espacio virtual puro es solo una parte de él; la combinación orgánica con el mundo físico, que generalmente se llama el sistema físico cibernético CPS, o gemelo digital, puede ser Más eficaz Expresar con precisión la tendencia tecnológica y la intención original de la tecnología basada en las personas.
En el análisis final, todos los objetos en el espacio físico, incluidos sus atributos, comportamientos y relaciones, deben ser modelados digitalmente y mapeados en el ciberespacio, de modo que el espacio físico se convierta en un objeto que pueda calcularse en el ciberespacio. Pero lo que es más importante, los resultados de los cálculos en el ciberespacio también deben mapearse en el espacio físico para mejorar la capacidad de los seres humanos en el mundo real.
Por lo tanto, si no hablamos del concepto de futuro y solo hablamos de una de las lógicas centrales de desarrollo de la tecnología de Internet, de hecho, es "hacer del espacio físico un objeto computacional en el ciberespacio y fortalecer las capacidades humanas en el mundo real."
En este proceso de desarrollo, hay innumerables problemas que deben resolverse y áreas que deben cubrirse. Por ejemplo, la animación del teléfono móvil, desde la animación lineal inicial hasta la animación no lineal que se ajusta a los sentimientos intuitivos de las personas y se ajusta a las leyes físicas del mundo real, es un ejemplo de progreso.
Por lo tanto, desde modelos planos 2D a estéreo 3D, puede mejorar la experiencia de la aplicación de compras; el seguimiento de la luz ambiental AR y la tecnología de seguimiento de la luz del dispositivo móvil pueden ayudar a crear una mejor experiencia de juego móvil, de modo que los juegos móviles ya no solo froten la pantalla. .
La transmisión en vivo en lenguaje de señas en tiempo real + persona digital tiene dos significados de inclusión: ayudar a las personas con discapacidad a apreciar mejor los logros del desarrollo tecnológico y ayudar a los desarrolladores a servir a este grupo de personas. La ingeniosa traducción al lenguaje de señas en HDC2021 puede existir en todos los teléfonos móviles.
Si la frase "hacer del espacio físico un objeto computacional en el ciberespacio y fortalecer las capacidades humanas del mundo real" es demasiado ambiciosa, entonces la transmisión en vivo en lenguaje de señas + tecnología humana digital es un ejemplo apropiado de esta oración. Huawei HMS Core, los desarrolladores y los usuarios han ingresado a esta gran propuesta en una intersección pequeña pero importante.
Cuando haya más y más ejemplos de este tipo, la ecología del HMS comenzará a tomar forma.
Hasta ahora, Huawei ha registrado más de 5,1 millones de desarrolladores en todo el mundo y más de 173.000 aplicaciones han integrado HMS Core a nivel mundial. HMS Core se puede encontrar en aplicaciones web, aplicaciones rápidas y aplicaciones y servicios como Android y HarmonyOS, así como en teléfonos móviles, tabletas, pantallas inteligentes, relojes inteligentes y máquinas para automóviles.
Esta vez, HMS Core 6 ha abierto aún más capacidades y características innovadoras en las cinco áreas de gráficos, medios, inteligencia artificial, servicios de aplicaciones y sistemas (gráficos, contenido multimedia, inteligencia artificial, servicios y sistemas de aplicaciones), y lanzó 9 nuevos kits. . Similar al rápido funcionamiento de HarmonyOS, el HMS Core actual cubre un total de siete áreas y 69 kits, lo que brinda una gran cantidad de asistencia a la comunidad de desarrolladores. Por supuesto, estas capacidades finalmente sirven a los usuarios masivos.
Como se mencionó al principio, HMS Core proporciona ladrillos, tejas, concreto, barras de acero, camiones, vidrio y otros materiales y herramientas de construcción para ayudar a los desarrolladores a construir casas, pero de hecho, también podemos imaginar que las capacidades de HMS Core 6 pueden ser posible Después de ayudar a los desarrolladores a construir carreteras, hacer una decoración fina y diseñar un paisaje, entonces la imaginación de la ecología de HMS no se limita a una colección de casas, sino que puede ser una ciudad vibrante, o incluso una más emocionante.
#Bienvenido a seguir la cuenta oficial de WeChat de Aifaner: Aifaner (ID de WeChat: ifanr), se le proporcionará más contenido emocionante lo antes posible.