Los temas candentes de hoy podrían ser las frías y húmedas cenizas del mañana. Por ejemplo, la velocidad de convergencia de los enfoques CNN y LSTM, especialmente en combinación, ha desviado considerable atención de los diseños básicos de RNN.
Del mismo modo, los temas fríos de hoy podrían ser las brasas ardientes del mañana. Por supuesto, algunos de los temas fríos se mantendrán fríos. El punto óptimo puede ser identificar aquellos que se están calentando y es probable que sean bloques de construcción sostenibles para la tecnología futura.
Redes de atención residual
Las redes de atención residual, como las redes LSTM, son una mejora sobre las RNN que utilizan un enfoque diferente. Debido a que las redes de atención están diseñadas para conservar recursos, convergen más rápido o con menos demanda de hardware y red para soportar la ejecución paralela.
Desarrollo automatizado de modelos no cartesianos
La investigación sobre la automatización del modelado es clave para muchas aplicaciones de IA. Algunos de los algoritmos en desarrollo no solo extraen tensores de características (matrices, matrices, cubos e hipercubos), sino que desarrollan modelos gráficos, dirigidos o asociativos, con o sin ciclos permitidos.
- Sistema jerárquico de mapas autoorganizados para la clasificación de acciones
Z Gharaee, P Gärdenfors, M Johnsson, ICAART, 2017
- Modelado de tiempo de ejecución para aplicaciones ciberfísicas inteligentes centradas en el usuario , Lorena Castañeda Bueno, 2017
- Sondeo de las propiedades topológicas de redes complejas Modelado de textos escritos breves , Diego R. Amancio, 2015
- Resumen del esquema en la selección de características basadas en datos vinculados para sistemas de recomendación , Azzurra Ragone et. al., 2017
Topologías de señal que admiten equilibrios
Muchos ignoran la importancia de las GAN, no porque puedan hacer cosas interesantes con las imágenes, sino por cómo se desvían de la topología simple de la ruta de señal donde se logra la convergencia en un conjunto entrenado de parámetros sobre una matriz unidimensional de capas y bloques de capas.
Los componentes discriminativos y generativos en el diseño de GAN se describen con cierto detalle en otra pregunta de AI Stack Exchange sobre * Comprender la función de pérdida de GAN . Aunque la generación de imágenes del enfoque GAN y sus elementos conceptuales demuestran una nueva capacidad en el espacio de la red artificial, la amplitud de este significado de redes múltiples puede no ser obvia de inmediato. No es una pila en profundidad de capas, sino una pila de dos redes profundas en una topología de figura ocho, conceptualmente muy parecida a una tira de Möbius.
Esta topología crea un equilibrio entre dos redes, la generativa (G) y la discriminativa (D). Su diseñador lo calificó como una relación de confrontación porque G y D juegan papeles opuestos. Sin embargo, su acción en el sistema es realmente colaborativa, creando un equilibrio que es muy parecido a un equilibrio químico o simbiosis en biología, de modo que se logra un objetivo específico. Esto puede revelar la dirección más prometedora en la IA de hoy.
Diseñar topologías de señal que admitan formas adicionales de colaboración y simbiosis entre redes, donde cada red es un componente que aprende su rol junto con otras redes componentes, de modo que el sistema agregado aprenda que su función puede sintetizar formas de inteligencia artificial que los DNN no pueden.
Los sistemas basados en reglas y las redes profundas son unidimensionales en términos de flujo de señal. Por sí mismos puede que nunca se aproximen a las características más notables del cerebro humano.
Procesamiento en paralelo utilizando GPU como DSP
Las implementaciones VLSI de las redes de picos son importantes, y ahora hay implementaciones como https://github.com/Hananel-Hazan/bindsnet que aprovechan la aceleración de hardware de la GPU para investigarlas sin acceso a los chips VLSI que están desarrollando grandes corporaciones.
Reconocimiento y síntesis de voz para TTS de extremo a extremo
La reciente aparición de la excelencia en síntesis utilizando sistemas como WaveNet de Google ha abierto la puerta a aplicaciones TTS (texto a sonido) más precisas, de modo que probablemente sea un buen momento para convertirse en un experto en grabación de voz para usar en conjuntos de ejemplos de capacitación, pero un mal momento para comenzar una casa de producción de discursos personalizados con altavoces en vivo.
Vehículos automatizados
Los vehículos automatizados de varios tipos necesitan expertos en física de vehículos, fabricación de automóviles, aeronáutica y productos de consumo para una amplia gama de tipos de vehículos con fuertes incentivos económicos y de seguridad que conducen la semiautomatización y la automatización completa.
- Marte aterrizadores
- Drones de consumo
- Drones industriales
- Drones militares
- Aviones de pasajeros
- Automóviles de pasajeros
- Limusinas
- Trenes
- Sillas de ruedas
- Vehículos de entrega
- Distribución automatizada de alimentos.
- Robots de reparación de plantas nucleares
- Reparacion electrica reparacion robots
Resumen
Puede ser difícil descubrir de antemano qué tecnologías avanzadas en IA seguirán siendo dominantes en cinco años o cuáles de las tecnologías de calentamiento estarán ardiendo en ese momento, pero las anteriores son tecnologías sólidas que muestran una promesa temprana significativa y para las cuales existen grandes negocios, demandas industriales y de consumo.