Noticias sobre Jeffrey Seely
1 artículos relacionados
Los investigadores de Sakana AI presentan PC-ALM, una alternativa de capa local a la retropropagación que entrena redes de 1000 capas
Sakana AI Researchers Introduce PC-ALM, a Layer-Local Alternative to Backpropagation That Trains 1000-Layer Networks
AI InsightLos investigadores de Sakana AI proponen PC-ALM, una alternativa de capa local a la retropropagación que entrena redes de 1000 capas. Al agregar multiplicadores de Lagrange a cada restricción de capa, PC-ALM mantiene actualizaciones locales de capa para la codificación predictiva mientras recupera gradientes de retropropagación precisos en redes lineales. Este algoritmo puede proporcionar una alternativa más eficiente para entrenar redes neuronales profundas.Importancia 75/100