¿Qué es la profundidad recurrente?
Si la recurrencia opaca es un modelo pensando en bucles por dentro, la profundidad recurrente (Recurrent Depth) es la pregunta: ¿cuántos bucles? Mide cuántas veces se ejecutan esas capas internas — como una cinta de correr, donde la profundidad recurrente es cuántas vueltas has dado.¿Cómo se relaciona con la recurrencia opaca?
La recurrencia opaca es la conducta; la profundidad recurrente es el dialLa primera describe «repetir un cálculo por dentro»; la segunda le pone número: dio N vueltas. Una dice qué pasa, la otra cuánto.
¿Qué pasa cuando crece la profundidad?
Pensamiento más a fondoUnas vueltas extra le dan al modelo más oportunidades de pulir el resultado, y la precisión en problemas difíciles suele subir.
Más coste
Cada vuelta extra gasta cómputo y tiempo. Más profundo no es siempre mejor: estás equilibrando calidad contra coste.
Rendimientos decrecientes
Igual que «pensar más» no siempre es «pensar mejor», pasado un punto la ganancia se encoge y hasta pueden aparecer errores nuevos.
¿Por qué el término está en todas partes de repente?
Según los modelos de razonamiento pasan de «escribir su pensamiento» a «calcular en silencio por dentro», necesitábamos una palabra para cuánto cálculo interno hay. La profundidad recurrente traduce ese esfuerzo oculto en un parámetro de ingeniería que se puede discutir y ajustar.En resumen: la profundidad recurrente es cuántas vueltas da el pensamiento interno de la IA — más vueltas, pensamiento más profundo, factura más grande.
Comentarios