El Algoritmo Maestro (The Master Algorithm). Por Pedro Domingos

Los algoritmos de aprendizaje.

Para evitar patrones alucinantes, los algoritmos de aprendizaje deben restringirse y probarse para su validez.

Alucinar es ver algo que realmente no está allí. Curiosamente, las alucinaciones son un problema central en el mundo de los algoritmos. En 1998, un libro de gran venta, El Código Secreto de la Biblia, afirmó que la Biblia contenía predicciones ocultas que se revelaron al omitir selectivamente ciertas líneas y letras.

Sin embargo, los críticos refutaron esta afirmación al demostrar que se pueden encontrar “patrones” similares en Moby Dick y en las resoluciones de la Corte Suprema.

Este es un buen ejemplo de patrones alucinantes, que, en la jerga de ML, es el resultado del sobreajuste. El sobreajuste ocurre cuando un algoritmo es tan poderoso que puede “aprender” cualquier cosa. Verás, cuando arrojas suficiente potencia informática a un conjunto de datos como la Biblia, siempre encontrarás patrones porque la computadora puede construir modelos cada vez más complejos hasta que surjan algunos. Pero el modelo resultante no funcionará en ningún otro dato.

Por lo tanto, para obtener tus algoritmos bajo control, su poder tiene que ser delimitado por la limitación de su complejidad.

Con el tipo correcto de restricciones limitantes, te aseguras de que el alcance de tu algoritmo no sea demasiado grande y que los resultados sean verificables y consistentes. Si es demasiado flexible, tu algoritmo puede terminar como El Código Secreto de la Biblia, encontrando patrones en cualquier texto o conjunto de datos.

Pero, ¿qué sucede si tu algoritmo descubre múltiples patrones que explican los datos que tienes pero no está de acuerdo con los nuevos datos? ¿Qué resultado deberías creer? ¿Y cómo puedes estar 100 por ciento seguro de que tus resultados no son solo una casualidad?

Esto es cuando entran los datos de reserva.

Cuando estés preparando tu conjunto de datos original para el algoritmo de aprendizaje, es importante dividirlo en un conjunto de entrenamiento, que el algoritmo utiliza para aprender, y un conjunto de reserva, contra el cual probarlo.

De esta forma, puedes verificar los resultados y confirmar que los patrones encontrados en los datos son válidos.

Asegurar la validez de los resultados es de lo que se trata el trabajo de un experto en ML. Su trabajo es restringir el poder del algoritmo asegurándose de que las reglas no sean demasiado flexibles y que los resultados funcionen bien tanto con los datos del conjunto de entrenamiento como con los datos del conjunto de espera.

Más resúmenes y artículos como éste para tí

La gran historia de todo (Origin Story) por David Christian

Los algoritmos de aprendizaje. Contenidos Página 1: IntroducciónPágina 2: Aprendizaje automático.Página 3: Los algoritmos de aprendizaje.Página 4: El razonamiento deductivo …

Resumen del libro El Suéter Azul (The Blue Sweater). Por Jacqueline Novogratz

El resumen del libro El Suéter Azul, es una mirada autobiográfica a los viajes de la autora por África y cómo la ayudaron a comprender los fracasos de la caridad tradicional

Resumen del libro Cruzando El Abismo (Crossing the Chasm). Por Geoffrey A. Moore

El resumen del libro Cruzando el abismo, examina la dinámica del mercado a la que se enfrentan los nuevos productos innovadores

Resumen del libro Sed (Thirst). Por Scott Harrison

El resumen del libro Sed, es la crónica inspiradora de la vida de Scott Harrison desde su inusual infancia hasta sus noches como promotor de fiestas en la ciudad de Nueva York y, finalmente, como el CEO de caridad

Resumen del libro En Deuda (Debt). Por David Graeber

El resumen del libro En deuda, presenta un examen antropológico del dinero que desafía los supuestos comunes, afirmando que el dinero y el concepto de deuda son en realidad productos de circunstancias históricas específicas

Resumen del libro Dar y Recibir (Give and Take). Por Adam Grant

El resumen del libro Dar y recibir, ofrece un soplo de aire fresco a las teorías tradicionales sobre lo que se necesita para tener éxito