edición general
178 meneos
10970 clics

¿Son los LLM un simple predictor estadístico de palabras?

Cada vez que se habla de Inteligencia Artificial Generativa, los comentarios se llenan de la misma frase repetida como un mantra: "es solo estadística", "no razona, solo predice la siguiente palabra". La respuesta corta a la pregunta del título es: . Pero la respuesta larga es que eso no significa lo que mucha gente cree que significa. Reducir un LLM a eso es como decir que un cerebro humano es "solo un montón de células intercambiando iones": técnicamente cierto, pero absolutamente inútil para explicar el razonamiento humano.

De la frecuencia a la topología

El error base de la crítica habitual es asumir que los LLM funcionan mediante tablas de frecuencias o permutaciones simples, como el autocompletar de tu móvil de 2015.

Lo que aprenden estos modelos durante el pre-entrenamiento no es una lista de qué palabra suele ir detrás de otra. Lo que hacen es aprender a iterar a lo largo de una función de distribución extraordinariamente compleja. Esta función encapsula la estructura lógica, semántica y sintáctica de todo el corpus de texto que ha producido la humanidad.

Imaginad un mapa multidimensional (el espacio latente). En este mapa, el modelo no memoriza frases; entiende la topología de los conceptos. "Rey" está cerca de "Reina" en la misma dirección y distancia vectorial que "Hombre" está de "Mujer".

  • El modelo no "copia y pega".
  • El modelo navega por esta función matemática.

Esto es lo que le permite "saber cosas" y hablar siguiendo las reglas humanas. No está recuperando datos de una base de datos, está reconstruyendo información navegando por esa distribución aprendida.

La importancia del post-entrenamiento y RLHF

Aquí es donde la mayoría de los comentarios críticos se equivocan más. Si nos quedáramos solo con la predicción de palabras (el modelo base), tendríamos un sistema capaz de hablar, pero incoherente y sin propósito.

Lo que dota de sentido a los LLM modernos no es la predicción estadística, sino el Post-entrenamiento mediante Aprendizaje por Refuerzo con Retroalimentación Humana (RLHF).

En esta fase, no se enseña al modelo a hablar, sino a comportarse como nosotros queremos.

Es aquí donde los ingenieros enseñan al modelo en qué sentido debe desplazarse por esa función de distribución para ser útil. Se le premia o castiga algorítmicamente para moldear su "intencionalidad". Gracias al RLHF, el modelo aprende, entre otras cosas, a:

  1. Encadenar ideas (Reasoning): No solo busca la palabra que "suena bien", sino la que sigue una lógica deductiva paso a paso.
  2. Usar herramientas: El modelo aprende a reconocer cuándo su función de distribución no tiene el dato preciso (ej. una raíz cuadrada compleja) y decide detenerse para llamar a una calculadora o ejecutar código Python.
  3. Consultar datos externos: Aprende a buscar en internet cuando su "memoria" está desactualizada.

Conclusión

Decir que un LLM no tiene propósito porque "su mecanismo base es predecir tokens" es caer en un reduccionismo que nos impide ver la realidad. Esa predicción es el mecanismo de transporte, pero la ruta que elige el modelo viene determinada por un entrenamiento que va mucho más allá de la estadística simple.

Vemos a mucha gente cómoda en la simplificación del "loro estocástico" porque es una respuesta fácil a un problema complejo. Pero si queremos debatir seriamente sobre el futuro de la tecnología, deberíamos molestarnos en indagar cómo funciona esa función de distribución y cómo el aprendizaje por refuerzo está creando sistemas que, efectivamente, razonan (aunque sea de una forma diferente a la nuestra).

144 meneos
7467 clics
Las técnicas de sexo anal que gustan a las mujeres, según un amplio estudio

Las técnicas de sexo anal que gustan a las mujeres, según un amplio estudio

El estudio, que abarca desde los 18 hasta los 93 años, preguntó a 3.017 mujeres por técnicas concretas de caricias y presiones alrededor del ano, tanto dentro como en combinación con otros estímulos externos. El estudio no solo midió cuántas variantes entraban en cada práctica, también definió esas formas de tocar para que cualquiera pueda entenderlas y comunicarlas sin ambigüedades. Artículo: journals.plos.org/plosone/article?id=10.1371/journal.pone.0268785
280 meneos
6602 clics
Envío erróneo o controvertido, por favor lee los comentarios.
La verdad que esconde la foto de familia del jefe del Pentágono: "Describe a la derecha perfectamente"

La verdad que esconde la foto de familia del jefe del Pentágono: "Describe a la derecha perfectamente"  

"Les presento a Pete Hegseth. La mujer en la foto (1) es su tercer esposa Jennifer, que de hecho fue la amante mientras que Pete estaba con su segunda esposa Samantha (2), que de hecho, fue la amante mientras que estaba con Meredith (3), su primer esposa. Muy tradicional."
138 meneos
5850 clics

Las enigmáticas 'bobinas de Nikola Tesla' escondidas entre los árboles de un bosque de Rusia  

Durante la época soviética, se instalaron equipos en una zona boscosa cerca de Moscú con la finalidad de estudiar los efectos eléctricos sobre objetos y maquinaria al ser expuestos a rayos artificiales. En un bosque cercano a la ciudad de Istra, situada a unos 40 kilómetros al noroeste de Moscú, se alza un complejo de pruebas de aspecto futurista, con inmensas torres metálicas que elevan sus estructuras tubulares hacia el cielo. A simple vista parece un escenario salido de una película de ciencia ficción, aunque su origen y propósito distan....
110 meneos
3167 clics
Una fascinante simulación 3D del problema de los tres cuerpos (o «n cuerpos») y su física gravitacional [ENG]

Una fascinante simulación 3D del problema de los tres cuerpos (o «n cuerpos») y su física gravitacional [ENG]  

TriSolar Chaos es un estupendo simulador del problema de n-cuerpos en la física gravitacional. En su variante más conocida, el problema de los tres cuerpos ya es algo endiabladamente enrevesado; si se añaden más cuerpos celestes, imagina. [ Vía Microsiervos ]
88 meneos
3162 clics
Ponen un teléfono móvil a la mano de un ángel de la fachada de la Catedral de Murcia

Ponen un teléfono móvil a la mano de un ángel de la fachada de la Catedral de Murcia

El detalle contemporáneo se añadió durante los trabajos de restauración del año pasado
372 meneos
3050 clics
Un jefe de Emergencias guardó imágenes de la llegada de Mazón al edificio del Cecopi: “No se eliminaron”

Un jefe de Emergencias guardó imágenes de la llegada de Mazón al edificio del Cecopi: “No se eliminaron”

El coordinador de Prevención de Emergencias, Alfonso López de Vicuña, ha declarado ante la jueza de la dana que las imágenes de las cámaras de seguridad que captaron a Carlos Mazón y su equipo llegando a la reunión del Centro de Coordinación Operativa Integrado (Cecopi) de l'Eliana en plena catástrofe se conservan por iniciativa suya. La magistrada tiene en su poder las imágenes remitidas por Emergencias, que inmortalizaron a Mazón y su equipo bajando de dos vehículos, según ha dicho el testigo. El entonces president estaba acompañado por la di
322 meneos
2941 clics
Una familia se adueña del Hospital Parc Taulí de Sabadell: "Si muere mi hijo, te mato"

Una familia se adueña del Hospital Parc Taulí de Sabadell: "Si muere mi hijo, te mato"

Allegados de un paciente instauran un "reino del terror": son meses de amenazas e intimidaciones, amenazas, coacciones, vandalismo y peleas, que han dejado bajas laborales y pánico entre el personal Hay acusaciones de inacción a la dirección del centro, aunque UGT respalda a la gerencia.
108 meneos
2452 clics
Tras 40 años dedicados a los juegos de aventuras, Ron Gilbert da un giro para escapar de la muerte. (ENG)

Tras 40 años dedicados a los juegos de aventuras, Ron Gilbert da un giro para escapar de la muerte. (ENG)

Si conoces el nombre de Ron Gilbert, probablemente sea por sus décadas de trabajo en clásicos juegos de aventuras point-and-click como Maniac Mansion, Indiana Jones and the Last Crusade, la serie Monkey Island y Thimbleweed Park. Teniendo en cuenta su trayectoria, el lanzamiento en octubre de Death by Scrolling, un juego de acción y supervivencia pseudo-shoot-em-up diseñado por Gilbert, puede haber sido una sorpresa.
298 meneos
2284 clics
Las denuncias contra Paco Salazar: “Se subía la bragueta en tu cara, escenificaba felaciones y pedía vernos el escote”

Las denuncias contra Paco Salazar: “Se subía la bragueta en tu cara, escenificaba felaciones y pedía vernos el escote”

“Su comportamiento destilaba misoginia y baboseo en cada comentario disfrazado de broma que hacía. Su lenguaje era hipersexualizado hasta para dar los buenos días. Salía del baño que tenía en su despacho a medio vestir y no se subía la cremallera hasta que estaba cerca de tu cara (porque tú estabas sentada y él de pie)” Son escritos presentados por mujeres que trabajaron a las órdenes del ex asesor de Moncloa y desaparecieron del canal antiacoso habilitado por Ferraz.
266 meneos
2271 clics
Acompañado de su equipo, sus escoltas y en dos coches: así fue la llegada de Mazón al CECOPI la tarde de la DANA

Acompañado de su equipo, sus escoltas y en dos coches: así fue la llegada de Mazón al CECOPI la tarde de la DANA  

En las imágenes se puede ver a Mazón llegar en una comitiva de dos coches, acompañado de su equipo y sus escoltas oficiales a las 20:28 horas. Cabe recordar que la periodista Maribel Vilaplana, que comió con el expresident, pagó el parking donde dejó el coche a las 19:47 horas, una hora después de salir de El Ventorro.
109 meneos
2233 clics
Un ferrocarril inútil (Roger Senserrich)

Un ferrocarril inútil (Roger Senserrich)

En nuestro país teníamos la costumbre, endémica desde hace décadas, de construir líneas nuevas pero nunca gastar suficiente en mantenimiento, provocando un empeoramiento progresivo en los tiempos de viaje. Lo que estamos viendo ahora, sin embargo, son renovaciones integrales dirigidas a que la infraestructura mantenga sus prestaciones (Madrid-Sevilla) o, como se ha prometido con este aumento de velocidad, las mejore sustancialmente.
393 meneos
2181 clics
Los salarios: el gran problema de España e Italia

Los salarios: el gran problema de España e Italia

Los salarios no son un problema más de la economía española: son el gran problema. Lo son porque han permanecido congelados en términos reales durante treinta años. Y lo son porque, si no se corrigen, España consolidará un modelo laboral incapaz de garantizar un nivel de vida digno para amplias capas de trabajadores que, pese a tener empleo, seguirán siendo pobres. No pobres estadísticos: pobres de verdad.España ha vivido algo que Italia no: el fuerte aumento del Salario Mínimo Interprofesional desde 2018. Ha sido el principal motor de mejora
246 meneos
2176 clics
Nuevo motor gratuito de Deepseek iguala a GPT-5 Pro y Gemini-3 Pro

Nuevo motor gratuito de Deepseek iguala a GPT-5 Pro y Gemini-3 Pro

Vemos un sistema de código abierto compitiendo con los modelos propietarios más avanzados. La start Up china ha presentado dos modelos que igualan a GPT-5 y Gemini-3 Pro, con capacidad de razonamiento avanzado y uso autónomo de herramientas... GRATIS .
191 meneos
2004 clics
Sí, los gallegos son más  moros que un andaluz

Sí, los gallegos son más moros que un andaluz  

¿Por qué los gallegos tienen más ascendencia del norte de África y Oriente Medio que el resto de españoles? ¿Cuándo se produjo esa mezcla genética? En este episodio exploramos un nuevo estudio de la Universidad de Santiago de Compostela sobre este tema.
116 meneos
1924 clics
Rescatado un pájaro que tiritaba y buscó refugio de lluvias torrenciales del Mediterráneo [ENG]

Rescatado un pájaro que tiritaba y buscó refugio de lluvias torrenciales del Mediterráneo [ENG]  

Se trata de un guión de codornices (Crex Crex), un pájaro en peligro de extinción en el Reino Unido, donde fue rescatado. Fue encontrado tiritando en un crucero donde se refugiaba de las lluvias del Mediterráneo. Este pájaro se distingue por su sonido, pasa los inviernos en el Congo y luego migra en verano al hemisferio norte como a Irlanda del Norte.
49 67 0 K 307 ocio
49 67 0 K 307 ocio
139 meneos
1816 clics
La oveja ‘Careta’ se alza con el título de ‘Bonica del Tó’ de Castilla La Mancha

La oveja ‘Careta’ se alza con el título de ‘Bonica del Tó’ de Castilla La Mancha  

El ejemplar, de la ganadería Luis Alcaide del municipio ciudadrealeño de Aldea del Rey, se convierte en la ganadora de la primera edición de ‘Bonica del Tó’ y Rus, en segunda posición, se alza con el premio a la oveja que morfológicamente cumple con los estándares de la raza pura castellanomanchega.
67 72 3 K 425 ocio
67 72 3 K 425 ocio
238 meneos
1793 clics
Bochorno e indignación en redes tras el vídeo difundido por Juan Carlos I: "¿Por qué no te callas?"

Bochorno e indignación en redes tras el vídeo difundido por Juan Carlos I: "¿Por qué no te callas?"

El mismo rey que se revolcó a su antojo durante décadas sobre el destino de sus compatriotas (algunos prefieren llamarse siervos, allá ellos), viene ahora a explicar a los jóvenes las supuestas bondades de la tan cacareada "Transición modélica". Y claro, el personal en redes no sale de su asombro.
89 149 0 K 370 ocio
89 149 0 K 370 ocio
84 meneos
1771 clics

Moneda española de 1609 bate el récord europeo en subasta [ENG]

Un centén (moneda de 100 escudos) acuñado en Segovia en 1609 batió el récord europeo en una subasta celebrada en Suiza, con un precio de adjudicación de 2.817.500 francos suizos (más de 3 millones de euros).
145 meneos
1748 clics
EEUU se ha empeñado en que TSMC fabrique chips en Arizona. La realidad: es una idea desastrosa

EEUU se ha empeñado en que TSMC fabrique chips en Arizona. La realidad: es una idea desastrosa

TSMC, el fabricante de semiconductores más importante del mundo, lleva tiempo impulsando una expansión sin precedentes fuera de Taiwán. La iniciativa incluye grandes proyectos en Estados Unidos, Japón y Alemania, pero no responde a una demanda del mercado, sino a la presión geopolítica y a una guerra de chips que quiere intentar "repatriar" este tipo de proceso. Es una idea terrible.
139 meneos
1786 clics

Trump se queda dormido varias veces durante su propia reunión del Gabinete [ENG]  

El presidente Trump volvió a parecer que tenía dificultades para mantenerse despierto y alerta durante su propia reunión del Gabinete. Se inclinaba hacia adelante, se recostaba hacia atrás, se retorcía los dedos y hacía de todo mientras sus párpados se iban cerrando en plena reunión del Gabinete un martes por la tarde. A medida que cada uno de los miembros del Gabinete le daba una actualización sobre lo bien que iba todo, el presidente parecía cada vez más agotado, llegando a cerrar completamente los ojos en varios momentos.
170 meneos
1582 clics
Zelenski acepta el nuevo plan de paz de Trump tras eliminar algunas cesiones de territorio a Rusia: "Se ve mejor"

Zelenski acepta el nuevo plan de paz de Trump tras eliminar algunas cesiones de territorio a Rusia: "Se ve mejor"

Por otra parte, el emisario de la Casa Blanca Steve Witkoff se reúne este martes con el presidente ruso, Vladímir Putin, para presentarle las conclusiones de los contactos mantenidos con los negociadores ucranianos en Florida. La nueva versión del plan de paz ha sido rechazada por Rusia, que sigue decantándose por el borrador inicial.
242 meneos
1563 clics
Cancelado el festival de cómic de Angulema, el más prestigioso del mundo, tras el boicot de los autores

Cancelado el festival de cómic de Angulema, el más prestigioso del mundo, tras el boicot de los autores

La decisión se produce después de semanas de polémica por las denuncias por la mala gestión de los organizadores y por haber despedido a una empleada que denunció una violación.
241 meneos
1543 clics

Viajaba a casa de sus padres por Acción de Gracias y fue deportada a Honduras

Una estudiante universitaria de 19 años estaba a punto de abordar un vuelo para dar una sorpresa a su familia por el Día de Acción de Gracias cuando fue detenida en el Aeropuerto Internacional Logan de Boston y deportada a Honduras dos días después, dijeron el domingo su padre y su abogado.
140 meneos
1433 clics
Pere Navarro, director general de la DGT, avisa a los conductores ante las críticas a la baliza V16: «No nos equivoquemos»

Pere Navarro, director general de la DGT, avisa a los conductores ante las críticas a la baliza V16: «No nos equivoquemos»

Navarro fue muy contundente en su comparecencia. «La implantación de la V16 conectada supone un salto adelante y nos sitúa como referentes europeos en seguridad vial. Evita riesgos innecesarios y aporta información vital a los demás usuarios de la vía»
« anterior1234

menéame