Menéame: comentarios [4085526]

#27 Preguntas trampa para «ir a pillar» a los LLM: hasta los mejores fallan con preguntas tan triviales

rojo_separatista — Sat, 09 Aug 2025 18:20:53 +0000

#8, hay gente que aunque no se equivoque nunca, jamás va a admitir que ninguna red neuronal artificial muestra comportamiento inteligente, porque va en contra de sus creencias metafísicas.

» autor: rojo_separatista

#26 Preguntas trampa para «ir a pillar» a los LLM: hasta los mejores fallan con preguntas tan triviales

rojo_separatista — Sat, 09 Aug 2025 18:19:23 +0000

#12, la tendencia es que cada vez los modelos se equivocan menos y cuesta más pillarlos con preguntas trampa. La tendencia que siguen es la de mejora constante, si alguien te dice que están estancados o no tiene ni idea o te está engañando.

» autor: rojo_separatista

#25 Preguntas trampa para «ir a pillar» a los LLM: hasta los mejores fallan con preguntas tan triviales

rojo_separatista — Sat, 09 Aug 2025 18:17:53 +0000

#6, de hecho estas pruebas en mi opinión lo que hacen no es demostrar que los LLM no sean inteligentes sino lo mucho que se parece la forma de razonar que tienen con la que tenemos los humanos. Son preguntas trampas y caen de la misma forma en la que caerían muchas personas a pesar de no haber sido entrenados expresamente para emular este comportamiento.

» autor: rojo_separatista

#24 Preguntas trampa para «ir a pillar» a los LLM: hasta los mejores fallan con preguntas tan triviales

Nómada_sedentario — Sat, 09 Aug 2025 15:52:52 +0000

#23 jajaja. Copilot te la habría dado.
Se trata de un oso polar.

» autor: Nómada_sedentario

#23 Preguntas trampa para «ir a pillar» a los LLM: hasta los mejores fallan con preguntas tan triviales

Cyberbob — Sat, 09 Aug 2025 15:16:35 +0000

#20 ¿Y cuál es la respuesta a tu acertijo?

» autor: Cyberbob

#22 Preguntas trampa para «ir a pillar» a los LLM: hasta los mejores fallan con preguntas tan triviales

otama — Sat, 09 Aug 2025 15:09:20 +0000

¿Por qué no le das la vuelta a la tortuga?

» autor: otama

#21 Preguntas trampa para «ir a pillar» a los LLM: hasta los mejores fallan con preguntas tan triviales

Estoeslaostia — Sat, 09 Aug 2025 14:21:38 +0000

#2 #1
Galápagos boca arriba.

» autor: Estoeslaostia

#20 Preguntas trampa para «ir a pillar» a los LLM: hasta los mejores fallan con preguntas tan triviales

Nómada_sedentario — Sat, 09 Aug 2025 14:12:31 +0000

#8 yo propuse un acertijo a chatgpt y a gemini, y chatgpt no lo acertó. Gemini si. Por si tenéis curiosidad:
"Un buque ha naufragado en el polo norte. Pasadas unas semanas, en pleno invierno boreal, un individuo desciende de cubierta, sólo, hambriento, desnudo, y sin herramientas para cazar, pescar ni hacer fuego. Sin embargo, consigue sobrevivir. ¿Cómo es posible?"

» autor: Nómada_sedentario

#19 Preguntas trampa para «ir a pillar» a los LLM: hasta los mejores fallan con preguntas tan triviales

GanaderiaCuantica — Sat, 09 Aug 2025 14:08:16 +0000

#8 y ChatGPT respondió bien todas las que le hice de números hace ya un año o más… No conseguí pillarlo fallando. Supongo que si lo intentas millones de veces al final falle por lo de ese “factor aleatorio” en las respuestas…

Y luego está lo que dice Sorrillo, que mucha gente también fallaría, así que esos fallos de la IA son una prueba más de que cada vez está más cerca de la inteligencia humana

» autor: GanaderiaCuantica

#18 Preguntas trampa para «ir a pillar» a los LLM: hasta los mejores fallan con preguntas tan triviales

MoñecoTeDrapo — Sat, 09 Aug 2025 14:03:01 +0000

#15 #17 pero es lo que dice que hace con la pregunta de los números pares, un programa en Python. It's very difficult, todo esto.
En fin, gracias.

» autor: MoñecoTeDrapo

#17 Preguntas trampa para «ir a pillar» a los LLM: hasta los mejores fallan con preguntas tan triviales

colorincolorado — Sat, 09 Aug 2025 14:01:54 +0000

#14 porque los LLMs no usan algoritmos básicos para encontrar la respuesta. En su lugar, tratan de encontrar una respuesta compuesta por texto que sea la más probable que pueda ir a continuación del texto anterior.

» autor: colorincolorado

#16 Preguntas trampa para «ir a pillar» a los LLM: hasta los mejores fallan con preguntas tan triviales

Tensk — Sat, 09 Aug 2025 13:55:18 +0000

#12 yo que tú, por experiencia personal, dejaba de discutir con sorrillo, que es el apologeta de la IA. Ni que le pagasen por ello.

Sus comentarios son pseudo argumentos falaces, queriendo dar a entender que la IA razona porque, aunque se equivoque, los humanos también y entonces patatas.

He tenido más de un intercambio de comentarios con él/ella/ello y ya paso, de ahí el consejo.

» autor: Tensk

#15 Preguntas trampa para «ir a pillar» a los LLM: hasta los mejores fallan con preguntas tan triviales

ooshima — Sat, 09 Aug 2025 13:45:56 +0000

#14 Si en vez de intentar "deducirlo" escribiese el código en python para contar y lo ejecutase, saldría bien.

» autor: ooshima

#14 Preguntas trampa para «ir a pillar» a los LLM: hasta los mejores fallan con preguntas tan triviales

MoñecoTeDrapo — Sat, 09 Aug 2025 13:39:07 +0000

#11 no lo entiendo muy bien. Me extraña particularmente que falle en eso porque recuerdo que lo de comprobar caracteres en cadenas es una cosa básica en la programación

» autor: MoñecoTeDrapo

#13 Preguntas trampa para «ir a pillar» a los LLM: hasta los mejores fallan con preguntas tan triviales

sorrillo — Sat, 09 Aug 2025 13:30:41 +0000

#12 Los ordenadores siguen existiendo y los programas de contabilidad siguen existiendo, la IA no impide su uso tradicional.

La IA lo que te aporta es algo que un programa de contabilidad no te puede aportar, la IA tiene potencialmente la capacidad de programar un programa de contabilidad, de buscar errores en éste, etc.

Es un error considerar que una IA debe funcionar como un ordenador solo por el hecho que requiera de un ordenador para funcionar.

A las IA se les están proporcionando herramientas como python para que puedan usarlos para sus operaciones matemáticas, de forma que no tengan que hacerlo "de memória" y puedan, como los humanos, asistirse de herramientas como un lenguaje de programación que permite hacer operaciones matemáticas de forma precisa y fiable.

» autor: sorrillo

#12 Preguntas trampa para «ir a pillar» a los LLM: hasta los mejores fallan con preguntas tan triviales

Selection — Sat, 09 Aug 2025 13:15:27 +0000

#6 Ya, pero sabes por qué se utilizan ordenadores en lugar de personas?

En parte porque son más rápidos, pero también porque no se equivocan con los cálculos. Es la gracia, poder confiar en tu sistema completamente.

Imagínate que encargamos a ChatGPT que gestione transferencias de dinero y en una de estas se le va a cabeza y en vez de ingresar "10.000,500" le da por ingresar "10.000.500". Bueno, pues te lía una de cojones.

Para mí es el problema más grande de las IAs por ahora, que se equivocan constantemente.

» autor: Selection

#11 Preguntas trampa para «ir a pillar» a los LLM: hasta los mejores fallan con preguntas tan triviales

ooshima — Sat, 09 Aug 2025 13:12:30 +0000

#9 Le dió la pregunta en todo el transformer. Specifically, un LLM divide eso en dos tokens y luego no sabe encontrarlos.

» autor: ooshima

#10 Preguntas trampa para «ir a pillar» a los LLM: hasta los mejores fallan con preguntas tan triviales

ooshima — Sat, 09 Aug 2025 13:10:46 +0000

pero tiene que pasar de un modelo –rápido– a otro más lento y caro –el modelo razonador– y programar algo en Python para «examinar todas las combinaciones posibles» (WTF??!) lo cual es sin duda poco práctico y aún menos una «muestra de inteligencia».

y que te creés que hace nuestro subconsciente??? En realidad es mucho más sofisticado.

» autor: ooshima

#9 Preguntas trampa para «ir a pillar» a los LLM: hasta los mejores fallan con preguntas tan triviales

MoñecoTeDrapo — Sat, 09 Aug 2025 12:53:49 +0000

¿Por qué fallaría en la de blueberry?

» autor: MoñecoTeDrapo

#8 Preguntas trampa para «ir a pillar» a los LLM: hasta los mejores fallan con preguntas tan triviales

uruK — Sat, 09 Aug 2025 12:51:52 +0000

Le he pasado esas pruebas a Gemini 2.5 Pro (excepto la de la tortuga, porque se supone que no tiene respuesta correcta) y ha respondido correctamente en todos los casos.

» autor: uruK

#7 Preguntas trampa para «ir a pillar» a los LLM: hasta los mejores fallan con preguntas tan triviales

ambizogato — Sat, 09 Aug 2025 12:42:21 +0000

Es que van a pillar. Yo lo usaba mucho

» autor: ambizogato

#6 Preguntas trampa para «ir a pillar» a los LLM: hasta los mejores fallan con preguntas tan triviales

sorrillo — Sat, 09 Aug 2025 12:37:06 +0000

Pregúntale a 100 personas cada una de esas pruebas y sospecho que no encontrarás un 100% de aciertos en el 100% de las personas, aunque pueda parecer trivial siempre hay alguien que no se entera y mete la pata y no siempre es el mismo.

Eso no nos permite deducir que esas personas que fallan esa pregunta sean incapaces de razonar o no tengan inteligencia, simplemente el mundo es muy complejo y cada cual tiene sus motivos para fallar en una u otra.

A las IAs les estamos exigiendo la perfección, algo que no encontramos en ningún humano.

Otro error que cometemos es pretender que una IA que acierta siempre acierte, para evitar que siempre responda lo mismo se le añade aleatoriedad al proceso de respuesta lo que permite que genere respuestas distintas a la misma pregunta con la expectativa que en la mayoría de ellas la respuesta nos sea útil, pero implica necesariamente que esa variabilidad lleve también a respuestas no útiles. Por eso gente distinta tiene experiencias distintas con las distintas IAs, por que sus respuestas son variables por diseño.

Nota: Llevo el pelo corto, quizá ese sea el motivo.

» autor: sorrillo

#5 Preguntas trampa para «ir a pillar» a los LLM: hasta los mejores fallan con preguntas tan triviales

Eukherio — Sat, 09 Aug 2025 12:36:57 +0000

El otro día se me dio por experimentar con Grok, versión gratuita. Estuve preguntándole por actrices a ver si me decía quién estaba más buena; la verdad es que la versión gratis por lo menos se comporta como el resto de IAs y dice que la belleza es subjetiva y todo eso, con lo que no vi nada raro. Hubo un momento le pregunté por una de Instagram no tan conocida y me dijo que recientemente había sido propuesta para modelo del año. Me sorprendió, porque creo que ni está en activo desde hace años, pero aproveché que mencionaba la fuente para consultarla: era una web de noticias falsas que se inventaba titulares llamativos de gente medio famosa para salir bien posicionados en Google cuando alguien buscaba sus nombres. Salía que estaba embarazada, que había tenido un accidente, que se iba a casar y que le iban a dar un premio. Esa mierda se la comió con patatas Grok.

» autor: Eukherio

#4 Preguntas trampa para «ir a pillar» a los LLM: hasta los mejores fallan con preguntas tan triviales

Cyberbob — Sat, 09 Aug 2025 12:16:40 +0000

#6 No sé cómo has podido decir eso sin despeinarte.

» autor: Cyberbob

#3 Preguntas trampa para «ir a pillar» a los LLM: hasta los mejores fallan con preguntas tan triviales

Xtrem3 — Sat, 09 Aug 2025 12:14:22 +0000

#1 #2 La prueba de que se ha roto la matrix.

» autor: Xtrem3

#2 Preguntas trampa para «ir a pillar» a los LLM: hasta los mejores fallan con preguntas tan triviales

mr_b — Sat, 09 Aug 2025 12:05:51 +0000

#1 No lo creo.

» autor: mr_b

#1 Preguntas trampa para «ir a pillar» a los LLM: hasta los mejores fallan con preguntas tan triviales

Leclercia_adecarboxylata — Sat, 09 Aug 2025 12:04:12 +0000

#2 Estoy de acuerdo.

» autor: Leclercia_adecarboxylata