Errores de la IA con legislación: cómo verificarlo en el BOE
Los 7 errores típicos de ChatGPT y otras IA con las leyes españolas —artículos inventados, versiones derogadas, plazos— y cómo verificar todo en el BOE.
Los errores de la IA con la legislación española siguen un patrón: los modelos como ChatGPT no consultan la ley, sino que generan el texto más probable, y por eso citan artículos con numeración cambiada, redacciones derogadas o plazos inventados con total seguridad. La buena noticia: todos se detectan igual, verificando contra el texto consolidado del BOE. Esta guía recorre los siete errores más frecuentes con normas españolas y el procedimiento exacto de verificación, paso a paso.
Lo esencial
- La IA no consulta la ley: reconstruye su contenido de memoria estadística, y por eso «alucina».
- Los estudios miden errores en más de la mitad de las consultas jurídicas a modelos generales (Dahl et al., 2024).
- Los 7 fallos típicos: numeración, versiones derogadas, mezcla de leyes, plazos, contenidos cruzados, referencias falsas y reformas ignoradas.
- Antídoto universal: el texto consolidado del BOE (boe.es) — 2 minutos por verificación.
- Regla de oro: ningún dato legal pasa a tus apuntes sin su clic al BOE.
¿Por qué se equivoca la IA con las leyes?
La IA se equivoca con las leyes porque un modelo de lenguaje no busca el artículo en ninguna base de datos: genera la continuación de texto más probable según lo que vio en su entrenamiento. Cuando le preguntas por el artículo 47 de la Ley 39/2015, no abre la norma — produce algo que suena a ese artículo. A veces acierta; cuando falla, falla con el mismo tono seguro.
No es una impresión anecdótica: el estudio «Large Legal Fictions» (Dahl et al., 2024, Journal of Legal Analysis) midió alucinaciones en el 58-88 % de las consultas jurídicas directas a modelos generales, según la tarea. E incluso las herramientas legales comerciales con acceso a bases de datos fallaban en una de cada seis consultas o más (Magesh et al., 2024, Stanford RegLab). El análisis completo está en ¿es fiable la IA para oposiciones?.
Para un opositor español hay un agravante: buena parte del corpus de entrenamiento sobre Derecho español es antiguo o de segunda mano (foros, apuntes, webs desactualizadas), así que el modelo «recuerda» versiones viejas de las normas con especial facilidad.
Los 7 errores más frecuentes con legislación española
| # | Error | Ejemplo típico | Cómo detectarlo |
|---|---|---|---|
| 1 | Numeración bailada | Te da el contenido del art. 24 como si fuera el 21 | Abrir el artículo exacto en el BOE |
| 2 | Versión no consolidada | Redacción anterior a la última reforma | Comparar con el texto consolidado |
| 3 | Mezclar leyes derogadas con vigentes | Contenido de la Ley 30/1992 atribuido a la 39/2015 | Comprobar en qué ley vive HOY ese contenido |
| 4 | Plazos inventados | «15 días» donde la ley dice 10 | Leer el plazo literal en la norma |
| 5 | Contenidos cruzados | Atribuir a la LRJSP lo que regula la LPAC | Verificar la ley citada, no solo el artículo |
| 6 | Referencias con formato oficial pero falsas | Un «BOE-A-2015-XXXXX» que no existe | Pegar el identificador en boe.es |
| 7 | Reformas ignoradas | Tratar como vigente un precepto modificado | Pestaña de análisis del BOE (modificaciones) |
El caso 3 merece mención especial porque es masivo: la Ley 39/2015 y la Ley 40/2015 sustituyeron a la antigua Ley 30/1992, de la que hay literalmente décadas de material en internet. El modelo lo ha visto todo mezclado, y a veces responde con el reparto de contenidos antiguo. Lo mismo pasa con normas muy reformadas, como la LOPJ: cuanto más vieja y retocada es la ley, más versiones conviven en la «memoria» del modelo.
¿Cómo comprobar una ley en el BOE, paso a paso?
Verificar un dato legal en el BOE lleva unos dos minutos: se busca la norma, se abre su texto consolidado y se compara el literal del artículo con lo que dijo la IA. El detalle:
- Entra en boe.es y usa el buscador de legislación, o ve directo a la URL del consolidado si la conoces (formato
boe.es/buscar/act.php?id=BOE-A-…). - Abre el «texto consolidado», no el PDF original de publicación: el consolidado lleva todas las reformas integradas y es el texto por el que se estudia y se examina.
- Comprueba el estado de la norma: la ficha del BOE indica si está vigente y desde cuándo, y su pestaña de análisis lista las modificaciones (qué artículos se tocaron y qué norma los tocó).
- Localiza el artículo citado y compara el literal. No «más o menos lo mismo»: en un test, un plazo o una palabra cambiada convierten un acierto en un fallo.
- Si no coincide, gana el BOE. Siempre. Y el dato de la IA va a la papelera, no a tus apuntes.
Truco: guarda los consolidados de TU temario
Marca en favoritos el texto consolidado de cada ley de tu oposición. La verificación pasa de 2 minutos a 20 segundos, y de paso tienes siempre a mano el texto para pegárselo a la IA cuando quieras trabajar un artículo.
Prompting anti-invención: reduce el error en origen
Verificar es innegociable, pero también puedes reducir la tasa de fallo desde el prompt:
- Pégale el texto legal y pide que trabaje SOLO sobre él. Es la técnica número uno, explicada a fondo en cómo usar ChatGPT para estudiar oposiciones.
- Pídele que declare sus límites: «si no estás seguro del literal o del número de artículo, dilo explícitamente en vez de aproximar».
- Prohíbe la cita de memoria: «no cites números de artículo salvo que aparezcan en el texto que te he pegado».
- Pide separación entre norma y opinión: «distingue qué parte de tu respuesta es texto de la ley y qué parte es tu explicación».
Ojo: estos prompts bajan el riesgo, no lo eliminan. La única garantía sigue siendo el paso 4 del apartado anterior.
¿Qué pasa si estudias un error? El examen no perdona
Un dato falso estudiado con esfuerzo se recuerda igual de bien que uno verdadero — ese es el verdadero peligro. En el examen, la pregunta se corrige contra el literal de la norma, y no hay tribunal al que explicarle que lo dijo ChatGPT. De hecho, el mecanismo funciona en sentido contrario: las preguntas defectuosas se recurren precisamente aportando el texto legal como prueba, como explicamos en cómo impugnar preguntas de una oposición.
Por eso la división del trabajo sensata es: la IA para entender (explicaciones, ejemplos, repaso oral) y el material verificado contra el BOE para memorizar y examinarte — sea un banco de preguntas mantenido y corregido contra el consolidado, como el de los tests por ley de OPO.coco, o tu propio sistema de fichas si asumes tú el trabajo de verificación.
Fuentes
- Dahl, M., Magesh, V., Suzgun, M. y Ho, D. E. (2024). «Large Legal Fictions: Profiling Legal Hallucinations in Large Language Models». Journal of Legal Analysis, 16(1)
- Magesh, V. et al. (2024). «Hallucination-Free? Assessing the Reliability of Leading AI Legal Research Tools». Stanford RegLab/HAI
- Ley 39/2015, texto consolidado en el BOE
- Ley 40/2015, texto consolidado en el BOE
- LOPJ (LO 6/1985), texto consolidado en el BOE
Preguntas verificadas contra el BOE, sin sustos
Estudia con un banco de tests mantenido contra el texto consolidado y con exámenes oficiales reales. Empieza gratis.
Empezar gratisPreguntas frecuentes
¿Por qué ChatGPT se inventa artículos de leyes?
Porque no consulta la ley: genera el texto más probable según sus datos de entrenamiento. Si no tiene el artículo delante, lo reconstruye de memoria estadística, y el resultado puede mezclar numeración, redacciones derogadas o leyes distintas sonando totalmente convincente.
¿Cómo sé si una ley española está vigente?
Busca la norma en boe.es y abre su «texto consolidado»: es la versión con todas las reformas incorporadas. La pestaña de análisis indica su estado (vigente o derogada), las modificaciones que ha sufrido y qué normas la afectan.
¿Qué es el texto consolidado del BOE?
Es la versión de una norma con todas sus modificaciones ya integradas en el articulado, mantenida por la Agencia Estatal del BOE. Es el texto por el que debes estudiar: la versión original publicada el día de su aprobación puede llevar años desactualizada.
¿Qué errores comete más la IA con las leyes españolas?
Los más frecuentes: citar un artículo con numeración equivocada, usar redacciones anteriores a una reforma, mezclar la Ley 30/1992 (derogada) con la 39/2015, inventar plazos y atribuir contenidos de una ley a otra. Todos suenan verosímiles, por eso hay que verificar.
¿Puedo fiarme de la IA si me cita el número de BOE?
No sin comprobarlo. Los modelos también generan referencias con formato correcto pero contenido falso: un identificador BOE-A que no existe o que corresponde a otra norma. La cita con apariencia oficial no es garantía; el clic al BOE, sí.
Prepara tu oposición con OPO.coco
Tests, flashcards y seguimiento de tu progreso. Empieza gratis hoy mismo.
Empezar gratis
