La IA supera a profesores de derecho en razonamiento legal

Un reciente estudio de la Universidad de Stanford pone en evidencia la creciente preferencia de los profesores de derecho por las respuestas generadas por inteligencia artificial (IA) en comparación con las redactadas por sus colegas. Este análisis se centró en la capacidad de los modelos de lenguaje de gran tamaño (LLMs) para abordar tareas de razonamiento legal, planteando preguntas importantes sobre el futuro de la educación en derecho y el papel de la IA.

Este estudio involucra a 16 profesores de 14 facultades de derecho en Estados Unidos, incluidas instituciones de renombre como Stanford, Yale y New York University. Los académicos formularon 40 preguntas sobre derecho contractual que abarcaban doctrina legal, jurisprudencia, hipotéticos y cuestiones de políticas. Esta metodología se consideró óptima para evaluar las capacidades de la IA moderna en un contexto académico riguroso.

Contexto y claves del evento

La investigación llevó a cabo 2,918 comparaciones a ciegas en las cuales los profesores elegían qué respuesta preferirían dar a un estudiante. Los resultados revelaron que el modelo Gemini 2.5 Pro de Google ganó 75.92% de sus enfrentamientos, mientras que NotebookLM alcanzó una tasa del 74.75%, favoreciendo a las respuestas generadas por IA en aproximadamente tres cuartas partes de las ocasiones.

Estos hallazgos inician un debate significativo sobre el papel de la IA en la educación superior, particularmente en disciplinas que dependen del razonamiento crítico. A medida que la tecnología avanza, se plantea la cuestión de si las soluciones producidas por IA pueden realmente competir con la experiencia y el juicio humano.

La investigación también destacó que los LLMs mostraron un rendimiento superior en múltiples categorías, incluyendo preguntas de memoria sobre casos, códigos, doctrinas y discusiones políticas. Esto sugiere que los modelos de IA tienen la capacidad para proporcionar respuestas más precisas y relevantes en un campo que tradicionalmente ha dependido del análisis humano.

Reacción del mercado y datos técnicos

Los resultados del estudio han causado un impacto notable en el sector legal, llevando a instituciones y firmas a revisar cómo integrar la IA en sus prácticas. Aunque la mayoría de la adopción inicial pertenece al ámbito académico, el potencial de la IA para mejorar la eficiencia en la práctica legal es innegable.

Históricamente, el campo del derecho ha enfrentado retrocesos por errores en el uso de tecnología, pero los estudios recientes muestran que la IA puede superar en efectividad a los instructores humanos. Además, se analizó el estilo de escritura de las respuestas, revelando que las respuestas generadas por IA eran menos frecuentemente catalogadas como perjudiciales.

Gemini, por ejemplo, tenía una tasa de 3.41% de respuestas dañinas, en comparación con el 12.06% de los instructores humanos. Este dato sugiere un potencial para la IA de ofrecer respuestas de menor riesgo, lo que podría ser crucial en la práctica legal.

Análisis de riesgos y oportunidades

Sin embargo, uno de los principales riesgos asociados con la dependencia de la IA en la educación legal es la posibilidad de que estas herramientas no se alineen con las preferencias pedagógicas de cada instructor. Esto pone de manifiesto un dilema crítico: aunque la mayoría de las veces los alumnos puedan recibir respuestas de calidad, la adecuación de esas respuestas al enfoque particular de cada docente queda en duda.

Las instituciones educativas están en una encrucijada. Deben considerar cómo los LLMs, a pesar de su rendimiento general, todavía podrían no satisfacer las expectativas individuales de los instructores. Este desequilibrio podría resultar en un uso cínico de las herramientas de IA, donde los maestros las consideren “suficientemente buenas” sin abrazar del todo sus aportes.

Implicaciones para inversores

Para los inversores, el potencial de la IA en la educación y el sector legal sugiere una oportunidad de attender al crecimiento de este sector. A medida que más universidades y firmas legales comienzan a adoptar la IA, es probable que surjan nuevas empresas que desarrollen soluciones específicas para este nicho, presentando una potencial rentabilidad.

No obstante, el impacto de la IA puede extenderse más allá de la simple mejora del aprendizaje. La adaptación de estas tecnologías podría afectar la liquidez del mercado laboral para abogados y otros profesionales del derecho, haciendo crucial una adecuada preparación e integración en el currículo educativo.

Las perspectivas a mediano plazo apuntan a un panorama donde la educación legal se reestructure para incluir competencias tecnológicas, y donde los egresados sean cada vez más valorados por su familiaridad con herramientas de IA.

¿Cómo crees que la IA cambiará la formación de los futuros abogados y su desempeño en la práctica legal?