Can GenAI identify and disambiguate legal polysemous terminology? A critical analysis in light of ISO 24495-2:2025 on legal communication

Abstract

The huge strides forward made by GenAI has prompted the scientific community to pose compelling questions about its reliability and accuracy, especially in high-stakes environments such as the legal one. Polysemy is one of the features characterising legal language that, inevitably, gives rise to ambiguity. In light of the ISO 24495-2:2025 standard on plain language and legal communication, there has been an increasing demand for the easification of the language of the law. In view of the efforts that legal drafters make to comply with such regulations, this paper wishes to explore the extent to which GenAI can support humans in the identification and disambiguation of polysemy in legal discourse. To this aim, two legal texts of approximately 60-70 words each are focused on. The first one is extracted from the UK House of Lords decisions, whereas the latter is sourced from English online terms of service. Six chatbots are considered for the cases under scrutiny, amongst which two are field-related. The texts are inputted into the chatbot prompt boxes, and the GenAI tools are prompted to pinpoint polysemous words and disambiguate (i.e., explain) them. The findings reveal scattered responses, sometimes inconsistent with one another, and a lack of coherent approaches. Some chatbots label terms with different grammatical functions (e.g., verbs/nouns) as polysemic, whereas others hallucinate. Therefore, the paper indicates that, at the time being, intelligent machines cannot replace humans’ discernment and capacity to identify and disambiguate legal language subtleties.

I progressi compiuti dall'IA generativa (GenAI) hanno incentivato lo studio della sua affidabilità e accuratezza, soprattutto in contesti ad alto rischio come quello legale. Alla luce delle norme ISO 24495-2:2025 concernenti l'uso di un linguaggio chiaro nella comunicazione giuridica, si è progressivamente rafforzata l'esigenza di semplificare il linguaggio del diritto. Allo stesso tempo, tuttavia, il linguaggio giuridico è fortemente caratterizzato da ambiguità e termini polisemantici. Il presente contributo analizza la capacità della GenAI di identificare e disambiguare termini polisemici del discorso giuridico. A tal fine, la presente analisi si focalizza su due testi giuridici di circa 60-70 parole ciascuno. Il primo è tratto dalle decisioni della House of Lords del Regno Unito, mentre il secondo proviene da termini e condizioni di servizio in lingua inglese disponibili online. A tal fine, sei chatbot sono impiegate, due delle quali giuridiche. I testi presi in considerazione sono inseriti nelle chatbot, a cui è richiesto di individuare le parole polisemiche e disambiguarle (ovverosia, spiegarle). I risultati evidenziano risposte frammentarie, talvolta incoerenti tra loro, e l'assenza di approcci congrui. Alcune chatbot classificano come polisemici termini aventi funzioni grammaticali diverse (ad es., verbi/sostantivi), mentre altre danno luogo ad allucinazioni. Il contributo indica pertanto che, allo stato attuale, la IA non può sostituire la capacità umana di discernere, identificare e disambiguare le peculiarità linguistiche del linguaggio giuridico.