Astra for Law: de la modelul generalist la un sistem construit pentru cercetare juridică

OpenAI a anunțat lansarea Astra for Law, o configurație dedicată activității juridice, construită în jurul modelului GPT‑6 Astra. Dincolo de performanțele tehnice anunțate, lansarea indică o schimbare importantă de perspectivă: în domeniul juridic, progresul nu mai depinde doar de dezvoltarea unui model lingvistic mai performant, ci de construirea unui sistem în jurul acestuia.

Astra for Law combină modelul de bază cu un index juridic specializat, instrumente de căutare și instrucțiuni adaptate analizei și redactării juridice. În plus, OpenAI îl prezintă drept o infrastructură pe care firmele de avocatură și companiile de tehnologie juridică își pot construi propriile produse și fluxuri de lucru.

Printre companiile care vor putea integra sistemul prin API se află Harvey și Legora. Mesajul OpenAI este, așadar, unul de colaborare cu ecosistemul existent, nu de înlocuire a produselor juridice specializate.

Modelul nu este suficient

Una dintre ideile importante ale anunțului este că performanța juridică nu este atribuită exclusiv modelului GPT‑6 Astra.

Configurația include:

• un index dedicat surselor juridice;
• căutarea și identificarea pasajelor relevante;
• instrucțiuni specializate pentru analiză și redactare;
• reguli privind utilizarea surselor și raportarea incertitudinii;
• integrarea cu datele, metodele și fluxurile de lucru ale organizației;
• mecanisme de evaluare și control.

Această arhitectură reflectă o realitate importantă pentru dezvoltarea aplicațiilor juridice bazate pe AI: accesul la un model performant este doar una dintre componente. Calitatea rezultatului depinde și de sursele disponibile, de modul în care sunt selectate, de etapele prin care este construit răspunsul și de criteriile folosite pentru verificarea acestuia.

Cercetarea juridică începe cu infrastructura informațională

Astra for Law poate căuta în jurisprudența, legislația, reglementările, normele procedurale și deciziile administrative din Statele Unite. Potrivit OpenAI, indexul acoperă peste 230 de milioane de adrese web și este actualizat zilnic.

Această componentă este esențială. Un model lingvistic poate formula un răspuns juridic convingător, dar caracterul convingător al textului nu demonstrează că normele invocate sunt aplicabile, actuale sau interpretate corect. Pentru cercetarea juridică, sistemul trebuie să poată identifica autoritatea relevantă, să localizeze pasajele care susțin concluzia și să permită verificarea lor.

În același timp, infrastructura prezentată este construită în principal pentru dreptul Statelor Unite. Ea nu poate fi transferată automat asupra dreptului românesc. O soluție destinată României are nevoie de propriul corpus juridic, de mecanisme de actualizare și de evaluări construite în raport cu specificul legislației și practicii juridice românești.

Ce arată, de fapt, rezultatele publicate

OpenAI a testat configurația completă Astra for Law pe 200 de întrebări de cercetare juridică din dreptul american, provenite din setul privat de validare al Vals AI Legal Research Bench. Evaluarea urmărește atât identificarea surselor și pasajelor relevante, cât și calitatea răspunsului construit pe baza acestora.

Rezultatele sunt prezentate prin doi indicatori complementari:

• Weighted rubric score (scorul agregat al criteriilor de evaluare, ponderate după importanță; permite acordarea unui punctaj parțial);
• All-pass rate (proporția întrebărilor pentru care răspunsul a îndeplinit toate criteriile de evaluare).

La nivelul maxim de efort de raționament, Astra for Law a obținut un All-pass rate de 54,0%, față de 38,7% pentru GPT‑6 Astra utilizat cu o căutare web obișnuită. Diferența este de 15,3 puncte procentuale, reprezentând o îmbunătățire relativă de aproximativ 40%.

Aceste procente nu trebuie interpretate ca o rată generală de corectitudine pentru toate activitățile juridice. Ele descriu performanța celor două configurații într-un anumit benchmark, pe un set limitat de întrebări și în contextul dreptului american.

Totuși, comparația este relevantă: același model de bază produce rezultate semnificativ diferite atunci când este integrat într-un sistem juridic specializat.

Evaluarea devine parte a produsului

Probabil cea mai importantă implicație a anunțului nu este valoarea exactă a scorurilor, ci faptul că OpenAI tratează evaluarea ca pe o componentă a dezvoltării produsului.

Într-un sistem juridic, nu este suficient să măsurăm dacă răspunsul final „sună bine”. Trebuie evaluate separat etapele care îl produc:

• au fost identificate problemele juridice relevante?
• au fost găsite sursele potrivite?
• au fost selectate pasajele care susțin efectiv analiza?
• sunt afirmațiile concordante cu sursele citate?
• au fost observate excepțiile, incertitudinile și argumentele contrare?
• răspunsul final este complet și util pentru problema formulată?

Această abordare permite identificarea locului în care sistemul greșește. Un răspuns poate fi slab deoarece modelul nu a înțeles problema, pentru că nu a găsit norma relevantă sau pentru că a interpretat greșit o sursă corect identificată. Fără o evaluare separată a etapelor, aceste situații sunt greu de distins și, implicit, greu de îmbunătățit.

Ce înseamnă această evoluție pentru ȘtieLegi

Direcția anunțată de OpenAI confirmă premisa de cercetare de la care pornește ȘtieLegi: calitatea AI-ului juridic trebuie construită la nivelul întregului sistem, nu presupusă pe baza capabilităților generale ale modelului.

ȘtieLegi urmărește o abordare în care problema este structurată, sursele relevante sunt identificate, analiza este construită pe baza lor, iar rezultatele intermediare și răspunsul final pot fi evaluate separat.

În etapa actuală, cercetarea noastră se concentrează tocmai asupra acestor componente: cât de eficient funcționează fiecare etapă, ce tipuri de erori apar și în ce măsură procesul conduce la răspunsuri juridice mai bine fundamentate.

Anunțul OpenAI nu reprezintă o validare externă a performanțelor ȘtieLegi — acestea trebuie demonstrate prin propriile evaluări. El confirmă însă relevanța direcției metodologice: un model puternic trebuie completat de surse juridice adecvate, de un proces de analiză explicit și de benchmarkuri construite pentru jurisdicția și activitățile în care sistemul urmează să fie utilizat.

Următoarea etapă pentru AI-ul juridic românesc

Pentru România, întrebarea importantă nu este doar când vor deveni disponibile modele mai performante. La fel de important este cine va construi infrastructura juridică locală necesară utilizării lor responsabile:

• corpusuri juridice actualizate și verificabile;
• mecanisme de identificare și citare a surselor;
• fluxuri de analiză adaptate dreptului românesc;
• seturi de întrebări și spețe relevante;
• criterii clare de evaluare;
• participarea profesioniștilor dreptului la verificarea rezultatelor.

Modelele vor continua să evolueze. Diferența dintre o demonstrație tehnologică și un instrument juridic util va fi făcută însă de sistemele construite în jurul lor și de rigoarea cu care acestea sunt evaluate.

Aceasta este și direcția în care continuăm cercetarea în cadrul ȘtieLegi.

Sursa principală: Introducing Astra for Law — OpenAI