Prodotto

Il paradosso del miglior modello

Più i modelli avanzano, più lo strato che trasforma la loro potenza in lavoro giuridico utilizzabile diventa decisivo.

A ogni generazione di modelli, torna lo stesso ragionamento: questa volta, il motore è così potente che tutto ciò che lo circonda diventerà superfluo. Gli strumenti, i quadri, gli strati intermedi non sarebbero stati che stampelle per compensare le debolezze dei modelli precedenti, destinate a cadere non appena la potenza fosse bastata. Il ragionamento sembra inattaccabile, ed è smentito a ogni ciclo. I modelli non sono mai stati così capaci, e mai la questione di ciò che li inquadra è stata così centrale. Non è un'anomalia passeggera. È una legge strutturale, e vale ben oltre l'intelligenza artificiale: più uno strumento è potente, più conta il quadro che lo governa.

Per vederla all'opera, basta sottoporre il miglior modello del momento a un compito professionale reale, intero, con una posta in gioco. Non una domanda, una sintesi, un paragrafo, ma un lavoro completo di cui qualcuno dovrà rispondere. L'esperimento è istruttivo proprio perché fallisce, e perché il modo in cui fallisce non ha nulla a che vedere con la potenza del motore.

I modelli non sono mai stati così capaci, e mai ciò che li inquadra è stato così decisivo. Non è un paradosso. È una legge.

L'esperimento del compito intero

Prendiamo il compito sul serio. Chiedete al modello più avanzato del mercato di redigere un contratto di cessione di azioni di cento pagine, senza allegati, come farebbe il team di uno studio. Il modello sa redigere ogni clausola, spesso brillantemente. Conosce le garanzie, le condizioni sospensive, i regimi di indennizzo. La sua prosa giuridica è impeccabile. Eppure il contratto che esce da una generazione in un solo blocco non è utilizzabile, per ragioni che non devono nulla alla qualità della prosa.

Un contratto di quella taglia non è un testo, è un sistema. Definizioni poste all'inizio e richiamate duecento volte. Rinvii incrociati tra clausole che devono restare esatti quando il documento si muove. Garanzie articolate al regime di indennizzo, a sua volta articolato al calendario. Una generazione monolitica produce statisticamente rinvii rotti, termini usati prima di essere definiti, incoerenze tra la clausola otto e la clausola quattordici. E quand'anche il testo fosse perfetto, resterebbe generico: senza la term sheet, senza la storia della negoziazione, senza le posizioni che questo cliente non cede mai, il contratto meglio scritto del mondo resta un modello standard. Brillante, e inutilizzabile.

Ciò che manca, dunque, non è potenza. Ciò che manca è un'architettura che scompone, ordina e verifica; una memoria che tiene le definizioni e la terminologia da un capo all'altro; un metodo che impone i passaggi di audit; un contesto che fa di questo contratto quello di questa pratica e non un contratto in generale. Quattro cose che non sono nel modello e non vi saranno mai, perché non appartengono al sapere generale: appartengono al lavoro, allo studio, alla pratica.

Questo esperimento illumina qualcosa che i piccoli compiti mascheravano. Su una domanda isolata, una sintesi, un paragrafo, il modello nudo e il modello inquadrato producono risultati vicini, e se ne conclude che il quadro è un comfort. È che il piccolo compito porta il proprio quadro in sé: la domanda contiene il suo contesto, il paragrafo non ha rinvii da tenere, la sessione non ha nulla da ricordare. Man mano che il compito cresce, il quadro implicito non basta più, e ciò che si prendeva per una proprietà del modello si rivela essere stato, fin dall'inizio, una proprietà del compito. I modelli sembravano autonomi perché non si chiedeva loro nulla di intero.

Il contratto meglio scritto del mondo, prodotto fuori dalla pratica, resta un modello standard. Brillante, e inutilizzabile.

Perché la potenza allarga il divario

Si potrebbe credere che questa mancanza si ridurrà man mano che i modelli progrediscono. Accade il contrario, e bisogna capire perché. Il valore di un quadro si misura da ciò che permette di fare dello strumento che governa. Ora, più lo strumento è potente, più cresce il divario tra ciò che compie ben inquadrato e ciò che produce lasciato a se stesso. Un modello mediocre, con o senza quadro, produce un lavoro mediocre: il divario è piccolo, il quadro sembra accessorio. Un modello eccellente produce, senza quadro, un modello standard brillante, e con un quadro, un lavoro difendibile: il divario è diventato immenso, ed è il quadro a portarlo per intero.

È una regolarità che tutte le tecniche potenti hanno verificato prima dell'IA. Più gli aerei sono diventati capaci, più le procedure, le checklist e il controllo aereo hanno contato: non si è tolto il quadro man mano che i motori progredivano, lo si è densificato, perché ogni guadagno di potenza allargava insieme ciò che il volo ben governato permetteva e ciò che il volo mal governato costava. La farmacologia ha seguito lo stesso cammino: più le molecole sono attive, più la posologia, la prescrizione e la farmacovigilanza diventano l'essenziale del mestiere. La potenza non rende mai il quadro superfluo. Ne innalza il rendimento, e dunque l'esigenza.

L'intuizione inversa, tuttavia, resiste, e bisogna dire perché è così tenace. Viene da una confusione tra due progressi che non si sostituiscono: il progresso dello strumento e il progresso dell'uso. Ogni balzo dei modelli migliora lo strumento, spettacolarmente, pubblicamente, misurabilmente. Ma l'uso serio, quello di cui qualcuno risponde, progredisce solo se il quadro progredisce con esso. Confondere i due porta all'errore classico: attendere dal prossimo modello ciò che solo il quadro può dare, e stupirsi, generazione dopo generazione, che la promessa arretri man mano che la si crede vicina.

Un modello medio rende il quadro accessorio. Un modello eccellente lo rende decisivo. La potenza non sostituisce il quadro: ne innalza la posta.

La legge generale

Ciò che il diritto sperimenta qui, tutte le discipline strumentate lo conoscono o lo conosceranno. La legge si formula semplicemente: ogni strumento potente esige un quadro alla misura della sua potenza, e il valore si sposta verso quel quadro man mano che lo strumento si banalizza. Il motore d'aereo ha fatto il valore dei costruttori per un tempo; poi la sicurezza, la certificazione e l'esercizio hanno fatto la differenza tra le compagnie. La molecola ha fatto il valore dei laboratori per un tempo; poi la sperimentazione clinica, la prescrizione e il follow-up hanno fatto la medicina moderna. Ogni volta, lo strumento si è banalizzato, e il quadro è diventato il mestiere.

L'intelligenza artificiale segue esattamente questa traiettoria, a velocità superiore. I modelli progrediscono e si banalizzano insieme: ogni balzo di capacità è seguito, a qualche mese, da equivalenti concorrenti, e il vantaggio del miglior motore si scioglie man mano che tutti diventano eccellenti. Ciò che non si banalizza è ciò che trasforma quell'eccellenza generica in lavoro particolare: l'architettura che tiene il compito intero, la memoria che tiene la pratica, il metodo che tiene la qualità, il contesto che tiene il cliente. Quel quadro non esce dai laboratori dei modelli, perché non si impara dal corpus generale: si costruisce a contatto con il mestiere, e appartiene a chi lo costruisce.

Si obietterà che il grande pubblico usa i modelli nudi, massicciamente e con profitto. È vero, e questo conferma la legge invece di smentirla. L'uso del grande pubblico è fatto di compiti brevi, senza posta di responsabilità, di cui nessuno deve rispondere: la conversazione, la riformulazione, l'idea di partenza. È esattamente il regime in cui il quadro conta poco, perché il compito lo porta in sé. La linea di demarcazione sta lì: sotto una certa soglia di posta e di taglia, il modello nudo basta e basterà sempre meglio; sopra, il quadro decide tutto, e quella soglia è precisamente la frontiera tra l'uso del grande pubblico e l'uso professionale. Le professioni vivono solo sopra la soglia.

Lo strumento si banalizza, il quadro diventa il mestiere. Questa traiettoria non ha mai fatto eccezione.

Che cosa cambia per chi decide

Per un'organizzazione giuridica, questa legge rovescia la domanda d'acquisto. La domanda non è «quale modello è il più potente questo trimestre», poiché la risposta cambia ogni trimestre e tutti convergono verso l'eccellenza. La domanda è: dov'è il quadro che trasformerà questa potenza, qualunque sia, in lavoro di cui la mia organizzazione può rispondere? Un'organizzazione che testa i modelli nudi confronterà modelli standard brillanti e concluderà, a ragione, che nessuno va bene. La stessa organizzazione, dotata di uno strato che porta la pratica, il metodo e la traccia, scoprirà che il minimo balzo dei modelli si converte immediatamente in guadagno reale, perché il quadro è lì per catturarlo.

Questo rovesciamento ha una conseguenza pratica immediata: cambia ciò che bisogna testare. Valutare modelli nudi su frammenti di compiti significa misurare ciò che si banalizza, e mancare ciò che decide. Il buon test è quello del compito intero: affidare un lavoro completo, con la sua posta, la sua pratica e i suoi vincoli, e guardare non la qualità delle frasi ma la tenuta dell'insieme, la tracciabilità delle scelte, la possibilità per un responsabile di firmare il risultato. Quel test non confronta più motori. Confronta quadri, ed è quello che predice ciò che l'organizzazione vivrà realmente.

È questa conversione che MAX è stato concepito per operare. Non rivaleggiare con la potenza dei modelli, corsa persa e senza oggetto, ma costruire il quadro che la trasforma in esecuzione giuridica governata: l'architettura che tiene il compito da un capo all'altro, la memoria che tiene la pratica nel tempo, il metodo che impone le verifiche, il contesto che fa di ogni produzione quella di questo studio e di questo cliente. Più i motori progrediranno, più questo quadro conterà. Non è una scommessa sulla debolezza dei modelli. È una scommessa sulla loro forza.

Il miglior modello nudo produce modelli standard. Lo stesso modello, inquadrato, produce lavoro difendibile. La differenza tra i due non è il modello.