Avvelenare un modello linguistico non richiede accesso ai suoi pesi: basta
saturare il web di contenuti calibrati. Il caso Clock Tower X documenta questa
strategia e solleva questioni urgenti su trasparenza, regolamentazione e
responsabilità epistemica nell’era dell’intelligenza artificiale generativa.
L’avvelenamento sistematico dei modelli linguistici di grandi dimensioni – LLM
poisoning – non è più una minaccia teorica confinata ai laboratori di
cybersecurity. È diventato oggetto di un contratto governativo, finanziato con
fondi pubblici esteri, progettato per alterare le risposte che milioni di utenti
ricevono ogni giorno da sistemi come ChatGPT. Il caso che lo dimostra arriva da
un filing ufficiale depositato presso il Dipartimento di Giustizia degli Stati
Uniti.
Indice degli argomenti
* Il contratto da 6 milioni di dollari che vuole riscrivere la “conoscenza”
dell’AI
* Le tre tecniche per avvelenare un modello linguistico
* Data poisoning: il veleno nel corpus di addestramento
* RAG poisoning: l’attacco al momento dell’interrogazione
* Generative Engine Optimization (GEO): la SEO per l’era dell’AI
* Il paradosso della delega: perché gli agenti AI non sono oracoli
* Verso un ecosistema informativo resiliente: le contromisure possibili
* Contromisure tecniche
* Contromisure istituzionali
* La sfida culturale: il vero terreno di battaglia
* Conclusione: la responsabilità epistemica resta umana
Leggi l'articolo
Tag - manipolazione
Zoe Hitzig, ricercatrice che ha lavorato negli ultimi due anni in OpenAI, ha
rassegnato le dimissioni nello stesso giorno in cui l'azienda ha iniziato a
testare gli annunci pubblicitari all'interno del chatbot. La decisione è stata
spiegata in un editoriale ospitato dal New York Times, in cui Hitzig collega
direttamente il lancio della pubblicità in ChatGPT a un cambio di rotta che, a
suo giudizio, allontana OpenAI dalle domande di sicurezza ed etica per cui aveva
scelto di unirsi all'azienda.
Al centro delle critiche di Hitzig non c'è la pubblicità in sé, che la
ricercatrice non definisce intrinsecamente immorale, ma la combinazione tra
annunci e natura dei dati raccolti da ChatGPT. Nel suo intervento, descrive le
interazioni con il chatbot come un "archivio di candore umano" senza precedenti,
costruito a partire da conversazioni in cui gli utenti condividono timori
medici, problemi di coppia, fragilità psicologiche e convinzioni religiose,
spesso nella convinzione di dialogare con uno strumento neutrale e privo di
interessi propri. Il timore è che un sistema di annunci inserito in questo
contesto possa evolvere verso forme di targeting profondamente personali,
difficili da comprendere e da controllare sia per gli utenti sia per i
regolatori.
Secondo Hitzig, la fase iniziale dei test potrebbe rispettare linee guida
relativamente prudenti, ma il problema emergerebbe nel lungo periodo, man mano
che si consolida il modello di business basato sulla pubblicità. La ricercatrice
richiama esplicitamente la traiettoria dei grandi social network, e in
particolare di Facebook, dove gli impegni iniziali sulla tutela della privacy
sarebbero stati progressivamente erosi dalla pressione di un motore economico
centrato su engagement, profilazione e microtargeting. Nel caso di ChatGPT, la
combinazione tra dati conversazionali intimi e ottimizzazione algoritmica degli
annunci potrebbe creare incentivi a spingere contenuti capaci di influenzare
decisioni sensibili, dagli acquisti alla salute, fino alle opinioni politiche,
sfruttando contesti emotivi particolarmente vulnerabili.
Articolo completo qui
Fonte originale New York Times qui