Rischio di attacco da sovraccarico di contesto per l'IA

Robustezza Icona che rappresenta i rischi di robustezza.
Robustezza: attacchi immediati
Rischi di inferenza
Specifico dell'IA generativa

Descrizione

Sovraccaricare il prompt con un numero eccessivo di token, ad esempio con esempi con molti scatti, può predisporre i modelli a uno stato di vulnerabilità.

Perché l'attacco di sovraccarico del contesto è un problema per i modelli di fondazione?

Gli attacchi di sovraccarico del contesto possono essere utilizzati per alterare il comportamento del modello a vantaggio dell'attaccante. Il contenuto che genera può causare danni all'utente o ad altri.

Argomento principale: Atlante del rischio di IA

Forniamo esempi che la stampa ha riportato per spiegare molti dei rischi dei modelli di fondazione. Molti di questi eventi trattati dalla stampa sono ancora in evoluzione o sono stati risolti, e fare riferimento ad essi può aiutare il lettore a comprendere i rischi potenziali e a lavorare per mitigarli. Questi esempi sono evidenziati solo a scopo illustrativo.