TECNOLOGIA E SICUREZZA

Le preoccupazioni più comuni dei CISO sull’IA generativa: come stimolare un’adozione responsabile

L’intelligenza artificiale generativa (Generative AI) ha assunto un ruolo centrale all’interno della community degli esperti in sicurezza informatica, ma i Chief Information Security Officer (CISO) sono riluttanti a integrarla nel loro stack tecnologico e hanno delle buone ragioni. Ecco quali

Pubblicato il 31 Ott 2023

Sven Krasser

Chief Scientist and SVP, CrowdStrike

Preoccupazioni dei CISO sull'IA generativa

L’intelligenza artificiale generativa è al centro delle attenzioni della community degli esperti in sicurezza: mentre i dipendenti potrebbero già potenzialmente utilizzarla quotidianamente, che sia per avere un aiuto con la scrittura di email o nella stesura dei contenuti per i blog, i Chief Information Security Officer (CISO) sono ancora restii a integrarla nel loro stack tecnologico.

Le loro preoccupazioni sono d’altra parte fondate: per i CISO è fondamentale che l’intelligenza artificiale generativa sia precisa, sicura e responsabile.

Ma la tecnologia attuale risponde ai loro standard elevati?

Chi deve controllare l’intelligenza artificiale? L’alternativa del modello open source

Necessario bilanciare rischi e benefici

I CISO e i CIO hanno accolto l’intelligenza artificiale generativa sia con preoccupazione che con entusiasmo. Ne riconoscono, infatti, la capacità di migliorare la produttività o di integrarsi con i team IT e di sicurezza, colpiti dalla continua carenza di competenze.

Tuttavia, questi benefici vanno necessariamente bilanciati con i nuovi rischi di questa tecnologia. Per questo motivo, ci sono alcune domande in materia di sicurezza che i leader odierni si devono porre prima di acconsentire all’uso dell’intelligenza artificiale generativa nei loro ambienti, sia come strumento per il personale sia come componente di prodotto:

  1. Cosa comporterà l’IA per la mia superfice di attacco? L’IA, infatti, apre nuove superfici di attacco – injection (tecnica di attacco), data poisoning (cosiddetto avvelenamento dei dati), allucinazioni dell’intelligenza artificiale (esito di un malfunzionamento dell’IA che genera un output – testi, audio, video o immagini – falso).
  2. Cosa succede alla compliance? Molti dei modelli LLM sono basati su cloud (OpenAI, Bedrock ecc.) e questo apre nuovi scenari di rischio.
  3. Come gestire le questioni relative al copyright e alle policy di privacy? Abbiamo tutti visto il caso Getty Images vs. Stability AI.
  4. Qual è lo scenario normativo? Ricordiamo l’EU AI Act, il NIST AI Risk Management Framework e, infine, il White House Blueprint for AI Bill of Rights.

Nuovi strumenti di AI per una maggiore produttività

Siamo realisti. È probabile che il personale in molte aziende stia già utilizzando l’intelligenza artificiale generativa, nota per essere estremamente utile per semplificare compiti comuni. Ad esempio, il sales manager ha bisogno di inviare una email ben scritta a un potenziale cliente? Con l’IA è presto fatto.

Il team di supporto deve scrivere spiegazioni per la Knowledge Base? Anche questo può essere fatto velocemente.

Il team marketing ha bisogno di un’immagine per una brochure? È molto più veloce affidarsi all’IA che cercare l’immagine perfetta nel database.

Se uno sviluppatore software ha bisogno di scrivere rapidamente un codice, ci sono modelli specifici anche per questo.

Tutti questi utilizzi hanno una cosa in comune: dimostrano il potere dell’IA generativa nel far risparmiare tempo, aumentare la produttività e rendere i compiti quotidiani più comodi per i dipendenti di tutti i reparti.

Ma quali sono gli svantaggi?

Innanzitutto, molti tool di IA sono ospitati online o si basano su un componente online. Ciò significa che quando un team invia dati proprietari o dati dei clienti, le condizioni di servizio potrebbero offrire molto poco in termini di confidenzialità, sicurezza o compliance.

Inoltre, i dati inviati potrebbero essere utilizzati per educare l’IA stessa, il che significa che i nomi e i dati di contatto dei tuoi potenziali clienti rimarranno permanentemente nei dati del modello IA. Ciò significa che è necessario valutare gli strumenti di IA generativa nello stesso modo in cui si valutano gli strumenti di altri fornitori.

Un’altra preoccupazione importante è la tendenza dei modelli AI ad “allucinare”, cioè a fornire con sicurezza informazioni errate. A causa della procedura di training i tool di IA sono condizionati a fornire risposte che sembrano accurate, non risposte che sono effettivamente accurate. Un esempio sfortunato di ciò si è verificato quando gli avvocati hanno accusato ChatGPT di averli ingannati includendo leggi inventate in una presentazione in tribunale.

Poi ci sono varie preoccupazioni relative al copyright. Un esempio recente è il caso Getty Images contro Stability AI, in cui si è sostenuto che l’azienda aveva copiato 12 milioni di immagini senza autorizzazione per addestrare il suo modello AI.

Per i modelli di generazione del codice sorgente, c’è il rischio che questi generino involontariamente codice soggetto a licenze open source, il che potrebbe richiedere anche la pubblicazione in open source di parti del codice.

Il potenziale per prodotti più potenti

Supponiamo che un’azienda voglia utilizzare l’IA generativa come parte del suo prodotto. Cosa si deve considerare? In primo luogo, è necessario assicurarsi che il processo di approvvigionamento aziendale venga rispettato.

Se chi sviluppa e progetta il prodotto inizia a testare fornitori con le proprie carte di credito, c’è il rischio di incorrere negli stessi problemi di confidenzialità descritti in precedenza.

Se si utilizza uno dei modelli aperti, occorre verificare che l’ufficio legale abbia la possibilità di esaminarne la licenza.

Molti modelli di IA generativa vengono forniti con restrizioni d’uso, sia per come il modello può essere utilizzato sia per cosa è consentito fare con l’output del modello. Sebbene molte di queste licenze possano sembrare open source, in realtà non lo sono.

Se l’azienda educa i suoi modelli, processo che prevede quindi il perfezionamento di modelli aperti, bisogna considerare quali dati si stanno utilizzando e se sono corretti a tal fine.

Ciò che il modello vede durante il processo di apprendimento potrebbe emergere nuovamente al momento dell’inferenza. Questo è conforme alle policy aziendali di conservazione dei dati? Inoltre, se si educa un modello su dati del Cliente A e poi il Cliente B utilizza quel modello per l’inferenza, il Cliente B potrebbe vedere alcuni dati specifici del Cliente A. In sostanza, nel mondo dei modelli generativi, i dati possono fuoriuscire attraverso il modello stesso.

L’IA generativa ha una sua specifica superfice di attacco. Il team che si occupa della sicurezza del prodotto dovrà cercare nuovi possibili vettori di attacchi, come gli attacchi di injection delle prompt indiretti. Se un aggressore può controllare il testo di input fornito a un grande modello di linguaggio generativo, ad esempio, le istruzioni per il riassunto del testo, potrà confondere il modello facendogli credere che il testo sia un nuovo prompt.

Ultimo fattore da tenere in considerazione è che è necessario rimanere aggiornati sulle nuove normative. In tutto il mondo, si stanno sviluppando nuove regole e quadri normativi per affrontare le nuove sfide poste dall’IA generativa. Ad esempio, l’EU AI Act, il NIST AI Risk Management Framework e il White House Blueprint for AI Bill of Rights.

Intelligenza artificiale generativa: serve un’adozione responsabile

Una cosa resta comunque certa: l’IA generativa è qui per restare e sia i dipendenti che i clienti sono entusiasti di sfruttarne il potenziale.

Come professionisti della sicurezza, abbiamo l’opportunità di portare le nostre preoccupazioni al tavolo per stimolare un’adozione responsabile, in modo che l’entusiasmo di oggi non si trasformi in rimpianto un domani.

I CISO e gli altri responsabili aziendali dovrebbero quindi prendersi del tempo per riflettere sul ruolo che l’IA gioca nella loro azienda e nei loro prodotti.

Affrontare l’adozione dell’IA con consapevolezza può consentire all’azienda di ridurre i rischi e al tempo stesso accelerare e prosperare.

Valuta la qualità di questo articolo

La tua opinione è importante per noi!

Speciale PNRR

Tutti
Incentivi
Salute digitale
Formazione
Analisi
Sostenibilità
PA
Sostemibilità
Sicurezza
Digital Economy
CODICE STARTUP
Imprenditoria femminile: come attingere ai fondi per le donne che fanno impresa
DECRETI
PNRR e Fascicolo Sanitario Elettronico: investimenti per oltre 600 milioni
IL DOCUMENTO
Competenze digitali, ecco il nuovo piano operativo nazionale
STRUMENTI
Da Istat e RGS gli indicatori per misurare la sostenibilità nel PNRR
STRATEGIE
PNRR – Piano nazionale di Ripresa e Resilienza: cos’è e novità
FONDI
Pnrr, ok della Ue alla seconda rata da 21 miliardi: focus su 5G e banda ultralarga
GREEN ENERGY
Energia pulita: Banca Sella finanzia i progetti green incentivati dal PNRR
TECNOLOGIA SOLIDALE
Due buone notizie digitali: 500 milioni per gli ITS e l’inizio dell’intranet veloce in scuole e ospedali
INNOVAZIONE
Competenze digitali e InPA cruciali per raggiungere gli obiettivi del Pnrr
STRATEGIE
PA digitale 2026, come gestire i fondi PNRR in 5 fasi: ecco la proposta
ANALISI
Value-based healthcare: le esperienze in Italia e il ruolo del PNRR
Strategie
Accordi per l’innovazione, per le imprese altri 250 milioni
Strategie
PNRR, opportunità e sfide per le smart city
Strategie
Brevetti, il Mise mette sul piatto 8,5 milioni
Strategie
PNRR e opere pubbliche, la grande sfida per i Comuni e perché bisogna pensare digitale
Formazione
Trasferimento tecnologico, il Mise mette sul piatto 7,5 milioni
Strategie
PSN e Strategia Cloud Italia: a che punto siamo e come supportare la PA in questo percorso
Dispersione idrica
Siccità: AI e analisi dei dati possono ridurre gli sprechi d’acqua. Ecco gli interventi necessari
PNRR
Cloud, firmato il contratto per l’avvio di lavori del Polo strategico
Formazione
Competenze digitali, stanziati 48 milioni per gli Istituti tecnologici superiori
Iniziative
Digitalizzazione delle reti idriche: oltre 600 milioni per 21 progetti
Competenze e competitività
PNRR, così i fondi UE possono rilanciare la ricerca e l’Università
Finanziamenti
PNRR, si sbloccano i fondi per l’agrisolare
Sanità post-pandemica
PNRR, Missione Salute: a che punto siamo e cosa resta da fare
Strategie
Sovranità e autonomia tecnologica nazionale: come avviare un processo virtuoso e sostenibile
La relazione
Pnrr e PA digitale, l’alert della Corte dei conti su execution e capacità di spesa
L'editoriale
Elezioni 2022, la sfida digitale ai margini del dibattito politico
Strategie
Digitale, il monito di I-Com: “Senza riforme Pnrr inefficace”
Transizione digitale
Pnrr: arrivano 321 milioni per cloud dei Comuni, spazio e mobilità innovativa
L'analisi I-COM
Il PNRR alla prova delle elezioni: come usare bene le risorse e centrare gli obiettivi digitali
Cineca
Quantum computing, una svolta per la ricerca: lo scenario europeo e i progetti in corso
L'indice europeo
Desi, l’Italia scala due posizioni grazie a fibra e 5G. Ma è (ancora) allarme competenze
L'approfondimento
PNRR 2, ecco tutte le misure per cittadini e imprese: portale sommerso, codice crisi d’impresa e sismabonus, cosa cambia
Servizi digitali
PNRR e trasformazione digitale: ecco gli investimenti e le riforme previste per la digitalizzazione della PA
Legal health
Lo spazio europeo dei dati sanitari: come circoleranno le informazioni sulla salute nell’Unione Europea
Servizi digitali
PNRR e PA digitale: non dimentichiamo la dematerializzazione
Digital Healthcare transformation
La trasformazione digitale degli ospedali
Governance digitale
PA digitale, è la volta buona? Così misure e risorse del PNRR possono fare la differenza
Servizi digitali
Comuni e digitale, come usare il PNRR senza sbagliare
La survey
Pnrr e digitale accoppiata vincente per il 70% delle pmi italiane
Missione salute
Fascicolo Sanitario Elettronico alla prova del PNRR: limiti, rischi e opportunità
Servizi pubblici
PNRR: come diventeranno i siti dei comuni italiani grazie alle nuove risorse
Skill gap
PNRR, la banda ultra larga crea 20.000 nuovi posti di lavoro
Il Piano
Spazio, Colao fa il punto sul Pnrr: i progetti verso la milestone 2023
FORUMPA2022
PNRR e trasformazione digitale: rivedi i Talk di FORUM PA 2022 in collaborazione con le aziende partner
I contratti
Avio, 340 milioni dal Pnrr per i nuovi propulsori a metano
Next Generation EU
PNRR, a che punto siamo e cosa possono aspettarsi le aziende private
Fondi
Operativo il nuovo portale del MISE con tutti i finanziamenti per le imprese
Servizi comunali
Il PNRR occasione unica per i Comuni digitali: strumenti e risorse per enti e cittadini
Healthcare data platform
PNRR dalla teoria alla pratica: tecnologie e soluzioni per l’innovazione in Sanità
Skill
Competenze digitali, partono le Reti di facilitazione
Gli obiettivi
Scuola 4.0, PNRR ultima chance: ecco come cambierà il sistema formativo
Sistema Paese
PNRR 2, è il turno della space economy
FORUM PA 2022
FORUM PA 2022: la maturità digitale dei comuni italiani rispetto al PNRR
Analisi
PNRR: dalla Ricerca all’impresa, una sfida da cogliere insieme
Innovazione
Pnrr, il Dipartimento per la Trasformazione digitale si riorganizza
FORUM PA 2022
PA verde e sostenibile: il ruolo di PNRR, PNIEC, energy management e green public procurement
Analisi
PNRR, Comuni e digitalizzazione: tutto su fondi e opportunità, in meno di 3 minuti. Guarda il video!
Rapporti
Competenze digitali e servizi automatizzati pilastri del piano Inps
Analisi
Attuazione del PNRR: il dialogo necessario tra istituzioni e società civile. Rivedi lo Scenario di FORUM PA 2022
Progetti
Pnrr, fondi per il Politecnico di Torino. Fra i progetti anche IS4Aerospace
Analisi
PNRR, Colao fa il punto sulla transizione digitale dell’Italia: «In linea con tutte le scadenze»
La Svolta
Ict, Istat “riclassifica” i professionisti. Via anche al catalogo dati sul Pnrr
Analisi
Spazio, Colao fa il punto sul Pnrr: i progetti verso la milestone 2023
FORUM PA 2022
Ecosistema territoriale sostenibile: l’Emilia Romagna tra FESR e PNRR
Il Piano
Innovazione, il Mise “centra” gli obiettivi Pnrr: attivati 17,5 miliardi
Analisi
PNRR: raggiunti gli obiettivi per il primo semestre 2022. Il punto e qualche riflessione
Analisi
PNRR: dal dialogo tra PA e società civile passa il corretto monitoraggio dei risultati, tra collaborazione e identità dei luoghi
Webinar
Comuni e PNRR: un focus sui bandi attivi o in pubblicazione
Analisi
Formazione 4.0: cos’è e come funziona il credito d’imposta
PA e Sicurezza
PA e sicurezza informatica: il ruolo dei territori di fronte alle sfide della digitalizzazione
PA e sicurezza
PNRR e servizi pubblici digitali: sfide e opportunità per Comuni e Città metropolitane
Water management
Water management in Italia: verso una transizione “smart” e “circular” 
LE RISORSE
Transizione digitale, Simest apre i fondi Pnrr alle medie imprese
Prospettive
Turismo, cultura e digital: come spendere bene le risorse del PNRR
Analisi
Smart City: quale contributo alla transizione ecologica
Decarbonizzazione
Idrogeno verde, 450 milioni € di investimenti PNRR, Cingolani firma
Unioncamere
PNRR, imprese in ritardo: ecco come le Camere di commercio possono aiutare
I fondi
Industria 4.0: solo un’impresa su tre pronta a salire sul treno Pnrr
CODICE STARTUP
Imprenditoria femminile: come attingere ai fondi per le donne che fanno impresa
DECRETI
PNRR e Fascicolo Sanitario Elettronico: investimenti per oltre 600 milioni
IL DOCUMENTO
Competenze digitali, ecco il nuovo piano operativo nazionale
STRUMENTI
Da Istat e RGS gli indicatori per misurare la sostenibilità nel PNRR
STRATEGIE
PNRR – Piano nazionale di Ripresa e Resilienza: cos’è e novità
FONDI
Pnrr, ok della Ue alla seconda rata da 21 miliardi: focus su 5G e banda ultralarga
GREEN ENERGY
Energia pulita: Banca Sella finanzia i progetti green incentivati dal PNRR
TECNOLOGIA SOLIDALE
Due buone notizie digitali: 500 milioni per gli ITS e l’inizio dell’intranet veloce in scuole e ospedali
INNOVAZIONE
Competenze digitali e InPA cruciali per raggiungere gli obiettivi del Pnrr
STRATEGIE
PA digitale 2026, come gestire i fondi PNRR in 5 fasi: ecco la proposta
ANALISI
Value-based healthcare: le esperienze in Italia e il ruolo del PNRR
Strategie
Accordi per l’innovazione, per le imprese altri 250 milioni
Strategie
PNRR, opportunità e sfide per le smart city
Strategie
Brevetti, il Mise mette sul piatto 8,5 milioni
Strategie
PNRR e opere pubbliche, la grande sfida per i Comuni e perché bisogna pensare digitale
Formazione
Trasferimento tecnologico, il Mise mette sul piatto 7,5 milioni
Strategie
PSN e Strategia Cloud Italia: a che punto siamo e come supportare la PA in questo percorso
Dispersione idrica
Siccità: AI e analisi dei dati possono ridurre gli sprechi d’acqua. Ecco gli interventi necessari
PNRR
Cloud, firmato il contratto per l’avvio di lavori del Polo strategico
Formazione
Competenze digitali, stanziati 48 milioni per gli Istituti tecnologici superiori
Iniziative
Digitalizzazione delle reti idriche: oltre 600 milioni per 21 progetti
Competenze e competitività
PNRR, così i fondi UE possono rilanciare la ricerca e l’Università
Finanziamenti
PNRR, si sbloccano i fondi per l’agrisolare
Sanità post-pandemica
PNRR, Missione Salute: a che punto siamo e cosa resta da fare
Strategie
Sovranità e autonomia tecnologica nazionale: come avviare un processo virtuoso e sostenibile
La relazione
Pnrr e PA digitale, l’alert della Corte dei conti su execution e capacità di spesa
L'editoriale
Elezioni 2022, la sfida digitale ai margini del dibattito politico
Strategie
Digitale, il monito di I-Com: “Senza riforme Pnrr inefficace”
Transizione digitale
Pnrr: arrivano 321 milioni per cloud dei Comuni, spazio e mobilità innovativa
L'analisi I-COM
Il PNRR alla prova delle elezioni: come usare bene le risorse e centrare gli obiettivi digitali
Cineca
Quantum computing, una svolta per la ricerca: lo scenario europeo e i progetti in corso
L'indice europeo
Desi, l’Italia scala due posizioni grazie a fibra e 5G. Ma è (ancora) allarme competenze
L'approfondimento
PNRR 2, ecco tutte le misure per cittadini e imprese: portale sommerso, codice crisi d’impresa e sismabonus, cosa cambia
Servizi digitali
PNRR e trasformazione digitale: ecco gli investimenti e le riforme previste per la digitalizzazione della PA
Legal health
Lo spazio europeo dei dati sanitari: come circoleranno le informazioni sulla salute nell’Unione Europea
Servizi digitali
PNRR e PA digitale: non dimentichiamo la dematerializzazione
Digital Healthcare transformation
La trasformazione digitale degli ospedali
Governance digitale
PA digitale, è la volta buona? Così misure e risorse del PNRR possono fare la differenza
Servizi digitali
Comuni e digitale, come usare il PNRR senza sbagliare
La survey
Pnrr e digitale accoppiata vincente per il 70% delle pmi italiane
Missione salute
Fascicolo Sanitario Elettronico alla prova del PNRR: limiti, rischi e opportunità
Servizi pubblici
PNRR: come diventeranno i siti dei comuni italiani grazie alle nuove risorse
Skill gap
PNRR, la banda ultra larga crea 20.000 nuovi posti di lavoro
Il Piano
Spazio, Colao fa il punto sul Pnrr: i progetti verso la milestone 2023
FORUMPA2022
PNRR e trasformazione digitale: rivedi i Talk di FORUM PA 2022 in collaborazione con le aziende partner
I contratti
Avio, 340 milioni dal Pnrr per i nuovi propulsori a metano
Next Generation EU
PNRR, a che punto siamo e cosa possono aspettarsi le aziende private
Fondi
Operativo il nuovo portale del MISE con tutti i finanziamenti per le imprese
Servizi comunali
Il PNRR occasione unica per i Comuni digitali: strumenti e risorse per enti e cittadini
Healthcare data platform
PNRR dalla teoria alla pratica: tecnologie e soluzioni per l’innovazione in Sanità
Skill
Competenze digitali, partono le Reti di facilitazione
Gli obiettivi
Scuola 4.0, PNRR ultima chance: ecco come cambierà il sistema formativo
Sistema Paese
PNRR 2, è il turno della space economy
FORUM PA 2022
FORUM PA 2022: la maturità digitale dei comuni italiani rispetto al PNRR
Analisi
PNRR: dalla Ricerca all’impresa, una sfida da cogliere insieme
Innovazione
Pnrr, il Dipartimento per la Trasformazione digitale si riorganizza
FORUM PA 2022
PA verde e sostenibile: il ruolo di PNRR, PNIEC, energy management e green public procurement
Analisi
PNRR, Comuni e digitalizzazione: tutto su fondi e opportunità, in meno di 3 minuti. Guarda il video!
Rapporti
Competenze digitali e servizi automatizzati pilastri del piano Inps
Analisi
Attuazione del PNRR: il dialogo necessario tra istituzioni e società civile. Rivedi lo Scenario di FORUM PA 2022
Progetti
Pnrr, fondi per il Politecnico di Torino. Fra i progetti anche IS4Aerospace
Analisi
PNRR, Colao fa il punto sulla transizione digitale dell’Italia: «In linea con tutte le scadenze»
La Svolta
Ict, Istat “riclassifica” i professionisti. Via anche al catalogo dati sul Pnrr
Analisi
Spazio, Colao fa il punto sul Pnrr: i progetti verso la milestone 2023
FORUM PA 2022
Ecosistema territoriale sostenibile: l’Emilia Romagna tra FESR e PNRR
Il Piano
Innovazione, il Mise “centra” gli obiettivi Pnrr: attivati 17,5 miliardi
Analisi
PNRR: raggiunti gli obiettivi per il primo semestre 2022. Il punto e qualche riflessione
Analisi
PNRR: dal dialogo tra PA e società civile passa il corretto monitoraggio dei risultati, tra collaborazione e identità dei luoghi
Webinar
Comuni e PNRR: un focus sui bandi attivi o in pubblicazione
Analisi
Formazione 4.0: cos’è e come funziona il credito d’imposta
PA e Sicurezza
PA e sicurezza informatica: il ruolo dei territori di fronte alle sfide della digitalizzazione
PA e sicurezza
PNRR e servizi pubblici digitali: sfide e opportunità per Comuni e Città metropolitane
Water management
Water management in Italia: verso una transizione “smart” e “circular” 
LE RISORSE
Transizione digitale, Simest apre i fondi Pnrr alle medie imprese
Prospettive
Turismo, cultura e digital: come spendere bene le risorse del PNRR
Analisi
Smart City: quale contributo alla transizione ecologica
Decarbonizzazione
Idrogeno verde, 450 milioni € di investimenti PNRR, Cingolani firma
Unioncamere
PNRR, imprese in ritardo: ecco come le Camere di commercio possono aiutare
I fondi
Industria 4.0: solo un’impresa su tre pronta a salire sul treno Pnrr

Articoli correlati

Articolo 1 di 3