
ISO/IEC 27090:2026 yra tarptautinis standartas, teikiantis gaires dėl saugumo grėsmių ir kompromitavimo, turinčių įtakos dirbtinio intelekto sistemoms. Paskelbtas 2026 m. spalio 14 d., jis nagrinėja, kaip organizacijos gali suprasti, aptikti ir mažinti šias grėsmes per visą DI gyvavimo ciklą. Jo oficialus pavadinimas – Cybersecurity — Artificial intelligence (AI) — Addressing security threats and compromises to AI systems. ISO leidinio įrašas
Saugumo komandai praktinis klausimas paprastas: ką užpuolikas galėtų DI sistemoje pakeisti, iš jos pavogti ar priversti ją padaryti ir kas apribotų dėl to kilusią žalą?
Šiame vadove paaiškinama ISO 27090 standarto taikymo sritis, pagrindinės DI saugumo grėsmės, jo ryšys su ISO 27001 ir ISO 42001, taip pat praktinis būdas paversti gaires saugumo darbu, turinčiu atsakingus asmenis, apsaugos priemones ir įrodymus. Jo pagrindu atliktas tyrimas patikrintas 2026 m. spalio 18 d.
ISO 27090 daugiausia dėmesio skiria DI sistemų apsaugai. Jo dalykas neapsiriboja generatyviuoju DI, didžiaisiais kalbos modeliais ir pokalbių robotais – jis apima DI sistemas plačiau. ISO paaiškinimas apie ISO 27090
Paskelbtas standartas susieja nusistovėjusią informacijos saugumo praktiką su DI būdingomis grėsmėmis. Jo turinys apima valdymą, tiekimo grandinės saugumą, grėsmių modeliavimą ir raudonosios komandos testavimą (red teaming), o po to – kompromitavimo tipus, įskaitant nuodijimą, išvengimą, informacijos atskleidimą ir užklausų injekciją (prompt injection). Jame taip pat nagrinėjama, kaip rizikos mažinimo priemonės sąveikauja ir išlieka veiksmingos laikui bėgant. Paskelbto ISO/IEC 27090 pavyzdys
Taikymo sritis apima bet kokio dydžio organizacijas, kurios kuria arba naudoja DI, įskaitant įmones, valdžios institucijas ir ne pelno organizacijas. Todėl trečiosios šalies DI paslaugos įsigijimas organizacijos neišskiria iš numatytos auditorijos. IEC leidinio įrašas
Naudingas atspirties taškas – bendra peržiūra, kurioje dalyvauja saugumo, inžinerijos, duomenų, pirkimų specialistai ir verslo savininkas. Kiekvienas turėtų gebėti paaiškinti sistemos dalį, kurią kontroliuoja, ir sprendimus, kuriuos priimant priklauso nuo kitų.
DI taikomoji programa sujungia kelis dalykus, kuriuos verta vertinti atskirai: programinę įrangą, duomenis, modelių failus ar paslaugas, nurodymus, naudotojus ir tolesnius veiksmus.
Pavyzdžiui, apsvarstykite dokumentų asistentą, prijungtą prie vidinės žinių bazės. Įprasta peržiūra gali nagrinėti autentifikavimą, šifravimą ir programinės įrangos pažeidžiamumus. DI saugumo peržiūroje taip pat reikėtų paklausti, kas nutinka, jei gautas dokumentas bando pakeisti asistento nurodymus, ar naudotojai gali gauti medžiagą, viršijančią jų teises, ir kokius veiksmus gali sukelti sugeneruotas rezultatas.
Šie klausimai tampa reikšmingesni, kai asistentas gali atnaujinti įrašus arba iškviesti išorinius įrankius. Klaidingas atsakymas ir neleistinas veiksmas turi skirtingas pasekmes ir reikalauja skirtingų apsaugos priemonių.
Pirmajai peržiūrai išsiaiškinkite tris klausimus:
Tai praktinis taikymo srities nustatymo metodas toliau pateiktiems pavyzdžiams, o ne standarto punktų atkartojimas.
Toliau pateikti paaiškinimai remiasi NIST priešiškojo mašininio mokymosi terminija ir OWASP gairėmis dėl didžiųjų kalbos modelių taikomųjų programų. Scenarijai yra iliustraciniai. NIST priešiškojo mašininio mokymosi taksonomija OWASP gairės dėl užklausų injekcijos OWASP gairės dėl rezultatų apdorojimo
| Grėsmė | Ką ji reiškia | Iliustracinis scenarijus |
|---|---|---|
| Duomenų nuodijimas | Užpuolikas manipuliuoja mokymo ar derinimo duomenimis, kad paveiktų išmoktą elgseną. | Kažkas užteršia pavyzdžius, kurie bus naudojami klasifikatoriui iš naujo apmokyti. |
| Tiesioginis modelio nuodijimas | Užpuolikas pakeičia modelio parametrus arba modelio atnaujinimus. | Kompromituotas tiekėjas pateikia modelį su piktavališkai pakeistais svoriais. |
| Išvengimo atakos ir priešiški pavyzdžiai | Specialiai sukurti įvesties duomenys išvedimo metu sukelia nepageidaujamą rezultatą. | Pakeisti įvesties duomenys lemia, kad kenkėjiškas elementas klasifikuojamas kaip nekenksmingas. |
| Modelio vagystė ir modelio išgavimas | Modelio turtas gali būti pavogtas tiesiogiai; užklausomis grindžiamas išgavimas gali atskleisti informacijos apie modelį arba apytiksliai atkartoti jo funkcionalumą. | Užpuolikas nukopijuoja modelio failą arba sistemingai siunčia užklausas prognozavimo paslaugai. |
| Narystės nustatymas ir modelio inversija | Narystės nustatymas susijęs su tuo, ar įrašas buvo panaudotas mokymui. Inversija susijusi su informacijos apie pagrindinius duomenis atkūrimu. | Užpuolikas bando nustatyti, ar asmens įrašas buvo mokymo duomenų rinkinyje. |
| Užklausų injekcija | Nurodymai naudotojo įvestyje arba išoriniame turinyje nukreipia didžiojo kalbos modelio taikomosios programos elgseną. | Gautas dokumentas liepia asistentui išsiųsti konfidencialią medžiagą kitur. |
| Netinkamas rezultatų apdorojimas | Tolesnė taikomoji programa apdoroja modelio rezultatą be tinkamo patvirtinimo ar kodavimo. | Sugeneruotas tekstas perduodamas komandų interpretatoriui arba atvaizduojamas kaip aktyvus kodas. |
Rizikos vertinimo metu aiškiai atskirkite šias sąvokas. Kenkėjiškas dokumentas, kurį gauna paieška papildyto generavimo (RAG) taikomoji programa, savaime nėra mokymo duomenų nuodijimas: paieška pati savaime neatnaujina modelio svorių. Vietoj to ji gali padaryti taikomąją programą pažeidžiamą netiesioginei užklausų injekcijai.
Didžiųjų kalbos modelių saugumui vien griežtesnės užklausos yra nepakankama kontrolės strategija. OWASP rekomenduoja tokias apsaugos priemones kaip ribotos privilegijos ir jautrių veiksmų patvirtinimas, o NCSC pabrėžia, kad užklausų injekciją reikia valdyti kaip nuolatinę riziką per sistemos projektavimą ir eksploatavimą. OWASP gairės dėl užklausų injekcijos NCSC gairės dėl užklausų injekcijos rizikos
Šie standartai padeda įvairioms organizacijos saugumo ir DI valdymo darbo dalims.
| Standartas | Pagrindinė paskirtis | Kaip jį naudoti kartu su ISO 27090 |
|---|---|---|
| ISO/IEC 27090:2026 | Gairės dėl saugumo grėsmių ir kompromitavimo, turinčių įtakos DI sistemoms. | Išnagrinėkite DI atakų scenarijus ir tinkamas apsaugos priemones. |
| ISO/IEC 27001 | Informacijos saugumo valdymo sistemos (ISMS) reikalavimai. | Įtraukite DI saugumo rizikas į nusistovėjusius rizikos atsakomybės, peržiūros ir tobulinimo procesus. |
| ISO/IEC 27002 | Gairės dėl informacijos saugumo kontrolės priemonių. | Susiekite DI būdingas apsaugos priemones su platesne saugumo praktika. |
| ISO/IEC 42001 | DI valdymo sistemos (AIMS) reikalavimai. | Suderinkite DI saugumą su platesniu organizacijos DI valdymu. |
Šie skirtumai atitinka leidėjų pateiktus ISO 27001, ISO 27002 ir ISO 42001 aprašymus.
Komandai, kuri jau taiko ISMS, praktiškas būdas – išplėsti esamus įrašus. Įtraukite atitinkamas DI sistemas į turto apskaitą, įvertinkite jų atakų kelius, paskirkite rizikos tvarkymo atsakinguosius ir susiekite patvirtinančius įrodymus. Daugiau apie šio darbo organizavimą rasite ISO 27001 diegimo kontroliniame sąraše.
Toliau pateikti žingsniai yra diegimo metodas, parengtas remiantis standarto tematika ir viešomis saugaus DI gairėmis. Tai nėra oficialus ISO kontrolinis sąrašas ar privalomų punktų išdėstymas.
Pasirinkite DI naudojimo atvejį su aiškia verslo paskirtimi. Užregistruokite atsakingą savininką, naudotojus, modelio teikėją, talpinimo tvarką ir prijungtas paslaugas.
Tada nubrėžkite peržiūros ribą. Įtraukite taikomąją programą ir jos priklausomybes, o ne tik modelio galinį tašką. Klientams skirtam asistentui su prieiga prie įrankių reikia kitokio vertinimo nei vidiniam teksto apibendrinimo įrankiui, neturinčiam teisės atlikti veiksmų.
Naudingas rezultatas: sistemos įrašas, kuriame nurodyta jos paskirtis, ribos, priklausomybės, leidžiami veiksmai ir atsakingas savininkas.
Užregistruokite, iš kur gaunami duomenų rinkiniai ir modelių artefaktai, kas gali juos keisti ir kurios versijos yra įdiegtos. Įtraukite sistemai svarbius derinimo įvesties duomenis, paieškos rinkinius, užklausas ir grįžtamojo ryšio kanalus.
NCSC kūrimo gairės rekomenduoja sekti DI turtą ir jo kilmę, jį apsaugoti ir išsaugoti informaciją, reikalingą patikimoms versijoms atkurti. NCSC saugaus DI kūrimo gairės
Jei modelis įsigytas, paklauskite teikėjo, už kokias pareigas jis atsako ir kokią informaciją jis pateikia, kai keičiasi modeliai ar paslaugos.
Naudingas rezultatas: versijomis žymima apskaita su šaltiniais, prieigos taisyklėmis, pakeitimų istorija ir tiekėjų pareigomis.
Peržiūrėkite sistemą užpuoliko požiūriu. Nustatykite įėjimo taškus, jautrų turtą, teises ir sėkmingo kompromitavimo pasekmes. NCSC saugaus projektavimo gairės rekomenduoja grėsmių modeliavimą ir dėmesį trečiųjų šalių komponentams bei mažiausių privilegijų principui. NCSC saugaus DI projektavimo gairės
Rašykite konkrečius scenarijus. „DI rizika“ yra per plati sąvoka, kad paskatintų naudingą veiksmą. „Išorinės šalies įkeltas dokumentas įtikina asistentą paprašyti riboto naudojimo įrodymų failo“ suteikia komandai kai ką konkretaus analizuoti.
Prioritetus nustatykite pagal poveikį ir galimą žalą. Užregistruokite, kas prisiima likutinę riziką ir kada šį sprendimą reikėtų peržiūrėti.
Naudingas rezultatas: trumpas rizikų registras, susiejantis atakų scenarijus su turtu, pasekmėmis, apsaugos priemonėmis ir atsakingaisiais.
Pasirinkite kontrolės priemones scenarijui, kurį sprendžiate. Modelio turtui tai gali reikšti apsaugotą saugojimą, prieigos apribojimus ir vientisumo patikras. Įdiegtoms paslaugoms apsvarstykite autentifikavimą, aplinkų atskyrimą ir kontrolės priemones, mažinančias neleistiną prieigą ar duomenų nutekinimą. Tai yra NCSC diegimo gairių temos. NCSC saugaus DI diegimo gairės
Sugeneruotą rezultatą patvirtinkite ir užkoduokite pagal jo paskirties vietą, prieš kitai sistemai imantis veiksmų jo pagrindu. OWASP rezultatų apdorojimo gairėse paaiškinama, kodėl modelio rezultatas neturėtų įgyti įgaliojimų vien todėl, kad jį pateikė modelis. OWASP gairės dėl rezultatų apdorojimo
Naudingas rezultatas: kontrolės priemonės įrašas, kuriame nurodyta saugoma riba, jos atsakingasis ir įrodymai, naudojami jai patikrinti.
Kurkite testus pagal pasekmes, nustatytas jūsų grėsmių modelyje. RAG asistentui naudokite priešiškus dokumentus ir naudotojus su skirtingomis teisėmis. Agentui patikrinkite, kas nutinka, kai gautas turinys prašo jį viršyti leidžiamus veiksmus.
Prieš paleisdami testą, apibrėžkite tikėtiną rezultatą. Pavyzdys: taikomoji programa turi atmesti riboto naudojimo failo užklausą net tada, kai modelis bando tokią užklausą pateikti.
Užregistruokite taikomosios programos konfigūraciją, modelio versiją, testo įvesties duomenis, rezultatą ir bet kokius taisomuosius veiksmus. Pasirinkite testavimo duomenis, kurie be reikalo neatskleidžia tikros konfidencialios informacijos.
Naudingas rezultatas: pakartojami saugumo testai, susieti su konkrečiomis rizikomis ir išleidimo sprendimais.
Peržiūrėkite modelio, duomenų ir užklausų atnaujinimų poveikį. Stebėkite atitinkamus įvesties duomenis ir rezultatus, kartu apsaugodami jautrią informaciją žurnaluose. NCSC eksploatavimo gairės pabrėžia elgsenos stebėseną ir pokyčių poveikį saugumui viso eksploatavimo metu. NCSC saugaus DI eksploatavimo gairės
Iš anksto nuspręskite, kas gali išjungti įrankį, atšaukti prisijungimo duomenis, izoliuoti integraciją ar atšaukti išleistą versiją. Nustatykite peržiūros paskatas, pavyzdžiui, naują teikėją, išplėstas teises, reikšmingą modelio atnaujinimą ar saugumo incidentą.
Naudingas rezultatas: stebėsenos pareigos, pokyčių peržiūros kriterijai, reagavimo į incidentus procedūra ir išbandytas atkūrimo kelias.
Toliau pateikta lentelė yra siūlomas darbinis šablonas. Jos įrodymų pavyzdžiai yra praktinės rekomendacijos, o ne ISO 27090 privalomų dokumentų sąrašas.
| Rizikos scenarijus | Apsaugos priemonės pavyzdys | Saugotini įrodymai |
|---|---|---|
| Į mokymo duomenų rinkinį patenka neleistini pakeitimai | Apribokite pakeitimus ir peržiūrėkite duomenų išleidimus | Prieigos peržiūra, patvirtinimo įrašas ir duomenų rinkinio versija |
| Tiekėjo modelis pakeičiamas nepatvirtintu artefaktu | Prieš išleidimą patikrinkite jo šaltinį ir vientisumą | Patvirtintas šaltinis, vientisumo patikros rezultatas ir išleidimo sprendimas |
| Gautas turinys reikalauja riboto veiksmo | Užtikrinkite teises taikomojoje programoje ir, kai tinka, reikalaukite patvirtinimo | Teisių konfigūracija ir priešiško testo rezultatas |
| Modelio rezultatas pasiekia jautrią tolesnę sistemą | Patvirtinkite prašomą operaciją ir apribokite jos įvesties duomenis | Patvirtinimo taisyklės ir atmestų operacijų testai |
| Jautri informacija atsiranda stebėsenos duomenyse | Apribokite rinkimą ir kontroliuokite prieigą bei saugojimą | Registravimo konfigūracija ir prieigos peržiūra |
| Atnaujinimas pakeičia saugumo elgseną | Pakartokite atitinkamus testus ir išsaugokite atkūrimo galimybę | Versijų istorija, testų palyginimas ir atkūrimo įrašas |
Pavyzdžiui, įsivaizduokite saugumo komandą, kuri naudoja asistentą klientų įrodymams apibendrinti. Tiekėjo dokumente yra nurodymų įkelti įrodymus išoriniu adresu.
Komandos testas turėtų atsekti bandomą veiksmą per visą taikomąją programą. Ar asistentas turi įrankį, galintį įkelti failus? Ar tas įrankis užtikrina naudotojo teises? Ar paskirties vietos apribotos? Ar perdavimui patvirtinti reikia atsakingo asmens?
Naudingame peržiūros įraše būtų nurodytas scenarijus, perdavimą užkertanti riba, testo rezultatas ir asmuo, patvirtinęs likutinę riziką. Jei sistema pasikeičia, šis įrašas kitam peržiūrėtojui parodo, ką reikia patikrinti iš naujo.
Toks požiūris suteikia vertinimui daugiau turinio nei teiginys, kad sistema naudoja „atsakingą DI“. Jis susieja saugumo sprendimą su tuo, ką gali patikrinti kitas žmogus. Daugiau apie patvirtinančios medžiagos organizavimą skaitykite straipsnyje kaip struktūruoti pasirengimą auditui.
ISO 27090 teikia saugumo gaires, o ne valdymo sistemos sertifikavimo reikalavimus. ISO paaiškinime jo paskirtis atskiriama nuo ISO 42001 nustatytų AIMS reikalavimų. ISO paaiškinimas apie ISO 27090
Pirmiausia nustatykite, kokio užtikrinimo jums reikia: saugumo peržiūros, atsakymo į kliento užtikrinimo užklausą, vidinio trūkumų vertinimo ar sertifikavimo pagal taikomą valdymo sistemos standartą.
Paprašykite visų, siūlančių vertinimą, nurodyti jo apimtį, kriterijus ir užtikrinimo schemą. Taip lengviau interpretuoti rezultatą ir išvengiama DI saugumo praktikos peržiūros painiojimo su valdymo sistemos sertifikavimu.
Diegimo projektui įsigykite paskelbtą standartą, palyginkite gaires su savo sistemomis ir užregistruokite, kodėl konkrečios apsaugos priemonės yra tinkamos. Šiame straipsnyje pateikti pavyzdžiai suteikia pradinę šio darbo struktūrą.
Tarptautinio standarto taikymas savaime neužtikrina atitikties ES dirbtinio intelekto aktui. 40 straipsnis atitikties prezumpciją sieja su darniaisiais standartais, kurių nuorodos paskelbtos Europos Sąjungos oficialiajame leidinyje, ir tik tiek, kiek jie apima atitinkamus reikalavimus ar įpareigojimus. ES dirbtinio intelekto akto 40 straipsnis
ISO 27090 saugumo peržiūrą naudokite kaip vieną iš atskirai apibrėžtos apimties atitikties vertinimo įvesties šaltinių. Saugokite įrašą apie vertinamą teisinį įpareigojimą, jį pagrindžiančius įrodymus ir bet kokius likusius trūkumus.
Pirmasis leidimas, ISO/IEC 27090:2026, paskelbtas 2026 m. spalio 14 d. Patikrinkite dabartinį leidėjo įrašą, jei senesnėje medžiagoje minimas projektas ar ankstesni metai. IEC leidinio įrašas
Jo paskelbtas turinys apima užklausų injekciją ir jautrius modelio rezultatus, todėl jis aktualus generatyviojo DI saugumui. Jo taikymo sritis apima ir kitas DI sistemas. Paskelbto ISO/IEC 27090 pavyzdys ISO paaiškinimas apie ISO 27090
Taip. Nurodyta auditorija apima tiek DI naudojančias, tiek jį kuriančias organizacijas. Pradėkite nuo rizikų ir pareigų, kurias kontroliuojate, ir nustatykite, ką turite žinoti apie savo tiekėjus. IEC leidinio įrašas
Valdymo sistemos sertifikatas negarantuoja, kad atskira taikomoji programa atlaikys kiekvieną ataką. Naudokite valdymo sistemą rizikos sprendimams organizuoti ir vertinkite faktinį DI sistemos projektą, konfigūraciją ir elgseną. ISO 27090 gali padėti nukreipti šį saugumo darbą.
Paskelbto standarto ir licencijavimo galimybių ieškokite oficialiame ISO kataloge arba IEC Webstore. Patikrinkite, ar žymuo yra ISO/IEC 27090:2026. Straipsnis ar peržiūra pateikia tik dalį medžiagos.
Pradėkite nuo vieno reikšmingo DI naudojimo atvejo. Nustatykite, kaip jis galėtų būti kompromituotas, pasirinkite apsaugos priemones atitinkamoms riboms ir apibrėžkite įrodymus, kurie parodys, kad tos priemonės veikia. Kiekvienam veiksmui paskirkite atsakingąjį ir peržiūros paskatą.
Secani bendroje saugumo ir atitikties darbo erdvėje susieja reikalavimus, rizikas, kontrolės priemones, įrodymus, atsakinguosius ir peržiūros sprendimus. Pasikalbėkite su Secani apie tai, kaip organizuoti DI saugumo darbą, kad komandos matytų, kas įvertinta, kam reikia dėmesio ir kas atsakingas.
Secani sujungia aprėptis, įrodymus, užduotis ir DI agentus vienoje bendroje darbo erdvėje.
ISO 27090 pateikia gaires DI saugumo darbui. ISO 42001 nustato reikalavimus DI valdymo sistemai. Štai kuo jie skiriasi ir kaip juos naudoti kartu.
Naudokite DI valdymo sistemas ir rizikos valdymo sistemas valdymui organizuoti, o Dirbtinio intelekto akto teisinius reikalavimus vertinkite atskirai.
Nuoroda į šaltinį nepadaro DI verdikto patikimo. Ryšys tarp reikalavimo, įrodymų ir verdikto turi būti patikrinamas.