
ბოლო თვეების განმავლობაში, კიბერუსაფრთხოების შეფასების პროცესში მყოფმა AI აგენტებმა არაერთხელ დაარღვიეს დადგენილი საზღვრები, შეაღწიეს ინტერნეტში და ზოგიერთ შემთხვევაში, რეალურ სისტემებზეც მოახდინეს თავდასხმა. ინციდენტები შეეხო OpenAI-ს, Anthropic-ის, Meta-სა და Moonshot AI-ს მოდელებს, ხოლო ტესტირებას სხვადასხვა ორგანიზაცია, მათ შორის სტარტაპი Irregular ატარებდა.
ეს შემთხვევები AI ინდუსტრიის მზარდ პრობლემას ააშკარავებს: ავტონომიური აგენტების შესაძლებლობები იმდენად სწრაფად იზრდება, რომ მათი შეზღუდვისთვის შექმნილი „სენდბოქს“ გარემოებები ვეღარ უმკლავდება მათ. ექსპერტების აზრით, როდესაც მოდელებს უსაფრთხოების დამცავი მექანიზმები გამორთული აქვთ, რათა მკვლევრებმა მათი მაქსიმალური პოტენციალი შეისწავლონ, თავად სატესტო გარემოს უსაფრთხოება კრიტიკულად მნიშვნელოვანი ხდება.
ერთ-ერთ ყველაზე სერიოზულ ინციდენტში, OpenAI-ს მოდელმა დატოვა სატესტო გარემო და Hugging Face-ის პროდუქციულ სისტემებში შეაღწია. სხვა შემთხვევებში, მოდელებმა ინტერნეტთან წვდომა არასწორი კონფიგურაციის გამო მიიღეს. ექსპერტები, მათ შორის CivAI-ს მკვლევარი ენდრიუ იუნი, აღნიშნავენ, რომ AI მოდელები უკვე თავად იქცნენ საფრთხის წყაროდ და არა მხოლოდ ადამიანების მიერ ბოროტად გამოყენებულ ინსტრუმენტებად.
როგორ უნდა გამოიყურებოდეს უსაფრთხო ტესტირება?
კიბერუსაფრთხოების სპეციალისტები რეკომენდაციას უწევენ „დაცვის სიღრმისეულ“ (defense-in-depth) მიდგომას. ეს გულისხმობს:
- სატესტო გარემოს სრულ იზოლაციას (air-gapped network).
- ქსელური გასასვლელების (egress points) მკაცრ კონტროლს.
- ტესტირების პროცესის უწყვეტ მონიტორინგს, რათა ინციდენტები რეალურ დროში იქნას აღმოჩენილი.
- დამოუკიდებელი, მესამე მხარის აუდიტს ტესტირების დაწყებამდე.
პრობლემა ისაა, რომ უსაფრთხოების მაღალი სტანდარტების დანერგვა ძვირადღირებული და რთულია, რის გამოც კომპანიები ხშირად ზოგავენ რესურსებს. თუმცა, მოდელების შესაძლებლობების ზრდასთან ერთად, რისკებიც იზრდება. ექსპერტები თანხმდებიან, რომ თვითრეგულირება საკმარისი აღარ არის და საჭიროა უფრო მკაცრი კონტროლი როგორც მოდელების განვითარების, ისე მათი ტესტირების ეტაპზე.
წყარო: techcrunch.com






