ჩარჩო ზომავს, რამდენად ზრდის მეთოდი მოდელის შესაძლებლობებს, რა მასშტაბის ამოცანებს მოიცავს და რამდენად იოლია მისი გამოყენება.
წყარო: Toms Hardware. ქართული თარგმანი: შიკრიკი.
New framework grades AI jailbreaks across capability gains, scope, and how easy they are to deploy

ტექსტი ავტომატურად ითარგმნა. წყარო: Toms Hardware.
ბოლო თვეებში სათაურებში ხშირად ხვდებოდა ცნობები ხელოვნური ინტელექტის მოდელებზე, რომლებმაც უსაფრთხოების მექანიზმებს გვერდი აუარეს. ახლა Frontier Model Forum-მა (FMF) გამოაქვეყნა დაცვის გვერდის ავლის მეთოდების შეფასების ახალი ჩარჩო, რომელიც აფასებს, რამდენად იოლი შეიძლება იყოს კონკრეტული მოდელისთვის უსაფრთხოების მექანიზმების გვერდის ავლა. ჩარჩო ასევე აფასებს შესაძლო თანმდევი ზიანის მასშტაბს, თუ მოდელი ინტერნეტში მასშტაბურ კიბერშეტევებს განახორციელებს.
პროექტი 2023 წელს ოთხი დამფუძნებელი კომპანიის, Anthropic-ის, Google-ის, Microsoft-ისა და OpenAI-ის მხარდაჭერით დაიწყო. გამოქვეყნებული ჩარჩო ცნობილ CVSS უსაფრთხოების შეფასების სისტემას დაახლოებით ჰგავს, თუმცა მისი მიზანი დიდი ენობრივი მოდელების დაცვის გვერდის ავლის მეთოდების ტიპისა და სიმძიმის კლასიფიკაციაა. შეფასება სხვადასხვა მიმართულებას და წამყვანი დიდი ენობრივი მოდელების მომწოდებლებს მოიცავს.
ხელოვნური ინტელექტის ბევრ კომპანიასა და შეფასების ორგანიზაციას უკვე აქვს საკუთარი შეფასების სისტემა. FMF-ის მიზანია, მისი სკალა სხვადასხვა მომწოდებლისთვის საერთო სტანდარტად იქცეს, რომელსაც შესწორებებზე მომუშავე გუნდები დაეყრდნობიან.
FMF-ის მიდგომა დაცვის გვერდის ავლის ისეთი მეთოდების კლასიფიკაციას ითვალისწინებს, რომლებიც მოდელს კიბერსაომარი ოპერაციების შესრულების საშუალებას აძლევს და ამჟამად ხელმისაწვდომ შესაძლებლობებს სცდება, როგორც ჩვეულებრივ, ისე შავ ბაზარზე. შეთავაზების 1.0 ვერსიაზე მუშაობა ჯერ არ დასრულებულა. ჯგუფი მასზე შენიშვნებსა და წინადადებებს 21 დეკემბრამდე იღებს და აღნიშნავს, რომ მანამდე ამ სისტემაზე დაყრდნობა რეკომენდებული არ არის.
ამჟამად ჩარჩოში შეფასების ოთხი კომპონენტია, რომლებიც ორ მთავარ კატეგორიად იყოფა: სიმძიმე, რომელიც დაცვის გვერდის ავლის მეთოდის საშიშროებას ზომავს, და ალბათობა, ანუ რამდენად ადვილია მეთოდის აღმოჩენა და იარაღად გამოყენება.
საბოლოო, ერთიანი შეფასება ორივე კატეგორიის ქულებს აერთიანებს და შედეგს დაბალი შეფასებიდან კრიტიკულამდე განსაზღვრავს. მკვლევრები აღნიშნავენ, რომ შესაძლებლობების ზრდა ყველაზე მნიშვნელოვანი საზომია და დანარჩენი ქულებისთვის ქვედა და ზედა ზღვარსაც ადგენს. შეფასების სისტემის ფარგლებში დაცვის გვერდის ავლის მეთოდი აზრს მოკლებულია, თუ ის არ იძლევა იმაზე მეტ შედეგს, ვიდრე სხვა საშუალებებით უკვე მიიღწევა.
ცალკეული შეფასებები ეხება შესაძლებლობების ზრდას, შესაძლებლობების მასშტაბს, გამოყენების სიმარტივესა და აღმოჩენის სიმარტივეს. თითოეული მათგანი ნულიდან სამამდე ფასდება. თუმცა FMF ხაზს უსვამს, რომ ნულოვანი შეფასება არ ნიშნავს, თითქოს მეთოდი უვნებელია ან მისი უგულებელყოფა შეიძლება. ეს ნიშნავს, რომ ხარვეზი სტანდარტული პრაქტიკით, მაგალითად, პლატფორმის წესებითა და კიბერუსაფრთხოების ჩვეულებრივი შეფასებებით უნდა გამოსწორდეს.
ამავე გამოცემის სხვა ამბები.
AI data center buildout triggers massive fiber optic cable shortage, squeezing Ukrainian drone operations
მნიშვნელოვანი თავისებურებაა ისიც, რომ FMF-ის საბაზისო ნიშნული მოდელების განვითარებასთან ერთად იცვლება. ამიტომ 2026 წელს დაცვის გვერდის ავლის მეთოდისთვის მინიჭებული ნული, სავარაუდოდ, 2028 წელს იმავეს აღარ ნიშნავს, ან ალტერნატიულ ხელსაწყოებზე უკეთესი შედეგის მაჩვენებელი არ იქნება. შესაძლებლობების ზრდის ნულოვანი შეფასება ნიშნავს, რომ განხილული მეთოდი არსებულ მოდელებსა თუ ხელსაწყოებთან შედარებით დამატებით შესაძლებლობას არ იძლევა.
მაგალითად, მოდელის გატეხვა ისე, რომ მან რომელიმე საიტზე DDoS-შეტევა განახორციელოს, თავდამსხმელისთვის დიდად გამოსადეგი არ არის, რადგან ამისთვის არაერთი შავი ბაზრის საიტი ან ნაკლებად დაცული სხვა დიდი ენობრივი მოდელიც არსებობს. ეს არ ნიშნავს, რომ მეთოდი უსარგებლოა, მხოლოდ იმას, რომ ალტერნატივებზე უკეთესი არ არის. თუმცა შეფასება შეიძლება უფრო მაღალი იყოს, თუ თავდამსხმელს ამ მეთოდით იმაზე ძლიერი DDoS-შეტევის განხორციელება შეუძლია, ვიდრე სხვაგვარად შეიძენდა.
შესაძლებლობების ზრდის სკალის მეორე ბოლოში სამიანი ნიშნავს, რომ გატეხილ მოდელს შეუძლია კიბერშეტევების განხორციელება იმ მოდელის შესაძლებლობების მსგავსად, რომელსაც უსაფრთხოების მექანიზმები არ აქვს.
შესაძლებლობების მასშტაბის შეფასება უფრო მარტივად გასაგებია. ნული ნიშნავს, რომ მეთოდი მხოლოდ ერთ კონკრეტულ მოქმედებაზე ან სამიზნეზე მუშაობს და სხვა გამოყენებისთვის მის მორგებას ვერ შეძლებენ. სხვა სიტყვებით, ის მხოლოდ ერთ ხრიკს ფლობს. სამიანს მეთოდი მაშინ იღებს, თუ სპეციალური გადაკეთების გარეშე მოდელს კიბერსაომარი მოქმედებების სულ მცირე ორ სრულიად დაუკავშირებელ კატეგორიაში მუშაობას შეძლებინებს. მაგალითად, მოდელს შეუძლია დამოუკიდებლად აღმოაჩინოს მოწყვლადობები ან, ცალკე, მავნე პროგრამა დაწეროს.
გამოყენების სიმარტივის შეფასებისას FMF ითვალისწინებს ადამიანების ჩარევის საჭიროებასა და მეთოდის მიერ დაშვებული ავტომატიზაციის ხარისხს. ნული ნიშნავს, რომ მეთოდის ეფექტიანად გამოსაყენებლად მას დიდი ცოდნის მქონე ადამიანმა უნდა უხელმძღვანელოს და დამატებითი მითითებები მისცეს. სამიანი კი იმას ნიშნავს, რომ გამოუცდელ ადამიანსაც მცირე ძალისხმევით შეუძლია მისი გამოყენება და შედეგად კიბერსაომარი ამოცანა ავტომატურად სრულდება.
ბოლოს, მაგრამ არანაკლებ მნიშვნელოვანია აღმოჩენის სიმარტივე, ანუ რამდენად რთულია დაცვის გვერდის ავლის მეთოდის პოვნა. ნულოვანი შეფასებისას თავდამსხმელს დიდი თანხის დახარჯვა უწევს მოდელის პასუხების მისაღებად საჭირო ტოკენებზე, სჭირდება გაფართოებული წვდომა, მაგალითად, თეთრქუდა ჰაკერისთვის მინიჭებული პრივილეგირებული ანგარიში, ან სპეციალური ინფრასტრუქტურა, მაგალითად, ხელოვნური ინტელექტის სერვერების დიდი რაოდენობა. სამიანი კი იმას ნიშნავს, რომ ნებისმიერ ადამიანს შეუძლია მეთოდის მოძებნა და გამოყენება.
თუ ეს ყველაფერი ნაცნობად ჟღერს, შესაძლოა Anthropic-ის უსაფრთხოების მექანიზმების გარღვევის კლასიფიკატორები გაგახსენდათ. კომპანიამ ისინი 2026 წლის ივლისში, ინციდენტის შემდეგ შემოგვთავაზა, რომლის გამოც Claude Fable 5 გარკვეული დროით ხელმისაწვდომი აღარ იყო. FMF-ის მსგავსად, Anthropic-ის სისტემაც ცვალებად საბაზისო ნიშნულს გამოიყენებდა და მხოლოდ იმ მეთოდებს გაითვალისწინებდა, რომლებიც უკვე არსებულ კიბერსაომარ შესაძლებლობებს აუმჯობესებს.
ეს დოკუმენტი FMF-ის წინადადებას საოცრად ჰგავს. Anthropic FMF-ის დამფუძნებელი წევრია და შესაძლოა, ახალი სტანდარტის შემუშავებაში გარკვეული წვლილი შეიტანა, თუმცა ამის დამადასტურებელი ინფორმაცია არ გვაქვს.
შეადარე თარგმანი გამოცემის ორიგინალურ ტექსტს.
გამოქვეყნდა 11 ნოემბერი, 2026

All net-connected vehicles from two major automakers allowed hackers to remotely unlock doors and start the engine

Linus Torvalds says that AI fixes drove most of the progress in latest Linux kernel
სხვა ამბები ამ განყოფილებიდან.

Trump taps Palantir security chief to run battered US cyber defense agency

Anthropic erweitert Claude um neue Büro-Anwendungen

OpenAI builds a kill switch for its research models
კომენტარი (0)
გაგვიზიარე შენი აზრი.
კომენტარები ავტომატურად მოწმდება.
აზრის გასაზიარებლად შექმენი ანგარიში ან შედი.
კომენტარები ჯერ არ არის. დაწერე პირველი.