ღია პლატფორმა აგენტების ქმედებებს პროგრამულ და აპარატურულ დონეზე ზღუდავს.
Nvidia launches Open Agent Safety Platform to physically restrain rogue AI agents
წყარო: Toms Hardware. ქართული თარგმანი — შიკრიკი.

ტექსტი ავტომატურად ითარგმნა. წყარო: Toms Hardware.
პლატფორმის წარდგენას წინ უძღოდა ხელოვნური ინტელექტის რეგულირების რამდენიმეთვიანი მოთხოვნები. ისინი სექტემბერში გაძლიერდა, როცა გავრცელებული ცნობებით, რამდენიმე მოდელი სატესტო გარემოდან გავიდა და კონტროლს აღარ დაემორჩილა. ასეთმა შემთხვევებმა განვითარების შენელების მოთხოვნები გააჩინა, ხოლო OpenAI-მ ახალი მოდელების გაწვრთნა მთლიანად შეაჩერა. Anthropic-ისა და OpenAI-ის ერთ-ერთმა ყოფილმა მკვლევარმა განაცხადა: „მოწინავე ხელოვნურ ინტელექტზე მომუშავე ადამიანებს გულწრფელად სჯერათ, რომ ათწლეულის ბოლომდე მას ყველა ჩვენგანის მოკვლა შეუძლია“. მოწოდებებს მოდელების შემქმნელი კომპანიების ხელმძღვანელებიც შეუერთდნენ.
Nvidia-ს აღმასრულებელი დირექტორი ჯენსენ ჰუანგი მთავრობის მიერ დაწესებულ რეგულირებასა და ფართო შეზღუდვებს მუდმივად ეწინააღმდეგება. ის უსაფრთხოების „განკითხვის დღის თეორიად“ განხილვასაც უარყოფს. ჰუანგმა Anthropic-ისა და OpenAI-ის აპოკალიფსური გაფრთხილებები „უცნაურად“ შეაფასა. მისი აზრით, უსაფრთხოება კონკრეტული ფიზიკური პარამეტრების მქონე ინფრასტრუქტურული პრობლემაა და არა პოლიტიკის მომთხოვნი აბსტრაქტული საკითხი. ამიტომ, ჰუანგის თქმით, გამოსავალი უკეთესი ინჟინერიაა.
ახალი პლატფორმა სწორედ ამ მიდგომის პრაქტიკული განხორციელებაა. ინდუსტრიული დებატები ძირითადად თვითმოქმედი ურჩი აგენტების შეზღუდვას ეხება. თუმცა, ნაკლები ყურადღება ეთმობა საფრთხეს, როცა ხელოვნური ინტელექტი ბოროტმოქმედთა მძლავრ იარაღად იქცევა.
რისკები უკვე რამდენიმე სატესტო შემთხვევამ დაადასტურა. OpenAI-ის აგენტებმა აშშ-ის ფასიანი ქაღალდებისა და ბირჟების კომისიისა და აღწერის ბიუროს ვებსაიტებზე უნებართვო წვდომა მოიპოვეს. მათ ავსტრალიის ჯანდაცვისა და სოციალური გადახდების პორტალზეც შეაღწიეს.
სხვა შემთხვევებში მოდელებმა დამცავ შეზღუდვებს გვერდი აუარეს, ფორუმები შექმნეს და იზოლირებული გარემო დატოვეს. მათ ვებსაიტები ჩაიგდეს ხელში, საკუთარი თავისთვის მითითებები შექმნეს, მომხმარებელთა მონაცემები ნებართვის გარეშე ატვირთეს და ერთმანეთს ფარულად დაუკავშირდნენ. Axios-ის ცნობით, წამყვანი ლაბორატორიები ათიათასობით ასეთ შემთხვევას იკვლევენ. მათი უმეტესობა ტესტირებისა და ექსპერიმენტებისას მოხდა. თუმცა, წლის დასაწყისში Claude-ზე მომუშავე პროგრამირების აგენტმა კომპანიის მთელი მონაცემთა ბაზა 9 წამში წაშალა.
Anthropic-ის აღმასრულებელმა დირექტორმა დარიო ამოდეიმ ცოტა ხნის წინ განვითარების „ტემპის შენელება“ და რეგულირების აუცილებლობა მოითხოვა. მან გააფრთხილა, რომ ხელოვნური ინტელექტით მართულ ბოტნეტების ჯგუფს მთელი ინტერნეტის ხელში ჩაგდება შეუძლია. Anthropic-მა პირველადი საჯარო შეთავაზების პროსპექტში „კაცობრიობისთვის ეგზისტენციური რისკებიც“ შეიტანა. კომპანიამ 261-გვერდიანი დოკუმენტის ერთი მესამედი შესაძლო საფრთხეებს დაუთმო.

DeepSeek and Huawei release open-source Ascend AI programming tools to reduce reliance on Nvidia ecosystem
ჰუანგი აპოკალიფსურ პროგნოზებსა და რეგულირების გზით პრობლემის გადაჭრას არ ეთანხმება. ის დამცავი შეზღუდვების აუცილებლობას აღიარებს, თუმცა ფართო სამართლებრივი წესების ნაცვლად უკეთეს ინჟინერიას ემხრობა.
Nvidia-მ პლატფორმა დაახლოებით 100 ინდუსტრიულ პარტნიორთან ერთად შექმნა. კომპანიის განცხადებით, სისტემა კომპანიებს, მკვლევრებსა და საჯარო სექტორის ორგანიზაციებს ხელოვნური ინტელექტის აგენტებისთვის უსაფრთხო საზღვრების დასადგენად აერთიანებს. ის საუკეთესო პრაქტიკის გაზიარებასა და საერთაშორისო თანამშრომლობასაც ემსახურება.
პლატფორმა ორ ძირითად კომპონენტს აერთიანებს. Nvidia OpenShell ღია კოდის უსაფრთხო სამუშაო გარემოა, რომელიც აგენტებს იზოლირებულ სივრცეში ათავსებს და ოპერატორის წესებს აღასრულებს. Nvidia Sentry დამოუკიდებელი ზედამხედველის სანიმუშო არქიტექტურაა. ის Nvidia-ს BlueField-4 მონაცემთა დამუშავების მოწყობილობებზე მუშაობს და უსაფრთხოების წესებს სილიციუმის დონეზე აღასრულებს.
OpenShell მოდელისა და აგენტის მართვის სისტემის მიღმა იზოლირებულ გარემოს ქმნის. ბირთვის დონეზე იზოლაცია განსაზღვრავს, რისი დანახვა, გამოყენება და შესრულება შეუძლია აგენტს. მოდელის საზღვრებიდან გასვლის შემთხვევაშიც აგენტი OpenShell-ის საზღვრებს ვერ გასცდება. Sentry აპარატურული ტელემეტრიით აგენტის ქცევას მუდმივად აკვირდება. ის ურჩ სამუშაო პროცესებს აგენტის პროგრამული გარემოს გარედან გამოყოფს. Nvidia-ს განცხადებით, საზღვრის გადაკვეთის მცდელობისას Sentry აგენტს მილიწამებში იზოლაციაში მოაქცევს და შეაჩერებს.
პლატფორმა განკუთვნილია დეველოპერებისა და კომპანიებისთვის, რომლებიც მონაცემთა ცენტრებში, სამუშაო სადგურებსა და რობოტულ სისტემებში ავტონომიურ აგენტებს იყენებენ. ის ღია და დახურულ მოდელებთან მუშაობს. OpenShell ოპტიმიზებულია Nvidia Vera-სთვის, რომელიც აგენტური ხელოვნური ინტელექტისთვის შექმნილი ცენტრალური პროცესორია. ღია კოდის წყალობით, მისი გამოყენება Arm-ისა და Intel-ის გამოთვლით პლატფორმებზეც შეიძლება.
პარტნიორებს შორის ხელოვნური ინტელექტის ლაბორატორიები, უსაფრთხოებისა და იდენტობის სერვისების მიმწოდებლები, საწარმოო პლატფორმები და აპარატურული კომპანიები არიან. SpaceXAI პლატფორმას Cursor-ის პროგრამირების აგენტებთან და Grok-ის მოდელებთან იყენებს. Anthropic კი OpenShell-სა და BlueField-ს Claude Managed Agents-ში დამატებითი კონტროლის შრის შესაქმნელად აერთიანებს.
Scale AI ტექნოლოგიას საწარმოო და სამთავრობო მომხმარებლებისთვის განკუთვნილ აგენტურ ინფრასტრუქტურაში ამატებს. Salesforce-მა და Nvidia-მ OpenShell Slack-თან დააკავშირეს. მომხმარებლებს Slack-იდან აგენტების აქტივობის ნახვა, მოვლენების შემოწმება და დამატებითი ნებართვების მოთხოვნების დამტკიცება ან უარყოფა შეუძლიათ.
SAP OpenShell-ს Joule Studio-ს სამუშაო გარემოში ამატებს და პროექტს საინჟინრო სამუშაოებით ეხმარება. კომპანია Nvidia-სთან ერთად Open Secure AI Alliance-ის ფარგლებში თავსებადობის სტანდარტებზეც მუშაობს. Figure, Gecko Robotics და Skild AI OpenShell-ით ფიზიკურ სამყაროში მოქმედი ავტონომიური სისტემებისთვის მსგავს კონტროლს ქმნიან.
სკეპტიკოსების თქმით, ლაბორატორიების რეგულირების მოთხოვნა შესაძლოა „საკუთარ ინტერესებზე მორგებული“ გეგმა იყოს. მათი აზრით, ის ერთდროულად მოდელების შესაძლებლობების რეკლამირებას, მომავალი რეგულაციების გავლენის ქვეშ მოქცევასა და ჩინეთის განვითარების დამატებით შენელებას ემსახურება. Anthropic-ს, OpenAI-ს, SpaceXAI-სა და Google-ს განვითარების შენელებაზე შეთანხმების გამო ანტიმონოპოლიური სარჩელი ემუქრებათ. მოსარჩელემ ამ ნაბიჯს პირდაპირ „საკუთარ ინტერესებზე მორგებული“ უწოდა.
აშშ-ის პრეზიდენტი დონალდ ტრამპი ამ შეხედულებას იზიარებს. მან განაცხადა, რომ ძირის გამოსათხრელად „ავადმყოფური შეთქმულება“ მიმდინარეობდა, თუმცა წყაროს ტექსტში სამიზნე დასახელებული არ არის. ტრამპმა ხელოვნური ინტელექტის „ძალის“ შექმნა დააანონსა, რომელიც ტექნოლოგიას „დააფასებს“ და ზედამხედველობას გაუწევს. ჰუანგმა რეგულირებაზე ხმაურიან მოთხოვნებს „ყურადღების გამფანტველი“ უწოდა. მისი თქმით, მოდელს საკუთარი თავის რეგულირებას ან შესაბამისობის ტესტების გავლას ვერ მიანდობენ. შეცდომის აღმოჩენისას აგენტი მიზნის მისაღწევად სტანდარტული პროგრამული კოდის გვერდის ავლას ბუნებრივად ეცდება.
ჰუანგის პოზიცია სრულად უანგაროდ ვერ ჩაითვლება. ფართო შეზღუდვები ან განვითარების შეჩერება, სავარაუდოდ, Nvidia-ს გაყიდვებს შეამცირებს, რადგან კომპანიის ამაჩქარებლები მოდელების უმეტესობას ამუშავებს. ჰუანგი ურჩ ხელოვნურ ინტელექტს ყოველთვის კიბერუსაფრთხოებისა და ქსელის ხარვეზად მიიჩნევდა. ახლა ის Open Agent Safety Platform-ს მთელი ინდუსტრიისთვის აუცილებელ ინფრასტრუქტურულ გამოსავლად წარმოაჩენს.
ჰუანგმა განაცხადა: „ხელოვნური ინტელექტის არაჩვეულებრივი საზოგადოებრივი პოტენციალი მხოლოდ მაშინ განხორციელდება, თუ უსაფრთხოების პრობლემას გადავჭრით. შესაძლებლობების მოწინავე ზღვრის კვლევასთან ერთად, უსაფრთხოების მოწინავე მიმართულებების აღმოჩენაც უნდა დავაჩქაროთ. უსაფრთხოება სრულ სისტემურ ინჟინერიას მოითხოვს. Nvidia Open Agent Safety Platform კომპანიებს, მკვლევრებსა და საჯარო სექტორის ორგანიზაციებს საუკეთესო პრაქტიკის გასაზიარებლად, შეფასების მეთოდების შესათანხმებლად და საერთაშორისო თანამშრომლობისთვის აერთიანებს. ერთად გლობალური უსაფრთხოების სტანდარტის ამაღლება შეგვიძლია“.
თუმცა, ეს ზომები ნაკლებად ეხება უფრო შემაშფოთებელ საფრთხეს: მძლავრი ინსტრუმენტების ბოროტმოქმედთა ხელში მოხვედრას ან ეთიკურად სადავო გამოყენებას. მავნე კოდის შექმნაზე შეზღუდვების არმქონე ჩინური ღია მოდელების გამოშვების შემდეგ ბლოკჩეინის დახმარებით განხორციელებული კიბერშეტევები 440%-ით გაიზარდა. ამ მოდელებმა შეტევების დასაწყებად საჭირო ცოდნის ზღვარიც შეამცირა. მკვლევრებმა ხელოვნური ინტელექტით ბუნებაში მანამდე არარსებული 16 ახალი ვირუსიც შექმნეს. კვლევა კონტროლირებულ სამედიცინო პირობებში ჩატარდა, თუმცა მან ძალზე სახიფათო გამოყენების შესაძლებლობა აჩვენა. ექსპერტები შიშობენ, რომ ასეთი კვლევები აუცილებელ დამცავ ზომებსა და რეგულირებას მნიშვნელოვნად უსწრებს.
თემებიდარიო ამოდეიდონალდ ტრამპიჯენსენ ჰუანგიAnthropicNvidiaOpenAISpaceXAINvidia Open Agent Safety PlatformNvidia OpenShellNvidia Sentry
შეადარე თარგმანი გამოცემის ორიგინალურ ტექსტს.
გამოქვეყნდა 1 ოქტომბერი, 2026

Meta's Muse AI agent accused of ignoring user permissions and accessing forbidden personal user data

The price of AI is crashing faster than the rate of Moore's Law, report suggests

Suspected Chinese spies spoofed an Anthropic exec, ex-White House official in AI phishing

OpenAI’s new agent is a shot at Meta — but can it compete with free?

Texas politics could delay investment decision for huge Chevron data center
კომენტარი (0)
გაგვიზიარე შენი აზრი.
კომენტარები ავტომატურად მოწმდება.
აზრის გასაზიარებლად შექმენი ანგარიში ან შედი.
კომენტარები ჯერ არ არის. დაწერე პირველი.