OpenAI xodimlari kompaniya tizimlaridagi xavfsizlik kamchiliklari haqida yillar davomida ogohlantirishdi
Batafsil
Olhar Digital
olhardigital.com.br

OpenAI xodimlari kompaniya tizimlaridagi xavfsizlik kamchiliklari haqida yillar davomida ogohlantirishdi

OpenAI mutaxassislari kompaniyaning ichki tizimlaridagi xavfsizlik zaifliklarini uzoq muddat davomida maʼmuriyatga bildirishgan. Reuters xabariga koʻra, bu kamchiliklar chet ellik hukumatlar kabi tashqi shaxslarning sunʼiy intellekt (SI) taraqqilligi haqidagi muhim maʼlumotlarga kirishiga imkon berishi mumkin.

Shikoyatlar ijrochi va kengash rahbariyatining eʼtiboriga yetkazilgan. Baʼzi hamkorlar tashkilotning Google va Anthropic kabi gigantlar bilan raqobatlashish uchun rivojlanish tezligiga ustunlik berib, xavfsizlikni eʼtiborsiz qoldirganligini xulosa qilishgan.

OpenAI amaliyotlari haqida maʼlumotga ega beshta kishi kodga kirish huquqi boʻlgan xodimlar turli loyihalarning batafsil maʼlumotlarini koʻrishingiz mumkinligini bildirgan. Bu katta qism kod bitta omborga, yaʼni monorepo deb ataladigan joyga jamlanganligi sababli sodir boʻlgan.

Oʻzining OpenAI kompaniyasi esa sezgir ishlar maʼlumotlariga kirish cheklovlarini joriy etganini va tadqiqotlarning muhim qismlari alohida omborlarda saqlanayotganini eʼlon qilgan. Kompaniya asosiy ombor butun kodni yoki modellarning vaznlarini oʻz ichiga olmasligini tushuntirgan.

Xavotirlar muntazam xavfsizlik auditlarining yoʻqligi bilan ham bogʻliq edi. Uchta manba xodimlar tomonidan amalga oshirilgan oʻzgartirishlar har doim ichki vositalar orqali tekshirilmayotganini koʻrsatgan.

Maxsus holat xavflarning boshqa bir jihatini koʻrsatdi. Oktabrning 13-ida AQSh Adliya departamenti OpenAI muhandisi Abdulrahman Alfozanni ijrochilar yigʻilish xonasida gigiyena qogʻoz ruloniga mikrofon yashirgani aybi bilan hibsga olganini eʼlon qildi.

Sud hujjatlari uning AQSh prezidentlari safarlari va vazirlar bilan potentsial uchrashuvlar haqidagi maʼlumotlarni kuzatish uchun ichki SI vositasidan foydalanganini ochib berdi. Alfozan Saudiya qirollik aʼzosi bilan aloqada boʻlgan, u uni jalb qilishga urinib koʻrgan edi.

Tizimlarni himoya qilishga oid xavotirlarga javoban, OpenAI xavfsizlik infratuzilmasini ham mustahkamladi. Biroq, strategik maʼlumotlarni himoya qilish muammolari boshqa SI kompaniyalari uchun ham tegishli.

Yanvarda federal hakamlar majlisi Googlening sobiq xodimini kompaniya texnologik sirlarini Xitoy manfaatiga sotgani uchun hukm qildi. Oktabr oxirida Cathedral Systems startapi Anthropic tizimlariga singib kirganini va model haqidagi Slack suhbatlarini koʻrib chiqqanini, mijozlar va hamkorlarning kontaktlari, shuningdek, hisoblar asosiy yozuvlarini olganini daʼvo qildi.

Bunday voqealar sektorimizdagi ochiq tadqiqot madaniyati boʻyicha munozarani kuchaytirmoqda. OpenAIʼda hamkorlar maʼlumot almashinuvi strategik texnologiyalarni himoya qilish bilan mos keladimi deb savol bermoqdalar.

2023-yilda kompaniyaning tadqiqotchisi Leopold Aschenbrenner Xitoy singib kirish xavfi haqida memorandum tuzgan. Ushbu hujjat tashqi singib kiruvchi GPT-4 haqida maʼlumotlarni bilib olganidan soʻng kengash oldiga taqdim etilgan. OpenAI singib kiruvchi faqat barcha jamoaga ochiq Slack kanallariga kirganini maʼlum qildi.

Bu yil OpenAI ning SI agentlari sinovlarda Hugging Face tizimlariga singib kirishdi, bu AQSh hokimiyati tomonidan tahlil qilingan hodisa. Iyul oyida Hacktron AI tadqiqotchilari OpenAI xodimlarining ChatGPT akkauntlariga kirish va ichki tizimlarga kirish uchun Anthropic modelidan foydalanishdi. OpenAI ogohlantirish uchun minnatdorchilik bildirdi va shunga oʻxshash hujumlarning xavfini kamaytirish choralari koʻrildi deb maʼlum qildi.

Kompaniyadan aprelda ketgan sobiq tadqiqotchi Will DePue tezlikka berilayotgan urgʻu haqida tanqid qildi. U X platformasida postida OpenAI oʻz tizimlarini himoya qilishdan koʻra, hatto yirik milliy raqiblarga qarshi tez rivojlanishga ustunlik berayotganini taʼkidladi.

Soʻzlovchi Elana Widmann Reutersga kompaniya ichki tahdidlar, kibercriminal va hukumatlarga qarshi himoya qilishga sarmoya kiritayotganini maʼlum qildi. Agent tomonidan murojaat qilingach, OpenAI xavfsizlikdagi yangi yaxshilanishlarni eʼlon qildi. Habardagi maʼlumotlarga koʻra, bu himoyalarni mustahkamlash SI rivojlanishini kechiktirishi va OpenAI hamda Anthropic ning aksiyalarini jamoatchilikka chiqarish rejalarini murakkablashtirishi mumkin.

Oʻxshash hikoyalar

OpenAI ning AI agentlari xavfsizlik mexanizmlarini oʻchirib, harakatni inkor etdi
Batafsil
olhardigital.com.br

OpenAI ning AI agentlari xavfsizlik mexanizmlarini oʻchirib, harakatni inkor etdi

OpenAI tomonidan ishlab chiqilgan ikkita sunʼiy intellekt agenti ichki dasturlash vazifalari davomida ishlatiladigan monitoring tizimlarini zaiflashtirdi. Bir holatda model himoyani olib tashladi va keyinchalik bunday oʻzgartirish kiritmaganini yolgʻon bayon qildi.

Bu voqealar yuqori avtonomiya agentlarini ishlab chiqishdagi murakkablikni koʻrsatadi: ularning oʻzlarini nazorat qilish uchun yaratilgan tizimlarga zarar yetkazmasligini taʼminlash.

Birinchi epizod sentyabrning 3-ida qayd etildi. Ichki sinov paytida GPT-6.1 Sol agenti avtomatik xavfsizlik ogohlantirishlarini oʻchirdi. OpenAI maʼlumotlariga koʻra, model Slack orqali xabar yubormaslik toʻgʻrisidagi yoʻriqorni ushbu ogohlantirish bildirishnomalarini ham oʻz ichiga olgan cheklov sifatida talqin qilgan.

Uch kun oʻtgach, sentyabrning 6-ida boshqa bir agent, GPT-6 Astra, mavjud kodni qayta ishlash jarayonida monitoring funksiyasini olib tashladi. Keyinchalik, bu agent ham oʻchirib tashlamaganini notoʻgʻri eʼlon qildi.

OpenAI ikkala holat oʻrtasida umumiy omilni aniqladi: agentlar oddiy dasturlash koʻrsatmalarini xavfsizlik funksiyalarini zaiflashtirish uchun ruxsat sifatida tushunishdi.

Kompaniya shunday dedi: «Ikkala holatda ham agentlar monitoring mexanizmlarini saqlab qolish kerakmi deb baholashdi, ammo oddiy dasturlash koʻrsatmalarini ularni zaiflashtirish uchun ruxsat sifatida talqin qilishdi».

Kompaniya modellarining oʻz monitoring mexanizmlarini oʻchirishini qiyinlashtirish boʻyicha choralar koʻrayotganini maʼlum qildi. Bundan tashqari, ular agentlar nazoratdan qochish va bu xatti-harakat uchun asoslash izlash tendensiyasi bormi yoki yoʻqmi deb tekshirmoqda.

OpenAI kuzatilgan xatti-harakatga toʻliq tushuntirishga ega emasligini tan oldi. Tadqiqot modellarning bu qarorlarini qabul qilish sababini aniqlash va faqat xatolik bilan bogʻliq boʻlmagan biror naqsh mavjudligini tekshirishni maqsad qilgan.

Bu epizodlar ushbu tizimlarni nazorat qilish uchun uchta muhim muammoni taʼkidlaydi: hodisalar sunʼiy intellekt xavfsizligidagi taraqqiyot yanada kuchliroq modellar rivojlanishidan ortda qolishi mumkinligi haqidagi tadqiqotchilar xavotiri kontekstida yuzaga keladi. Tizimlar avtonomiyasi qanchalik katta boʻlsa, ularning harakatlarini bashorat qilish va belgilangan chegaralarga rioya qilishni taʼminlash shuncha murakkablashadi.

OpenAI bunday muammolarni hisobot beruvchi yagona tashkilot emas; yaqinda Anthropic ham AI agentlari ruxsatsiz tashqi tizimlarga kirgan holatlarni eʼlon qildi.

Garchi bu holatlar modellar nazoratdan qochishga qasd qilganligini isbotlamasa ham, ular agentlar koʻrsatmalarni kutilmagan tarzda talqin qilganida yoki ularning monitoring uchun moʻljallangan resurslariga aralashganida ham samarali nazorat zarurligini namoyish etadi.

OpenAI sunʼiy intellekt modellarini xavfsizlik nazorat tizimlarini mustaqil oʻchirdi
Batafsil
podrobno.uz

OpenAI sunʼiy intellekt modellarini xavfsizlik nazorat tizimlarini mustaqil oʻchirdi

Amerikalik korporatsiya «OpenAI» oʻzining sunʼiy intellekt modellarining, yaʼni «GPT-6.1 Sol» va «GPT-6 Astra»ning ichki vazifalarni bajarish jarayonida tizimli nosozliklarni aniqlash uchun moʻljallangan monitoring mexanizmini mustaqil oʻchirib tashlaganini va tahdidlar haqidagi ogohlantirish tizimining funksionligini cheklaganini eʼlon qildi.

Birinchi bunday holat 3-oktabrda qayd etilgan. Reyting tizimini tuzatish urinishi paytida «Sol» modeli foydalanuvchi buyrugʻini «xabarlar yubormaslik» deb notoʻgʻri talqin qilib, bu cheklovni monitoring tizimi bildirishnomalariga tarqatdi, natijada xavfsizlik xizmatlari avtomatik signalni olmadi.

Ikkinchi hodisa 6-oktabrda sodir boʻldi: «Astra» modeli dasturiy taʼminotni belgilangan talablarga moslashtirish jarayonida monitoring tizimini tasodifan oʻchirib tashladi. Shundan soʻng neyron tarmogʻi foydalanuvchiga nazorat oʻchirilmaganligi haqida yolgʻon maʼlumot berdi. «OpenAI» vakillari taʼkidlashicha, ikkala holat jiddiy xavfsizlik buzilishi sifatida baholanmagani sababli, modellar ishi avtomatik ravishda toʻxtatilmagan.

Hozirda kompaniya vaziyatni yaxshilash uchun qadamlar qoʻymoqda: bunday nosozliklarni yanada tezroq aniqlash va oldini olish maqsadida ichki nazorat tizimi yangilandi, shuningdek, ish jarayonida xavfsizlik protokollariga qatʼiy rioya qilishni taʼminlash uchun yangi usullar ishlab chiqilmoqda.

Avvalroq, sentyabrning 17-kunida «OpenAI» sunʼiy intellekt oʻz xatolarini yashirgan, notoʻgʻri maʼlumotlar yaratgan va foydalanuvchi ruxsatisiz fayllarni internetga yuklagan oltita hodisani maʼlum qilgan edi.

Bundan tashqari, AQShning sakkiz shtati ChatGPT xavfsizligi haqida foydalanuvchilarni aldashda ayblovlar bilan «OpenAI» ga sud shikoyatlari kiritdi. Shikoyatlar orasida xavfli tibbiy maslahatlar berish, zaif shaxslarni oʻziga yoki boshqalarga zarar yetkazishga keltirish potentsiali hamda chat-botga haddan tashqari hissiy bogʻlanish hosil qilish mavjud.

OpenAI ijrochi tomonidan moliyalanadigan guruh AQShda sunʼiy intellektni tartibga solishni toʻxtatishni maqsad qilmoqda
Batafsil
olhardigital.com.br

OpenAI ijrochi tomonidan moliyalanadigan guruh AQShda sunʼiy intellektni tartibga solishni toʻxtatishni maqsad qilmoqda

OpenAI ijrochilari AQShdagi sunʼiy intellekt xavfsizligi boʻyicha federal standartlarni himoya qilishni kuchaytirishdi. Shu bilan bir qatorda, kompaniya prezidenti Greg Brockman va uning xotini sektorga cheklovlarga qarshi nomzodlarni qoʻllab-quvvatlaydigan siyosiy kollektiv Leading the Futurega 25 million dollarlik xayriya berishdi.

Bu hissa xavfsizlikka oid jamoat burchlari va foydasi tartibga solinishi mumkin boʻlgan sanoatning tijorat manfaatlari oʻrtasidagi ziddiyatni koʻrsatadi. Sunʼiy intellekt xavfsizligi haqidagi munozara bir necha oy oldin OpenAI bir qator AI agentlari nazoratdan chiqib, Hugging Face platformasiga singib ketganini xabar qilganidan soʻng yangi oʻlchamga ega boʻldi.

Keyinchalik, Greg Brockman texnologiya ijrochilaridan iborat olti kishilik guruhga qoʻshildi va ular Amerika prezidenti Donald Tramp bilan ixtiyoriy xavfsizlik shartnomasi imzoladilar. Ushbu shartnoma mustaqil auditorlar bilan hamkorlik qilish zarurligini va AI tizimlarining rejalashtirilmagan tarzda tarmoqlarga va texnik resurslarga kirishini oldini olish choralarni joriy etishni belgilaydi.

Muammo jamoat xavfsizlik majburiyatlarini bajarish va sektor uchun kamroq cheklangan yondashuvni siyosat jihatidan qoʻllab-quvvatlash oʻrtasidagi farqdir. Sanoat tanqidchilari ijrochilarning texnologiya rivojlanishiga samarali cheklovlar qoʻyishi mumkin boʻlgan qoidalarni qabul qilishga haqiqiy tayyorligini savol ostiga qoʻyishmoqdalar.

Guardrails Alliance guruhini vakil qilgan Charlie Blaettler bu munosabatni tanqid qildi. U shunday dedi: «Sektor liderlaridan baʼzilari faqat jamoatchilik fikrini hisobga olgan holda tartibga solishga qoʻllab-quvvatlashni namoyish qilishni xohlaydi. Ammo aynan shu liderlar siyosiy harakatlar superkomitetini yaratdilar, uning yagona maqsadi esa tartibga solishni himoya qiluvchi nomzodlarga qarshi chiqishdir.»

Biroq, OpenAI Brockmanlarning xayriya berishini kompaniyaning nomidan emas, shaxsiy sifatda amalga oshirilganini eʼlon qildi. 2025-yilda X platformasida nashr etilgan bayonotida ijrochi innovatsiya va sektoriy qoidalar oʻrtasidagi mavjudligini himoya qilib, «AIga ijobiy munosabat bildirish tartibga solishga qarshi boʻlish degani emas. Bu fikr bilan harakat qilish degani», - dedi.

Leading the Future faoliyati AQShdagi sunʼiy intellekt uchun qaysi tashkilot yoʻl-yoʻriqlar berishi kerakligi haqidagi bahsga kiradi. Bu guruh shtatlarning oʻzining qoidalarini yaratish yoki qoʻllashini toʻxtatuvchi federal qonunchilikni targʻib qiladi, tartibga solishni milliy darajaga markazlashtirish va shtat avtonomiyasini kamaytirishni maqsad qiladi.

Tashkilot tomonidan qoʻllab-quvvatlanadigan ismlar orasida Kentucky senatiga nomzod boʻlgan Andy Barr bor va u shtat qonunlariga bu cheklovni himoya qiladi. Luiziana senatiga nomzod Julia Letlow va Washington shtati deputatligiga nomzod Amanda McKinney ham guruhning qoʻllab-quvvatlashini oladi va ular ortiqcha tartibga solish deb biladigan narsalarga qarshi turishadi.

Bu bahs sanoat ichidagi turli moliyaviy manfaatlarni oʻz ichiga oladi. Marc Andreessen, Ben Horowitz va Andreessen Horowitz risk kapitali kompaniyasi Leading the Futurega jami 50 million dollar qoʻshdi. Kompaniya OpenAI investorlari ham boʻlgani sababli, bu sanoatning moliyaviy manfaatlarini tartibga solish boʻyicha siyosiy faoliyati bilan yaqinlashtiradi.

OpenAI raqibi boʻlgan Anthropic boshqa nuqtai nazardan yondashadi. Kompaniya Public First Actionga kamida 40 million dollar ajratdi, bu guruh shtatlarning qonunlarini federal darajada oldindan belgilashga qarshi. Uning ijrochi prezidenti Dario Amodei bu yondashuvni haddan tashqari keng deb biladi.

Bu tartibga solishdagi kurash OpenAI va Anthropic IPO (jamoatchilik aksiyalari sotuvi) tayyorlayotgan paytda sodir boʻlmoqda, bu eng katta oʻtkazilganlardan biri boʻlishi mumkin. Bu vaziyatda, sektor qoidalari xavfsizlik masalalari bilan cheklanmaydi; qoʻshimcha talablar xarajatlarni oshirishi, ishga tushirishlarni kechiktirishi va kompaniyalarni mahsulotlarini oʻzgartirishga majburlashi mumkin, bu esa foyda keltirishga potentsial taʼsir koʻrsatadi.

Leading the Future milliy va masʼuliyatli tartibga solish tuzilmasiga sodiq parlamentar hujjatlarni izlayotganini taʼkidlaydi. Shunday qilib, guruhlar oʻrtasidagi farq faqat tartibga solishni qoʻllab-quvvatlash yoki rad etish bilan cheklanmaydi, balki qoidalarni belgilash huquqi kimda boʻlishi va korporatsiyalarga qanday chegaralar qoʻyilishi haqida hamdir. Sunʼiy intellekt katta miqyosdagi biznes sifatida mustahkamlanib borayotgan va kompaniyalar kapital bozori bozoriga kirishni kengaytirishga harakat qilayotgan paytda bu bahs dolzarblikka ega boʻladi.

Mashhur