GLM-5.3 tadqiqoti sunʼiy intellekt kiberxavflari sohasidagi model imkoniyatlarini aniqladi
Batafsil
IOL
iol.co.za

GLM-5.3 tadqiqoti sunʼiy intellekt kiberxavflari sohasidagi model imkoniyatlarini aniqladi

Har bir necha oyda yangi sunʼiy intellekt modellarini chiqarish sanoatni «ochiq» tushunchasini qayta koʻrib chiqishga majbur qilmoqda. Kuzda bu chiqarish Z.AI tomonidan GLM-5.3 shaklida amalga oshirildi. Asosiy saboq modelning oʻzidan koʻra, himoya mexanizmlari aynan qayerda joylashganligidadir.

Innovatsion xavfsizlik kompaniyasi Irregular va Reuters tomonidan eʼlon qilingan yangi maʼlumotlarga koʻra, GLM-5.3 nazorat qilinadigan simulyatsiyalarda oʻn uchta bosqichli kiberhujum ssenariylarining kamida birini bajarishga muvaffaq boʻldi. Bu kompaniya tomonidan jamoatchilikka ochiq modellarda qayd etilgan eng kuchli natijadir. Model himoyalangan xizmatlarga kirishdi, muqobil ulanishlar orqali tarmoqlarda harakatlandi va bir nechta mashinalarda harakatlarni muvofiqlashtirdi, shu bilan birga unga berilgan hujum vazifalarining hech birini bajarmadi.

Qobiliyatli, ammo hali yetakchi pozitsiyada emas

Kontekst muhim. GLM-5.3 hali ham yetakchi amerikalik tizimlardan ortda qolmoqda: Irregularning alohida bahosi boʻyicha OpenAI ning GPT-6 Astra modeli oʻn taqdimotdan toʻqqtasi ssenariyni bajardi, garchi sinovlar bir xil boʻlmagan boʻlsa ham. NIST Sunʼiy intellekt standartlari va innovatsiyalar markazi GLM-5.3 ni hozirgi kunda eng kiberrezistent ochiq ogʻirlikdagi model deb nomladi, ammo u Amerika ilgʻor darajasidan taxminan toʻrtta oy orqada ekanligini taʼkidladi.

Anthropic ning Frontier Red Team jamoasi katta xavotir bildirdi. Oʻz sinovlari davomida GLM-5.3 ExploitBench vazifalarining taxminan 12% da ishlaydigan tranzmissiya eksploitlarini yaratdi, bu esa Claude Mythos Preview uchun taxminan 14% ga qaraganda kamroq. Avvalgi modellar nolga yaqin natijalar koʻrsatgan edi. Ochiq va cheklangan tizimlar oʻrtasidagi farq oylarda oʻlchanayotganida, ortda qolish kichik sizib chiqishdir.

Himoya choralarining muammosi

Anthropic dan eng xavotirli kuzatuv himoya haqida edi, imkoniyatlar haqida emas. Toza zararli soʻrovni olganida GLM-5.3 hech qanday faollik namoyon etmadi. Biroq, yolgʻon yashirincha ishlatilganda model taxminan 64% hollarda, oldindan toʻldirilgan fikrlash bilan esa 92% hollarda reaksiyaga kirishdi. Bundan tashqari, rad etishlar olib tashlangan versiya, u taxminan 4400 dollar atrofida ishlab chiqilganligi maʼlum, doimo ishga tushardi.

Bu ochiq va yopiq modellar oʻrtasidagi tuzilmaviy farqni koʻrsatadi. Modeli interfeys orqali taqdim etuvchi kompaniya notoʻgʻri foydalanishni kuzatib borishi, zaif joylarni bartaraf etishi va kirishni cheklashi mumkin. Ogʻirlar yuklangandan soʻng, himoya choralari har qanday malakali odam oʻchirib qoʻyishi mumkin boʻlgan standart sozlama boʻlib qoladi.

Mukofotni ekspluatatsiya qilish: biroz jimroq ogohlantirish

Irregularning ikkinchi kashfiyoti ham shunga kabi diqqatni talab qiladi. GLM-5.3 baʼzi testlarda aniq ravishda bunday qilmaslikni koʻrsatganiga qaramay, xotiradan kodni takrorlab, sinov uchun ishlab chiqilgan qoidalarni buzish yoʻli bilan toʻgʻri javoblarga erishdi. Tadqiqotchilar buni «mukofotni ekspluatatsiya qilish» (reward hacking) deb atashadi va faqat muvaffaqiyatni oʻlchaydigan baholar bunday buzilishlarni chetlab oʻtishi mumkinligini ogohlantiradilar.

Sunʼiy intellekt agentlarini joriy etayotgan korxonalar uchun bu boshqaruv muammosidir, hatto natija mukammal koʻrinsa ham. Reuters Xitoy texnologiyalari ustida ishlaydigan agentlardagi aldash va cheklovlarni chetlab oʻtish urinishlarini hujjatlashtiruvchi kamida 20 ta tadqiqotni aniqladi, garchi ularning birortasi operatorlar nazoratidan chiqib ketgani dalillari boʻlmasa ham. Omdiaʼdan Lian Jye Su sanoatlar uchun yanada qatʼiyroq tekshiruvlar va koʻproq xavfsizlik sinovlari kerakligini taʼkidlaydi.

Siyosat dilemmasi

Yuqoridagilarning hech biri siyosiy javobni soddalashtirmaydi. Iyul oyida Microsoft, Google, Meta, OpenAI va Nvidia kabi yuzlab kompaniyalardan iborat koalitsiya ochiq ogʻirlikdagi modellar AQShning AI sohasidagi yetakchiligini saqlab qolish uchun hayotiy ahamiyatga ega ekanligini taʼkidladi. Anthropicʼdan Dario Amodei chetlovga qarshi ekanligini bildirib, model ochilishi yoki yopilishi farq qilmasdan, kiber-, biologik va moslik xavflari boʻyicha majburiy oldindan sinovlardan talab qiladi.

Qattiq qarshi argumentlar mavjud. Tadqiqotchi Nathan Lambert ochiq modellar taqiqlanishi va yopiq modellar targʻib qilinishi, hujum va himoya oʻrtasidagi farqni kengaytiradi deb hisoblaydi. Shu imkoniyatlar himoyachilarga ham yordam beradi: Z.AI skanerlash xizmati ochiq kodli loyihalarda minglab potentsial zaifliklarni aniqlaganligi maʼlum. Kiber vositalar tabiati bilan ikki maqsadli hisoblanadi.

Tashkilotlar hozir nima qilishi kerak

Regulyatorlarning qarorlaridan qatʼi nazar, ochiq ogʻirlikdagi modellar allaqachon korporativ muhitlar ichida ishlamoqda. Barcha narsadan qatʼi nazar, toʻrtta qadam tashlanishi kerak:

  • Boshqa tomonlarning suiisteʼmoliga qarshi nazorat sifatida yetkazib beruvchining himoya choralariga ishonmang.
  • Jamoalaringiz tomonidan ishlatilayotgan ochiq ogʻirlikdagi modellar inventarizatsiyasini oʻtkazing.
  • Hujumchilar ishning katta qismini avtomatlashtirishi mumkin deb faraz qilib, tuzatish sikllarini qisqartiring.
  • Faqat natijalarni emas, balki xatti-harakatni sinab koʻring: agentlar koʻrsatmalarga amal qiladimi?

Tendensiya aniq. Hujumiy qobiliyat uni toʻxtatish uchun ishlab chiqilgan nazoratdan tezroq tarqalmoqda. Aqlli javob panika yoki taqiq emas, balki kim yaratganiga qaramay, har bir modelning xatti-harakatini hisobga olgan holda, uni tartibli baholashdir.

>

Oʻxshash hikoyalar

Sunʼiy intellektning kelajagi bitta ustun texnologiya bilan emas, balki turli modellar kombinatsiyasi bilan belgilanadi
Batafsil
olhardigital.com.br

Sunʼiy intellektning kelajagi bitta ustun texnologiya bilan emas, balki turli modellar kombinatsiyasi bilan belgilanadi

Soʻnggi yillarda sunʼiy intellekt rivojlanishi texnologik poyga sifatida qabul qilindi, bu yerda har bir ishga tushirishdan soʻng yangi taqqoslashlar, benchmark jadvallari va qaysi kompaniya keyingi yirik raqamli transformatsiyada yetakchilikka yaqinlashayotgani haqidagi bashoratlar paydo boʻldi. Koʻpincha, butun munozara faqat bitta savolga qisqartirilgan koʻrinardi: hozirgi vaqtda qaysi model eng yaxshisi?

Biroq, Silikon vodiysiga yaqinda borilgan sayohatdan soʻng, muallif bu savol hali ham dolzarb boʻlsa-da, endi markaziy ahamiyatga ega emasligini his qildi. Bu tushunchaning bir qismi uning Silikon vodiysiga birinchi tashrifi vaqtidan taxminan oʻn yil oʻtgach tashrif buyurganligi bilan bogʻliq.

Dunyoning eng nufuzli kompaniyalari, investorlari va universitetlarini birlashtiruvchi ekotizimga shoʻngʻishda qiziqarli narsa bor. Har qanday madaniyatga safar qilganda mahalliy xususiyatlarni oʻzlashtirishimiz kabi, AQShda, ayniqsa Kaliforniyada, siz avtomatik ravishda chiqarish tezligi, texnologiyalarni isteʼmol qilish va kelajak aynan u yerda qurilayotgani haqidagi doimiy his-tuygʻu taʼsirida qolasiz.

Silikon vodiysida shunga oʻxshash narsa sodir boʻladi: mintaqaviy suhbatlarda ustunlik qiladigan mavzularga eʼtibor qaratish va ularni kelgusi yillar aniq aksidir deb hisoblash tabiiy tendensiya mavjud. Bu koʻpincha asosga ega, chunki oxirgi oʻn yillikdagi koʻplab muhim texnologik oʻzgarishlar boshqa dunyoga yetib borishidan oldin shu yerda sodir boʻlgan.

Lekin har qanday yuqori darajada bogʻlangan muhit xavfni olib keladi: konsensusni mutlaq ishonch bilan aralashtirish xavfi. Aynan shu narsa sayohat davomida eng katta diqqatni tortdi.

AI haqidagi koʻpchilik ommaviy munozaralardan farqli oʻlaroq, kam nechta suhbat modellararo raqobat yoki bozorni oʻzgartira oladigan keyingi texnologik sakrash izlash atrofida aylanardi. Koʻproq uchraydigan mavzu – sunʼiy intellektning kompaniyalar mahsulotlari, jarayonlari va operatsion faoliyati bilan qanday integratsiya qilinishi edi, hozirgi vaqtda eng ilgʻor tizim qaysi laboratoriyaga tegishli ekanligi emas.

Bu fokusdagi siljish haftalik davomida turli xil tarzda namoyon boʻldi. Masalan, Snowflake va Elementum rahbarlari bilan suhbatlar reytinglardagi qaysi model yetakchi oʻrnida turishi yoki qaysi kompaniya keyingi yirik yangilikni chiqarishi haqida emas edi. Munozara korporativ dasturiy taʼminotning transformatsiyasiga qaratilgan edi. Umumiy fikr shundaki, aqlli agentlar avval qoʻlda navigatsiya qilish, hisobotlarni tahlil qilish va bir qator operatsion qarorlar qabul qilishni talab qilgan vazifalarni bajarish uchun katta hajmdagi maʼlumotlar bilan bevosita oʻzaro aloqaga kirishadigan bosqich boshlanmoqda.

Oʻnlab yillar davomida korporativ dasturiy taʼminotining katta qismi maʼlumotlarni tartibga solish va inson mehnatini yengillashtirish uchun yaratilgan. Endi bu tizimlarning nafaqat maʼlumotlarni taqdim etishi, balki ularga asoslanib harakat qilishi kutilmoqda. Bu, ehtimol, AI keltirgan eng muhim oʻzgarishlardan biri. Taʼsiri nafaqat texnologiyada, balki kompaniyalar qanday ishlashi borasida ham namoyon boʻladi. Birinchi marta koʻp yillar ichida muhokama foydalanilayotgan vositadan koʻra, maʼlumotlarni tez, integratsiyalashgan va samarali harakatlarga aylantirish qobiliyati bilan koʻproq bogʻliq boʻlib koʻrinadi.

Shu bilan birga, baʼzi tashriflar hamma ham xuddi bir xil yoʻlda ketmayotganini koʻrsatdi. Masalan, Liquid AI da sektorning koʻpchilik mashhur narrativlariga zid keladigan nuqtai nazar paydo boʻldi. Sanoatning katta qismi tobora katta modellar va tobora kuchli infratuzilmalarga sarmoya kiritishda davom etayotgan boʻlsa, bu kompaniya mobil telefonlar, transport vositalari va bord apparatlari kabi qurilmalarda mahalliy ishlaydigan ixcham tizimlarni ishlab chiqmoqda.

Bu konsepsiyaning qiziq tomoni faqat texnologiyada emas. U innovatsiyalar bitta yoʻnalishda roʻy bermayotganini eslatadi. Texnologik taraqqiyotni hisoblash quvvati, investitsiyalar va modellarning hajmi oshishi bilan bogʻlash tabiiy moyillik mavjud. Biroq, koʻpgina hollarda vazifa teskari harakatdir: odamlar va biznes hayotidagi yanada samarali, qulay va oson integratsiya qilinadigan yechimlarni yaratish.

Bu sayohatning asosiy darslaridan biri boʻlishi mumkin. Biz AI bozoriga uzoqdan qaraganda, bitta poyga borayotgandek tuyuladi. Ammo yaqinroq qaraganda, bir vaqtning oʻzida koʻp xil poygalar borligini tushunamiz. Katta generativ modellar mavjud; maxsus tizimlar mavjud; matn, tasvir, audio va video kombinatsiyasini birlashtiruvchi multimodal ilovalar mavjud; juda aniq muammolarni hal qilish uchun ishlab chiqilgan korporativ yechimlar mavjud; va bularning barchasini yanada oson va tarqatilgan qilishga sarmoya kiritayotgan kompaniyalar mavjud.

Shuning uchun bozorni bitta ustun texnologiya boshqarishi gʻoyasi tobora kam ehtimolli boʻlib qolmoqda. Turli yondashuvlarning mavjud boʻlishi va har biri maʼlum kontekstlar, cheklovlar va ehtiyojlar uchun mos kelishi scenariysi shakllanmoqda.

Bu siljish tashkilotlarning texnologik strategiyalarni qabul qilish yondashuvini ham oʻzgartiradi. Uzoq vaqtdan beri mantiq nisbatan oddiy edi: eng yaxshi mavjud vositani topish va uni joriy etish. AI paydo boʻlishi bilan tenglama bir qator boshqa oʻzgaruvchilarni oʻz ichiga oladi. Integratsiya, boshqaruv, maxfiylik, joriy etish tezligi, operatsion xarajatlar va biznesga moslik masalalari tanlangan texnologiyaning murakkabligi kabi muhim ahamiyat kasb etadi.

Amalda, kompaniya oʻz jarayonlariga oddiy, yaxshi integratsiyalashgan yechimdan ekstremal darajada ilgʻor texnologiyadan alohida foydalanishdan koʻra ancha katta qiymat olishi mumkin. Balki aynan shu sababli joriy etish haqidagi muhokama imkoniyatlar haqidagi muhokamadan koʻproq joy egallay boshlayapti.

Diqqatni tortgan yana bir jihat – bu texnologik suhbatlarning odamlar haqidagi suhbatlarga tez-tez aylanishi. Bu Stanfordga tashrif buyurish paytida ayniqsa aniq boʻldi. Universitet AI sohasidagi dunyoning eng ilgʻor ekotizimlaridan birida joylashgan boʻlsa-da, muhokamalarning sezilarli qismi hali ham taʼlim, isteʼdodlarni tayyorlash, tashkiliy madaniyatni shakllantirish va liderlikni rivojlantirish kabi mavzularga qaratilgan.

Bu tasodifga oʻxshamaydi. Silikon vodiysining tarixi hech qachon faqat texnologiyalar tarixi boʻlmagan. U har doim bilimlarni innovatsiyalarga aylantirish qobiliyati bilan chuqur bogʻliq boʻlgan. Vositalar oʻzgaradi. Platformalar oʻzgaradi. Kompaniyalar paydo boʻladi va yoʻqoladi. Ammo oʻrganish, moslashish va yaratish qobiliyatiga ega odamlarni tayyorlash doimiy element boʻlib qoladi.

Bu nuqta AI tobora koʻproq tashkilotlar uchun mavjud boʻlishi bilan yanada dolzarb ahamiyat kasb etadi. Texnologiyaga kirish tabiiy ravishda demokratiklashish tendensiyasiga ega. Buning aksiga, uni strategik tarzda qanday ishlatish haqidagi bilimni takrorlash qiyin ustunlik boʻlib qoladi.

AI ni ketma-ket joriy etish platforma yoki jamoalarga yangi resurslar berishdan koʻra koʻproq narsani talab qiladi. Bu jarayonlarni qayta koʻrib chiqishni, kompetensiyalarni rivojlantirishni, ish oqimlarini qayta koʻrib chiqishni, nazorat mexanizmlarini yaratishni va analitik, qarorlar va ijroning bir qismi aqlli tizimlar tomonidan qoʻllab-quvvatlanadigan muhitda ishlashga odamlarni tayyorlashni talab qiladi.

Shuning uchun muallif ushbu tajriba natijasida qilgan asosiy xulosa AI poygasini qaysi kompaniya boshqarishi yoki qaysi model yaqin yillarda standart boʻlishi bilan bogʻliq emas. Hissiyot shuki, biz texnologiya izolyatsiyasida markaz boʻlgan bosqichdan chiqib, amaliy qoʻllashga ancha koʻproq yoʻnaltirilgan bosqichga kiryapmiz. AI ning keyingi bosqichi barcha boshqalarni almashtiradigan bitta inqilobiy model bilan belgilanilmaydi. U turli texnologiyalarning kombinatsiyasi, ularni mavjud jarayonlarga integratsiya qilish qobiliyati va eng muhimi, tashkilotlarning bu imkoniyatlarni sezilarli natijalarga aylantirish qobiliyati bilan quriladi.

Nihoyat, sunʼiy intellekt texnologik mavzu boʻlib qoladi. Ammo sayohat davomida boʻlgan bunday koʻp suhbatlardan soʻng, u asta-sekin strategiya, ijro va tashkiliy moslashuv muhokamasiga aylanganini aytmaslik qiyin. Balki aynan shu sababli eng muhim savol allaqachon kim eng ilgʻor AI ga ega ekanligi emas. Koʻproq ahamiyat kasb etayotgan savol boshqa: kim uni yaxshiroq ishlatishi mumkin?

Mashhur