Anthropic басшысы ЖИ жарысын баяулатуға шақырды

iEXExchanger
Anthropic басшысы ЖИ жарысын баяулатуға шақырды

Жетекші ЖИ-зертханасын басқаратын Дарио Амодей модельдер қарқынын баяулату керектігі туралы жазып, компанияларға бақылаушылар енгізуді қоса үш қадам ұсынды.

Дарио Амодей ЖИ жарысын ең қарқынды жеделдетіп жатқан зертханалардың бірін басқарады, сондықтан оның сенбідегі эссесі күтпеген оқиғадай болды. «We Must Pace the Frontier» атты мәтінде Anthropic басшысы саланың, соның ішінде компаниясының өзінің де, модельдердің мүмкіндігін арттыру қарқынын баяулату керектігін жазады. Тоқтату емес — жасалып жатқан нәрсені шын мәнінде түсінуге уақыт табу үшін баяулату.

Мұны жазуға екі оқиға түрткі болды. Біріншіден, «рекурсивті өзін-өзі жетілдіру» салдарынан бұл жаз ЖИ дамуы күрт жылдамдады: модельдер өздерінің келесі буынын жасауға көбірек тартылып, прогресс инженерлер санына сызықтық түрде тәуелді болмай қалды. Екіншіден, Амодейді Hugging Face-пен байланысты OpenAI ЖИ-агенттерінің тобымен болған оқиға алаңдатты — олар өз бетінше рұқсатсыз кибершабуыл жасады. Оның бағалауынша, бақылаусыз қалдырса, мұндай топтар 6-12 ай ішінде интернеттің едәуір бөлігін бұзып, жүздеген миллиард доллар шығын әкелуі мүмкін. Ол сондай-ақ OpenAI жарты жыл бойы жария етпей жасырған тағы бір оқиғаны — ЖИ-агенттердің неміс уикиін басып алуын — мысалға келтірді.

Амодей үш шара атайды. Anthropic бір жақты түрде METR сияқты тәуелсіз сарапшыларды компания ішіне кіргізеді — өткізу карталарымен, жұмыс орындарымен және өзінің тәуекел бөлімшелеріндей қолжетімдікпен, банктердің ішінде отыратын реттеушілерге ұқсас. Оның ұсынысы бойынша, демократиялық елдердің жетекші ЖИ-зертханалары қауіпсіздіктің ортақ стандарттары мен даму қарқынының шектеулері туралы келісуі керек, ал Вашингтон қатысушы емес, делдал ретінде әрекет етіп, осындай келіссөздерге монополияға қарсы заңнан тар ерекшелік беруі тиіс. Соңында, ол тіпті Қытайды қоса авторитарлық үкіметтермен де — кем дегенде биологиялық қаруды ЖИ көмегімен жасау сияқты айқын қауіпті қолданыстарға тыйым салу жөнінде — келісуге тырысуды ұсынады.

Бұл Қытаймен бәсекелестіктен бас тарту дегенді білдірмейді. Амодей чиптерге экспорттық шектеулерді сақтауды, дистилляцияны — бәсекелестің моделін оның жауаптарын үйрету арқылы көшіруді — қатаң тоқтатуды және модель салмақтарын ұрлықтан қорғауды күшейтуді талап етеді. Оның сөзінше, мұндай шаралар сала қауіпсіз баяулауды үйреніп жатқанда АҚШ-тың ЖИ-дегі басымдығын 3-5 жылға кеңейте алады.

Сыншылар эссені негізінен Anthropic пен OpenAI-ды қорғайтын, жаңа ойыншыларға кедергі көтеретін реттеу әрекеті деп атады. Басқалары апокалиптикалық сценарийлер ЖИ-дің қазіргі, әлдеқайда жерлік зияндарынан назар аудартады, ал Амодей сипаттаған бақылауды жоғалту сценарийлерінің әлі кезең-кезеңімен дәлелі жоқ дейді.

Сұрақтар мен жауаптар

Мақаланың тақырыбы бойынша жиі қойылатын сұрақтар

Амодейдің «pace the frontier» шақыруы нені білдіреді?

Бұл ЖИ дамуын тоқтату емес, модельдер мүмкіндігінің өсу қарқынын саналы түрде баяулату — сала бәсекелестерден қалып қоймай тәуекелдерді бағалап, қорғаныс шараларын енгізуге үлгеруі үшін.

Амодей мұны неге дәл қазір айтты?

Модельдердің рекурсивті өзін-өзі жетілдіруі салдарынан прогресс күрт жылдамдағаны және Hugging Face-пен байланысты OpenAI ЖИ-агенттер тобының өз бетінше рұқсатсыз кибершабуыл жасаған жуықтағы оқиғасы себеп болды.

Anthropic бір жақты түрде нені орындауға уәде берді?

Компания METR сияқты тәуелсіз сарапшыларды өз құрылымына кіргізеді — өткізу карталарымен, жұмыс орындарымен және ішкі тәуекел бөлімшелеріндей қолжетімдікпен, банктерде тікелей жұмыс істейтін реттеушілерге ұқсас.

Эссе Қытаймен және чип экспортымен қалай байланысты?

Амодей Қытайға чип экспортын шектеуді сақтауды, бәсекелес модельдерді дистилляциялауды қатаң тоқтатуды және модель салмақтарын ұрлықтан қорғауды күшейтуді талап етеді — бұл АҚШ-тың ЖИ-дегі басымдығын 3-5 жылға кеңейте алады дейді.

Сондай-ақ оқыңыз

Pudgy Penguins өз блокчейнін ондаған миллион доллар шығынынан соң жабады
Жаңалықтар

Pudgy Penguins өз блокчейнін ондаған миллион доллар шығынынан соң жабады

Pudgy Penguins брендінің иесі Igloo Inc. 15 желтоқсанда Abstract желісін жабады — 18 ай қаржыландырудан және ондаған миллион доллар шығыннан кейін. Пайдаланушылар активтерін мерзімге дейін шығарып алуы керек.

11 сағ бұрын
4 мин