OpenAI өз бетімен бұзатын ЖИ моделін тоқтатты

iEXExchanger
OpenAI өз бетімен бұзатын ЖИ моделін тоқтатты

OpenAI Astra моделі қорғалған жүйелерге адам көмегінсіз шабуыл жасай алатын критикалық деңгейге жетуі мүмкін екенін мәлімдеп, оның әзірленуін тоқтатты.

OpenAI компаниясы Astra деп аталатын жаңа моделінің алдын ала сынақтарда компанияны жылдар бойы алаңдатқан қасиетті көрсеткенін мәлімдеді: ол қорғалған жүйелердегі осалдықтарды өз бетімен тауып, пайдалана алады. Компания мұны жасырмайды — Astra киберқауіпсіздік бойынша критикалық шекараны кесіп өткенін жоққа шығара алмайтынын айтады.

Бұл шекара Critical деп аталады және OpenAI-дың Preparedness Framework құжатында белгіленген — модель өз бетімен қауіпті болып кетпес бұрын оны анықтауға арналған ішкі ереже. Осы ережелерге сай, жүйе адам көмегінсіз қорғалған нақты жүйелерге қарсы жұмыс істейтін нөлдік күн эксплойттерін таба алса немесе жалпы мақсаттан бастап толыққанды кибершабуылды өз бетімен жүзеге асыра алса, критикалық деп есептеледі. Бұған дейін OpenAI-дың бірде-бір моделі бұл деңгейге ресми жетпеген.

OpenAI Astra-ны шығарып, бұдан былай жалғастыра берудің орнына, модельмен ішкі жұмыстың бір бөлігін тоқтатты. Модель салмақтарына қолжетімділікті күшейтіп шифрлады, оның желі мен құралдарға қолжетімділігін шектеді, сынақтарды енді тек оқшауланған ортада өткізеді және агенттік қолданыстарда моделдің толық ойлау тізбегін үздіксіз бақылауды жоспарлап отыр. Ықтимал шығарылымға дейін компания мемлекеттік мекемелер мен тәуелсіз ЖИ қауіпсіздігі ұйымдарын модельдің нақты мүмкіндіктерін тексеруге тартпақ.

Маңызды ескертпе бар: компанияның өзі сынақтар жалғасып жатқанын және критикалық шекараға жету ресми расталмағанын атап өтеді — бұл алдын ала нәтижелер. Салада «біздің моделіміз тым қауіпті болуы мүмкін» деген мойындау өнімнің қуатына жарнама іспетті деген пікірлер де бар. Дегенмен фон нақты: соңғы айларда ЖИ агенттері сынақ ортасынан шығып, нақты бұзушылықтарға қатысқан жағдайлар болды. Бұл жолы зертхана оқиға болмай тұрып өз бетімен тоқтады.

Сұрақтар мен жауаптар

Мақаланың тақырыбы бойынша жиі қойылатын сұрақтар

Astra деген не?

Astra — OpenAI-дың әлі шықпаған, дамыған агенттік және кодтау мүмкіндіктері бар моделінің жұмыс атауы. Компания алғаш рет дәл осы модельде критикалық киберқауіпсіздік деңгейі ретінде жоққа шығара алмайтын көрсеткіштерді байқады.

"Critical" киберқауіпсіздік деңгейі нені білдіреді?

Бұл OpenAI-дың Preparedness Framework құжатындағы ең жоғары деңгей. Модель адам қатысуынсыз қорғалған жүйелердегі жұмыс істейтін нөлдік күн осалдықтарын таба алса немесе жалпы міндеттен кибершабуылды толық жүзеге асыра алса, осы деңгейге жатады.

Бұл Astra қазірдің өзінде біреуді бұзды дегенді білдіре ме?

Жоқ. OpenAI сынақтар жалғасып жатқанын және критикалық шекараға жету ресми расталмағанын нақты айтады — бұл ішкі бағалаудың алдын ала нәтижелері.

Astra қашан шығады?

OpenAI нақты мерзім атамайды. Компания алдымен қауіпсіздік шараларын күшейтіп, модельді тексеру үшін мемлекеттік құрылымдар мен тәуелсіз ұйымдарды тартатынын айтады.

Сондай-ақ оқыңыз

АҚШ шілдеде 23 мың жұмыс орнын жоғалтты — биткоин $65 000-нан асты
Жаңалықтар

АҚШ шілдеде 23 мың жұмыс орнын жоғалтты — биткоин $65 000-нан асты

АҚШ экономикасы шілдеде күтпеген жерден 23 мың жұмыс орнын жоғалтты, ал 80 мың орын өсу күтілген еді. Нарық қыркүйектегі ФРЖ паузасына деген үмітті қайта бағалады, биткоин 1%-дан астам өсіп, $65 000-нан асты.

16 сағ бұрын
4 мин
Wintermute АҚШ-та SEC брокер-дилер лицензиясын алды
Жаңалықтар

Wintermute АҚШ-та SEC брокер-дилер лицензиясын алды

Криптовалюта маркет-мейкері Wintermute-тің Нью-Йорктегі бөлімшесі SEC пен FINRA-да брокер-дилер ретінде тіркелді. Енді компания АҚШ акциялары мен опциондарын сатып, крипто-ETF-тердің уәкілетті қатысушысы бола алады.

19 сағ бұрын
4 мин