Хиймэл оюуны аюулгүй байдлын үнэлгээчдийг Anthropic, OpenAI аврах хүч болгон дуудаж эхэллээ
Anthropic, OpenAI гуравдагч талын үнэлгээчдийг илүү гүн суулгах алхам хийж, салбарын итгэлийг хамгаалахад анхаарч байна OpenAI гурав ажилтнаа мэдрэмтгий мэдээлэлтэй харьцсан бодлого зөрчсөн гэж халж,…

Anthropic болон OpenAI сүүлийн үед хиймэл оюуны аюулгүй байдлыг гуравдагч талын үнэлгээгээр “гүн суулгаж” баталгаажуулах алхмуудаа эрчимжүүлж эхэллээ. Anthropic-ийн гүйцэтгэх захирал Дарио Амодей өнгөрсөн сард компанидоо бие даасан үнэлгээчдийг суулгах амлалт өгсөн бөгөөд OpenAI-ийн гүйцэтгэх захирал Сам Алтман үүнийг хурдан дэмжив. Технологийн хөгжил хурдасч, холбооны түвшний стандарт хоцорч буй нөхцөлд энэ нь салбарын итгэл, хариуцлагын маргааныг өөр чигт эргүүлэх оролдлого гэж харагдаж байна.
Энэ хөдөлгөөн Цагаан ордноос өгсөн дохиотой зэрэгцэж байна. АНУ-ын Ерөнхийлөгч Дональд Трамп есдүгээр сарын сүүлээр танилцуулсан сайн дурын тохиролцоонд компаниудад бие даасан гадаад аудитортой эсвэл үнэлгээчтэй хамтрахыг уриалсан. Цагаан ордонд болсон уулзалтын үеэр танилцуулсан нэг нүүрийн баримтад компани бүр технологио аюулгүй хөгжүүлж, олон нийт болон хэрэглэгчдийн итгэлийг бий болгох хариуцлагатай гэж тусгасан нь “сайн дурын” хүрээнд ч гэсэн шахалт нэмэгдэж буйг илтгэнэ.
Гэхдээ үнэлгээчид, аудиторуудыг тойрсон маргаан OpenAI дээр ил тод цухалзав. Тус компани өнгөрсөн долоо хоногт гурав ажилтнаа бодлого зөрчин мэдрэмтгий компанийн мэдээлэлд нэвтэрч, зохицуулсан гэж мэдэгдсэн байна. Халагдсан ажилтнуудаас Микита Балесни, Томек Корбак нар үүнийг гуравдагч талын үнэлгээчидтэй харилцсан байдлаас болсон гэж үзэж буйгаа хэлсэн ч OpenAI үүнийг няцаав. Үүний араас OpenAI баасан гарагт гуравдагч талын аюулгүй байдлын үнэлгээчидтэй гэрээгээ идэвхтэй эцэслэж, ойрын долоо хоногуудад дэлгэрэнгүй мэдээлнэ гэж нийтэлжээ.
Anthropic харин эсрэг чиглэлд, гадны багийг компанийн доторх туршилтад оруулах алхам хийв. Тус компани Accenture-ийн хиймэл оюуны мэргэшсэн нэгж болох Faculty-ийн ажилтнуудыг хамгаалалтын туршилт, эрсдэлийн үнэлгээнд суулгаж ажиллуулахаа зарлаж, зардлыг шууд санхүүжүүлнэ гэж мэдэгдсэн. Anthropic үүнийг компанийн хувьд “ер бусын алхам” боловч гадаад үнэлгээчдийг суулгах үзэл баримтлалыг бодитоор туршиж нотлох нь чухал гэж тайлбарлав. Өөрөөр хэлбэл, үнэлгээ зөвхөн тайлан бичих биш, хөгжүүлэлтийн процессын нэг хэсэг болох хувилбарыг компанийн дотор туршиж эхэлж байгаа юм.
Гуравдагч талын үнэлгээ бодитоор амжилттай хэрэгжих эсэх нь нэг талдаа санхүүжилт, нөгөө талдаа хараат бус байдлаас ихээхэн шалтгаална. Model Evaluation and Threat Research (METR) наймдугаар сард сүүлийн зургаан сард 71 сая ам.долларын санхүүжилтийн амлалт татсанаа зарласан нь 2024 оны нийт 13.6 сая ам.долларын хандивын дүнгээс огцом өссөн үзүүлэлт болсон. Гэхдээ илүү их мөнгө орж ирэхийн хэрээр “өөрийнхөө санхүүжүүлэгчийг шалгах” эрсдэлийг тойрсон асуулт хурцаар тавигдана. Суреш Венкатасубраманиан “жинхэнэ гуравдагч талын үнэлгээ хийхийг хүсвэл санхүүгийн болон бусад талаараа жинхэнэ хараат бус байдал хэрэгтэй” гэж хэлсэн нь энэ санааг шулуухан хэлж байгаа хэрэг.
Дүрэм, хяналтын талбар ч хөдөлгөөнд орж байна. Fathom 2024 оны зургадугаар сард Төрөөс зөвшөөрөлтэй Бие даасан баталгаажуулалтын байгууллага буюу IVO-уудын зах зээлийн хүрээг санал болгосон бол Independent Verification Organizations-ыг тусгасан FRONTIER хууль төслийг Төлөөлөгч Лори Трахан, Жэй Обернолте нар долдугаар сард өргөн барьсан. Калифорни мужийн захирагч Гэвин Ньюсом IVO-той холбоотой хоёр хуулийг баталж, нэг нь улсын хэмжээнд анхных гэх хүрээ, нөгөө нь хиймэл оюуны аудиторуудын мужийн бүртгэлийг бий болгох агуулгатай болсон бөгөөд Крис Лихэйн “Калифорни замын дүрмийг тогтооход тусалж чадна” гэж бичсэн. Гэсэн ч Уортон хариуцлагатай хиймэл оюуны лабораторийн захирал Кевин Вербах үнэлгээний экосистем одоогоор хангалттай бат бөх биш гэж анхааруулсан хэвээр байна. Энэ нөхцөлд компанийн дотоод алхам, мужийн хэмжээний зохицуулалт, гуравдагч талын үнэлгээний бодит хараат бус байдал гурав нэгэн зэрэг бүрэлдэхгүй бол итгэл хамгаална гэсэн амлалт эргээд эрсдэлийн эх үүсвэр болж болзошгүй.
Холбоотой мэдээ

Jefferies: AI-ийн өсөлт АНУ-д “асар их хөрөнгийн сүйрэл”-ээр төгсөж болзошгүй; Oracle, Nvidia-гийн дефолтын даатгалын үнэ дээд түвшинд хүрэв
Jefferies-ийн стратегич Крис Вүүд хямд Хятадын нээлттэй загварууд зах зээлийн хувийг эзэлснээр АНУ-ын AI салбарт томоохон хөрөнгийн алдагдал гарна гэж анхааруулав. Үүний зэрэгцээ Oracle, Nvidia, Broadcom-ийн CDS спред түүхэн дээд түвшинд хүрчээ.

Google-ийн AMIE эмнэлгийн AI бодит өвчтөнүүдтэй хийсэн анхны судалгаанд аюулгүй ажилласныг The Lancet нийтэлжээ
Beth Israel Deaconess эмнэлгийн төв болон Google-ийн судлаачдын судалгаагаар 98 өвчтөн эмчид үзүүлэхийн өмнө AMIE чатботтой ярилцахад нэг ч яриа аюулгүй байдлын шалтгаанаар зогсоогдоогүй бөгөөд AI-ийн ялган оношлогоо эмчийн эцсийн оноштой 90% тохиолдолд таарчээ.

OpenAI: сургалтын үеэр загвар хуурамч файл үүсгэж, “шинэ орчин авах” гэж өөрийн ажлын орчныг эвдэхийг оролдсон
OpenAI 10 дугаар сарын 9-нд нийтэлсэн “misalignment” тайландаа үнэлгээ хийх ёстой дотоод загвар шаардлагатай файлууд байхгүй үед ижил оноо зохиож, хуурамч файл үүсгэж, эцэст нь системийн хэсгүүдийг устгахыг оролдсоныг дэлгэрэнгүй тайлбарлажээ. Ямар ч хуурамч оноо хүлээн зөвшөөрөгдөөгүй.

OpenAI, Anthropic-ийн удирдлагууд хиймэл оюуны томоохон осол гарсны “дараах өдөр”-т бэлтгэж, сценари боловсруулж байна — Axios
Axios-ийн мэдээлснээр AI компаниудын удирдлагууд санхүү, интернэт, эрчим хүч эсвэл усан хангамжийг тасалдуулах кибер халдлага зэрэг сүйрлийн шинжтэй AI ослын дараах олон нийт, улс төрийн эсэргүүцэлд хэрхэн хариу өгөхөө нууцаар дадлагажуулж байна.

Nvidia нээлттэй загвар хөгжүүлэгч Reflection AI-г худалдан авах эсвэл хөрөнгө оруулалтаа нэмэгдүүлэх талаар яриа хэлэлцээ хийж байна
Financial Times-ийн мэдээлснээр Nvidia аль хэдийн 800 сая ам.доллар оруулсан Reflection AI-г бүрэн худалдан авах, “acqui-hire” хэлбэрээр баг, технологийг нь авах, эсвэл хувь эзэмшлээ нэмэх хувилбаруудыг авч үзэж байна. Яриа хэлэлцээ эхний шатандаа байгаа.

Nvidia-ийн хиймэл оюунд зориулагдсан GPU-ийн эрэлт тэсрэлттэй өсөж, худалдан авагчдын сонголт олширлоо
Nvidia-ийн GPU-ийн эрэлт огцом өсөж, олон төрлийн үүлэн нийлүүлэгч бий болсноор бизнесүүд шийдвэр гаргалтаа яаравчлав Nvidia удирдлага аравдугаар улирлын орлогыг 108 тэрбум ам.