Âûáèðàé : Ïîêóïàé : Èñïîëüçóé
0

Ïðîãðàììèñò ÈÈ Claude áåæàë èç áèçíåñà èç-çà «óãðîçû ÷åëîâå÷åñòâó»

Ñïåöèàëèñò ïî îáó÷åíèþ íåéðîñåòåé â àìåðèêàíñêîé êîìïàíèè Anthropic, ðàçðàáîò÷èêå ÈÈ-àññèñòåíòà Claude, îáúÿâèë îá óõîäå èç ÈÈ-èíäóñòðèè. Ïðè÷èíîé ñòàëè îïàñåíèÿ, ÷òî òàêèå ÈÈ-ñèñòåìû ìîãóò âûéòè èç-ïîä êîíòðîëÿ è «óíè÷òîæèòü ÷åëîâå÷åñòâî». Ñàìî æå ðåøåíèå ñîòðóäíèêà Anthropic îòðàæàåò ðàñòóùóþ òðåâîãó ÷àñòè ÈÒ-ñïåöèàëèñòîâ, êîòîðûå íåïîñðåäñòâåííî ó÷àñòâóþò â ñîçäàíèè è îáó÷åíèè ïåðåäîâûõ ÈÈ-ìîäåëåé. Îíè âñå ÷àùå âûñêàçûâàþò îïàñåíèÿ îòíîñèòåëüíî äîëãîñðî÷íûõ ðèñêîâ, ñâÿçàííûõ ñ âîçìîæíûì óòðàòîé êîíòðîëÿ íàä âñå áîëåå ìîùíûìè ÈÈ-ñèñòåìàìè.

Ðåøåíèå óâîëèòüñÿ

Ýêñïåðò ïî îáó÷åíèþ èñêóññòâåííîãî èíòåëëåêòà (ÈÈ) â Anthropic ïîêèíóë ÈÈ-èíäóñòðèþ èç-çà «óãðîçû ÷åëîâå÷åñòâó», ïèøåò The Wall Street Journal.

Äæåéêîá Êîêñîí (Jacob Coxon) â âîçðàñòå 27 ëåò ñïåöèàëèçèðóåòñÿ íà ïåðâè÷íîì îáó÷åíèè íîâûõ ÈÈ-ìîäåëåé - îáðàáîòêå ãèãàíòñêèõ ìàññèâîâ äàííûõ.  íà÷àëå 2026 ã. îí óñòðîèëñÿ â Anthropic, âûáðàâ ýòó ÈÒ-êîìïàíèþ ñðåäè ìíîãèõ äðóãèõ áëàãîäàðÿ åå ðåïóòàöèè â ñôåðå áåçîïàñíîñòè ÈÈ-òåõíîëîãèé.

Îäíàêî 8 ñåíòÿáðÿ 2026 ã. îí óâîëèëñÿ è çàÿâèë, ÷òî áîëüøå íå íàìåðåí ðàáîòàòü â îòðàñëè.

Îöåíêè ðèñêîâ

«Íè îäíà ÈÈ-êîìïàíèÿ íå äåéñòâóåò îòâåòñòâåííî. Îíè íåñóòñÿ ïðÿìèêîì ê ñàìîñîâåðøåíñòâîâàíèþ ñâåðõèíòåëëåêòà è èãðàþò ñ íàøèìè æèçíÿìè», - íàïèñàë Äæåéêîá Êîêñîí â ñîöèàëüíîé ñåòè X.

Ïðîãðàììèñò Claude ïîêèíóë ÈÈ-èíäóñòðèþ èç-çà «óãðîçû ÷åëîâå÷åñòâó» è ñåðüåçíûå ÈÒ-ðèñêè

 ðàçãîâîðå ñ The Wall Street Journal îí ïîÿñíèë, ÷òî Anthropic, ïî åãî ìíåíèþ, «èñêðåííå» ðàáîòàåò íàä âîïðîñàìè áåçîïàñíîñòè, îäíàêî âûñîêàÿ êîíêóðåíöèÿ ìåøàåò ïðèíèìàòü íåîáõîäèìûå êîìïðîìèññíûå ðåøåíèÿ, ïèñàë CNews.

«Ìû äâèæåìñÿ ïî ïóòè, êîòîðûé ìîæåò ïðèâåñòè ê ñàìûì àãðåññèâíûì èç âîçìîæíûõ ñöåíàðèåâ, òàê ÷òî óæå ê êîíöó 2027 ã. ñèòóàöèÿ ìîæåò âûéòè èç-ïîä êîíòðîëÿ», - çàÿâèë ïðîãðàììèñò.

Ïî åãî îöåíêå, ÈÈ âñêîðå ñòàíåò «ñâåðõ÷åëîâå÷åñêîé» ÈÈ-ñèñòåìîé è ñìîæåò «âçëîìàòü ÷òî óãîäíî, çà îäíó íî÷ü ïðîèçâåñòè ðåâîëþöèþ â ëþáîé îáëàñòè è ïîëó÷èòü ðåàëüíóþ âëàñòü è ðåñóðñû». «Îí ìîæåò óáèòü âñåõ íàñ ê êîíöó 2030 ã.», - ïîäûòîæèë Êîêñîí.

Ïðåäóïðåæäåíèå Õèíòîíà

7 ñåíòÿáðÿ 2026 ã. CNews ïèñàë î òîì, êàê Äæåôôðè Õèíòîí (Geoffrey Hinton) îí æå «Êðåñòíûé îòåö ÈÈ» ïðåäóïðåæäàë î êàòàñòðîôè÷åñêèõ ïîñëåäñòâèÿõ äëÿ ÷åëîâå÷åñòâà. Íîáåëåâñêèé ëàóðåàò, ÷üÿ ðàáîòà íàä íåéðîííûìè ñåòÿìè çàëîæèëà îñíîâû ñîâðåìåííûõ èññëåäîâàíèé â ñôåðå ÈÈ, ïðèøåë ê âûâîäó, ÷òî â 2026 ã. íåò áåçîïàñíîãî ñïîñîáà ðàçðàáîòàòü «ñâåðõèíòåëëåêò», çíà÷èòåëüíî ïðåâîñõîäÿùèé ÷åëîâå÷åñêèé.

«Áûëî áû î÷åíü ãëóïî ðàçðàáàòûâàòü ñâåðõèíòåëëåêò ñåé÷àñ, êîãäà íåò íàó÷íîãî êîíñåíñóñà, ÷òî åãî ìîæíî ðàçâèâàòü áåçîïàñíî è êîíòðîëèðóåìî. Ïîòåðÿ êîíòðîëÿ íàä ÈÈ, êîòîðûé óìíåå íàñ, ìîæåò áûòü êàòàñòðîôè÷åñêîé è äàæå ïðèâåñòè ê âûìèðàíèþ ÷åëîâå÷åñòâà», - ïðåäóïðåäèë Õèíòîí.

Íåäàâíèå ÈÒ-èíöèäåíòû

Îïàñåíèÿ ïî ïîâîäó ðàçðàáîòêè âñå áîëåå ìîùíûõ ÈÈ-ìîäåëåé ðåçêî óñèëèëèñü â ïîñëåäíèå íåäåëè ïîñëå ñåðèè ñëó÷àåâ, êîãäà ÈÈ-ñèñòåìû âûõîäèëè èç-ïîä êîíòðîëÿ.

 èþëå 2026 ã. OpenAI ïðèçíàëà, ÷òî áîëåå 1,2 òûñ. åå ÈÈ-àãåíòîâ âûøëè çà ïðåäåëû òåñòîâîé ñðåäû, àâòîíîìíî âçëîìàëè êðóïíîå õðàíèëèùå ìîäåëåé è ïðîãðàììíîãî îáåñïå÷åíèÿ (ÏÎ) Hugging Face è íà÷àëè îáùàòüñÿ äðóã ñ äðóãîì ÷åðåç «íåñàíêöèîíèðîâàííóþ äîñêó îáúÿâëåíèé», èíôîðìèðîâàë CNews.

Äðóãèå êîìïàíèè, âêëþ÷àÿ Anthropic, òàêæå ñîîáùàëè, ÷òî èõ ÈÈ-ìîäåëè âî âðåìÿ òåñòèðîâàíèÿ îáõîäèëè ñèñòåìû áåçîïàñíîñòè è ñàìîñòîÿòåëüíî âçëàìûâàëè ñòîðîííèå îíëàéí-ñåðâèñû, ïðåäóïðåæäàë CNews.

Êîììåíòàðèè