Ryzyko egzystencjalne
existential risk
Ryzyko egzystencjalne to zagrożenie, którego ziszczenie unicestwiłoby inteligentne życie pochodzące z Ziemi albo trwale i drastycznie ograniczyło jego możliwości. Kluczowa jest nieodwracalność, a nie sama liczba ofiar.
Skąd się wzięło
Pojęcie wprowadził Nick Bostrom w tekście Existential Risks: Analyzing Human Extinction Scenarios and Related Hazards, opublikowanym w 2002 roku w Journal of Evolution and Technology. Definicja brzmi tam: zagrożenie, którego ziszczenie „unicestwiłoby inteligentne życie pochodzące z Ziemi albo trwale i drastycznie ograniczyło jego możliwości”.
Nowe było w tym jedno: przesunięcie uwagi z rozmiaru katastrofy na jej nieodwracalność. Wojna, w której ginie miliard ludzi, jest tragedią bez precedensu, ale ludzkość ją przetrwa i odbuduje. Zdarzenie, po którym nie ma już kto się odbudowywać, należy do innej kategorii - i według Bostroma powinno być inaczej traktowane w rachunku decyzyjnym, a nie tylko wyżej postawione na tej samej skali.
W 2013 roku Bostrom rozwinął ten argument w Global Policy, przenosząc go z rozważań filozoficznych na grunt polityki publicznej.
Co dokładnie obejmuje
Kategoria obejmuje dwa rodzaje zdarzeń: wyginięcie oraz trwałe zablokowanie możliwości rozwoju - na przykład stabilny ustrój totalitarny obejmujący całą planetę albo nieodwracalna utrata zdolności technicznych. Drugi przypadek bywa pomijany, a jest w tej definicji równie istotny.
Zagrożenia dzieli się zwykle na dwie grupy:
- Naturalne - uderzenie asteroidy, superwulkan, pandemia naturalna. O nich wiemy najwięcej, bo mamy zapis geologiczny. Sam fakt, że gatunek przetrwał setki tysięcy lat, ogranicza ich prawdopodobieństwo od góry.
- Wytworzone przez człowieka - broń jądrowa, patogeny projektowane w laboratorium, zaawansowana sztuczna inteligencja, niekontrolowane skutki technologii. Tutaj zapisu historycznego nie ma, bo te zagrożenia są młodsze niż jedno stulecie.
Ta asymetria jest sednem sprawy: argument z przeszłości nie działa na zagrożenia, które właśnie stworzyliśmy. Fakt, że przeżyliśmy dotąd, nie mówi nic o ryzyku broni biologicznej, bo dotąd jej nie było.
Typowe jest też rozróżnienie na ryzyko przypadkowe (skutek uboczny, którego nikt nie chciał), celowe (użycie przez kogoś) i strukturalne (nikt nie chce katastrofy, ale układ bodźców do niej prowadzi - jak wyścig zbrojeń).
Spory
Czy kategoria jest sprawdzalna. Najmocniejszy zarzut metodologiczny: prawdopodobieństw zdarzeń bezprecedensowych nie da się oszacować z danych, bo danych nie ma. Liczby krążące w tej dyskusji są ocenami eksperckimi, nie wynikami pomiaru, i bywają relacjonowane jako wyliczenia. Zwolennicy odpowiadają, że przy decyzjach nieodwracalnych ocena obarczona niepewnością jest lepsza niż brak oceny - a milczące przyjęcie prawdopodobieństwa zerowego też jest oszacowaniem, tylko nieuświadomionym.
Spór o priorytety. Skrajna wersja argumentu - że nawet znikome prawdopodobieństwo katastrofy nieodwracalnej przeważa nad dużymi, ale odwracalnymi szkodami - prowadzi do wniosków, które wielu uważa za nie do przyjęcia. Krytycy wskazują, że tak postawiony rachunek pozwala uzasadnić odsunięcie na dalszy plan problemów udokumentowanych i bieżących: ubóstwa, chorób, zmiany klimatu. To jest zarzut poważny i nie da się go zbyć poprawką rachunkową, bo dotyczy tego, co w rachunku wolno umieścić.
Zarzut o pochodzenie. Kategoria wyrosła w środowisku wąskim, zamożnym i intelektualnie jednorodnym, a lista zagrożeń bywa odbiciem tego, czym to środowisko się zajmuje. Odpowiedź brzmi, że pochodzenie idei nie rozstrzyga o jej trafności - ale zarzut ma sens jako pytanie o to, czego na tej liście brakuje.
Nadużycia retoryczne. Słowem „egzystencjalne” określa się dziś w publicystyce zagrożenia dotkliwe, lecz odwracalne. To rozmywa pojęcie, którego cała wartość polegała na wskazaniu granicy nieodwracalności - i utrudnia rozmowę o obu rzeczach naraz.
Stan na dziś
Stan na sierpień 2026: pojęcie jest przyjęte w akademii i obecne w polityce publicznej. Powstały ośrodki badawcze poświęcone temu wprost, a ryzyka związane z zaawansowaną sztuczną inteligencją i bezpieczeństwem biologicznym trafiły do dokumentów rządowych i regulacji.
Nie oznacza to zgody co do liczb. Nie istnieje uzgodnione oszacowanie prawdopodobieństwa dla żadnego z wytworzonych przez człowieka zagrożeń, a rozrzut ocen eksperckich jest ogromny - co jest samo w sobie informacją o stanie wiedzy, nie usterką badań.
Praktyczna zasada przy czytaniu tekstów z tego pola: sprawdź, czy podana liczba jest oszacowaniem eksperckim, czy wynikiem modelu, a jeśli modelu - na jakich danych został oparty. Przy zdarzeniach bezprecedensowych odpowiedź na to ostatnie pytanie bywa zaskakująco krótka.
Zobacz też
- AGI (sztuczna inteligencja ogólna) AGI to hipotetyczny system sztucznej inteligencji radzący sobie z dowolnym zadaniem poznawczym na poziomie co najmniej człowieka, a nie tylko z zadaniami, pod które został zbudowany. Pojęcie nie ma jednej przyjętej definicji ani uzgodnionego testu.
- Superinteligencja Superinteligencja to hipotetyczny umysł przewyższający najlepszych ludzi w praktycznie każdej dziedzinie poznawczej, w tym w twórczości naukowej i planowaniu strategicznym. Nie jest tym samym co szybszy komputer - chodzi o wyższą jakość rozumowania, nie o tempo.
- Transhumanizm Transhumanizm to pogląd, że człowiek może i powinien świadomie przekraczać biologiczne ograniczenia własnego ciała i umysłu za pomocą nauki i techniki. Nie jest jedną doktryną, lecz rodziną stanowisk sporną co do tego, jak daleko wolno się posunąć.
Źródła (3)
-
Nick Bostrom,
Existential Risks: Analyzing Human Extinction Scenarios and Related Hazards
, Journal of Evolution and Technology, t. 9, nr 1 (2002)
Tekst wprowadzający pojęcie. Czasopismo jest wydawane przez środowisko transhumanistyczne - to nie unieważnia argumentacji, ale warto o tym wiedzieć.
-
Nick Bostrom,
Existential Risk Prevention as Global Priority
, Global Policy, t. 4, nr 1 (2013)
Wersja argumentu w piśmie recenzowanym z dziedziny polityki publicznej.
- Irving John Good, Speculations Concerning the First Ultraintelligent Machine , Advances in Computers, t. 6 (1966)
Część większego wątku
- AGI i superinteligencja AGI i superinteligencja: pojęcia, historia sporu i stan rzeczy. Co znaczy „ogólna", dlaczego nie ma testu i skąd biorą się krążące daty.
- Bezpieczeństwo sztucznej inteligencji Bezpieczeństwo AI: alignment, problem kontroli, interpretowalność i ryzyko egzystencjalne. Co da się dziś badać, a co pozostaje spekulacją.