Appel à la vigilance

par Holden Karnofsky
Moment charnière de l'histoire
L'image montre un organigramme qui commence par « le monde d'aujourd'hui » et évolue en « IA transformatrice », qui se divise ensuite en trois scénarios distincts : « un monde des personnes numériques », « un monde dirigé par une IA désalignée » et « quelque chose d'autre », avant d'aboutir au résultat final « civilisation stable à l'échelle galactique ».

Il s’agit du dernier article de la série « Le siècle le plus important », qui affirme qu’il existe une forte probabilité⁠a que les décennies à venir soient marquées par :

  • Le développement d’une technologie comme PASTA (processus d’automatisation du progrès scientifique et technologique).
  • L’explosion de la productivité qui en résultera et qui conduira au développement d’autres technologies transformatrices.
    • La naissance d’une civilisation stable à l’échelle de la galaxie, peut-être composée de personnes numériques, ou peut-être dirigée par des IA mal alignées.

Lorsqu’on essaie d’attirer l’attention sur un problème sous-estimé, il est habituel de terminer par un « appel à l’action » : une action tangible et concrète que les lecteurs peuvent entreprendre pour aider.

Mais il s’agit là d’un défi, car comme je l’ai expliqué précédemment, de nombreuses questions restent en suspens quant à savoir quelles actions sont utiles ou nuisibles. (Bien que nous puissions identifier certaines actions qui semblent très utiles aujourd’hui.)

La situation est donc délicate. Lorsque je suis confronté à l’hypothèse du « siècle le plus important », mon attitude ne correspond pas à celle, familière, de « l’enthousiasme et du mouvement » ou de « la peur et de l’évitement ». Je ressens plutôt un étrange mélange d’intensité, d’urgence, de confusion et d’hésitation. Je suis face à quelque chose de plus grand que ce à quoi je m’attendais, je me sens sous-qualifié et ignorant de ce qu’il faut faire ensuite. C’est un état d’esprit difficile à partager et à diffuser, mais j’essaie.

SituationRéaction appropriée (à mon avis)
« Cette idée pourrait nous rapporter des millions ! »« Wahou ! On fonce ! »
« Ce siècle pourrait être le plus important ! »« … Oh… wahou… Je ne sais pas quoi dire et j’ai un peu envie de vomir… J’ai besoin de m’asseoir et d’y réfléchir un moment. »

C’est pourquoi, au lieu d’un appel à l’action, je voudrais lancer un appel à la vigilance. Si vous êtes convaincus par les arguments de cet article, ne vous précipitez pas pour « faire quelque chose » et passer à autre chose. Au lieu de cela, prenez toutes les mesures résolument bonnes que vous pouvez prendre aujourd’hui et mettez-vous dans une meilleure position pour prendre des mesures importantes le moment venu.

Cela peut signifier :

  • Trouver des moyens d’interagir davantage avec des sujets/domaines/industries clés tels que l’IA (pour des raisons évidentes), la science et la technologie en général (car une grande partie de l’hypothèse du « siècle le plus important » passe par une explosion des progrès scientifiques et technologiques), et des domaines pertinents de la politique et de la sécurité nationale, et en apprendre davantage à leur sujet.
  • Saisir les occasions (lorsque vous les voyez) d’orienter votre carrière dans une direction qui a plus de chances d’être pertinente (certaines de mes réflexions à ce sujet se trouvent ici ; voir également 80 000 Hours).
  • Entrer en contact avec d’autres personnes intéressées par ces sujets (je crois que c’est l’un des principaux facteurs qui a poussé les gens à faire un travail à fort impact dans le passé). Actuellement, je pense que la communauté de l’altruisme efficace est le meilleur endroit pour cela, et vous pouvez apprendre comment entrer en contact avec les gens via le Centre pour l’altruisme efficace (voir l’option « S’impliquer » du menu déroulant). Si de nouvelles façons d’entrer en contact avec les gens apparaissent à l’avenir, je les publierai probablement sur Cold Takes.
  • Et bien sûr, saisissez toutes les occasions qui se présentent à vous pour mener des actions résolument utiles.

Boutons sur lesquels vous pouvez cliquer

Voici quelque chose que vous pouvez faire dès maintenant et qui serait vraiment utile, même si ce n’est pas aussi viscéralement satisfaisant que de signer une pétition ou de faire un don.

Dans mon travail quotidien, il m’arrive souvent de rechercher – ou de faire rechercher par une personne avec laquelle je travaille – un type particulier de personne (peut-être pour pourvoir un poste vacant chez un bénéficiaire d’une subvention, ou pour apporter une expertise sur un sujet donné, ou autre). Au fil du temps, je m’attends à ce qu’il y ait de plus en plus d’occasions pour les personnes ayant des compétences, des intérêts, une expertise spécifiques, etc. de prendre des mesures qui contribuent à tirer le meilleur parti du siècle le plus important. Je pense que l’un des principaux défis consistera simplement à savoir qui est là, qui s’intéresse à cette cause, qui veut aider, et quels sont ses compétences et ses intérêts.

Si vous êtes une personne que nous pourrions souhaiter trouver à l’avenir, vous pouvez nous aider dès maintenant en envoyant des informations sur vous au moyen de ce simple formulaire. Je garantis que vos informations ne seront pas vendues ou utilisées à des fins lucratives, que vos préférences en matière de communication (que le formulaire demande en détail) seront respectées et que vous aurez toujours la possibilité de refuser toute communication.

Partager un espace mental

Dans Cela ne peut plus durer, j’ai fait l’analogie entre le monde et les passagers d’un avion qui dévalent la piste sans savoir pourquoi ils vont si vite ni ce qui les attend :

L'image est un GIF montrant la fenêtre d'un avion sur le point de décoller avec une vue sur la piste d'atterrissage.

En tant que personne assise dans cet avion, j’aimerais pouvoir vous dire que j’ai compris exactement ce qui se passe et quel avenir nous devons préparer. Mais ce n’est pas le cas.

Faute de réponses, j’ai essayé de vous montrer au moins ce que je vois :

  • Les grandes lignes des événements les plus importants du passé ou de l’avenir de l’humanité.
  • L’idée qu’ils se rapprochent de nous plus rapidement qu’il n’y paraît, que nous soyons prêts ou non.
  • Le sentiment que le monde et les règles auxquels nous sommes tous habitués ne sont pas fiables. Qu’il nous faut élever notre regard au-dessus du torrent quotidien de nouvelles tangibles et parlantes, et essayer de nous pencher sur des sujets plus étranges et plus ahurissant, qui seront plus probablement considérés comme les gros titres de notre époque dans des milliards d’années.

Il y a beaucoup de choses que je ne sais pas. Mais si ce siècle est le plus important, je suis persuadé que notre civilisation n’est pas encore à la hauteur des défis qu’il pose.

Pour que cela change, il faut d’abord que davantage de personnes prennent la situation au sérieux, agissent lorsqu’elles le peuvent et restent vigilantes lorsqu’elles ne le peuvent pas.


Ce travail est placé sous une licence Creative Commons Attribution 4.0 Licence Internationale.


Publication originale : Holden Karnofsky (2021) Call to vigilance, Effective Altruism Forum, 14 septembre.

Traduction de : Baptiste Roucau.