anonymat de masse

Supposons que la bombe ait été utilisée.

Il serait déplacé de parler encore ici d’ "acte". Le processus qui aboutirait à un tel fait compterait en fin de compte tant de médiations, il serait si peu transparent, il se composerait de tant d’étapes intermédiaires et ferait intervenir tant d’instances – sans qu’aucune ne soit plus décisive que les autres – que pour finir tout le monde aurait fait quelque chose mais personne n’aurait "fait" cela. En fin de compte, personne n’aurait rien fait.

Pour écarter tout risque d’un ultime sursaut de la conscience, on a construit des êtres sur lesquels rejeter la responsabilité, c’est-à-dire des machines à oracles, des consciences-automates électroniques [...]. [...]

Quand bien même il n’y aurait pas de robots, la complexité de l’organisation moderne à elle seule, le fait que cette chose monstrueuse soit le résultat d’un travail mille fois divisé et médiatisé, suffirait à en faciliter l’exécution. Cela semble paradoxal. Ce n’est pourtant pas un paradoxe parce que les innombrables procédures organisationnelles, en consommant beaucoup d’énergie, affaiblissent ou épuisent les énergies morales contraires, et remplissent ainsi une fonction analogue à celle des résistances électriques.

En outre, lorsqu’une organisation est au travail, l’idée d’une moralité de l’action est automatiquement remplacée par celle d’un parfait fonctionnement. [...] Chacun des innombrables travailleurs spécialisés intégrés au processus considérant exclusivement la tâche qu’il doit accomplir et n’étant lui-même considéré comme consciencieux que dans la mesure où il accomplit consciencieusement la tâche dont il est chargé, il n’y a pas pour lui matière à la moindre considération morale. Autrement dit, s’il n’y a pas là pour lui la moindre perspective d’immoralité, c’est parce qu’il n’a pas de "perspective" du tout. [...]

Et comme il ne sait pas comment sa tâche se combine avec celle des autres, il ne peut prendre conscience du fait que la somme des tâches spécialisées et consciencieusement accomplies pourrait se révéler une monstrueuse absence de conscience morale. [...]

Rien ne peut donc contrecarrer la production et l’utilisation de la bombe : ce sont le grand nombre des participants et la complexité de l’appareil qui empêchent d’empêcher.

Auteur: Anders Günther Stern

Info: Dans "L'obsolescence de l'homme", trad. de l'allemand par Christophe David, éditions Ivrea, Paris, 2002, pp. 272-274

[ responsabilité diluée ] [ ignorance ] [ totalitarisme ] [ pions ]

intelligence artificielle

[...] au début de la guerre de Corée, le général McArthur a proposé des mesures dont l’application aurait pu déclencher une troisième guerre mondiale. Tout le monde sait aussi qu’on lui a retiré le pouvoir de décider s’il fallait ou non prendre un tel risque. Ceux qui lui ont retiré cette possibilité ne l’ont pas fait pour prendre eux-mêmes les décisions à sa place ou pour les confier à d’autres hommes politiquement, économiquement ou moralement qualifiés. Ils l’ont fait pour remettre le pouvoir de décider à un instrument (puisque le "dernier mot" doit être objectif et qu’on ne considère aujourd’hui comme "objectifs" que les jugements prononcés par des objets). Bref, on a confié la responsabilité suprême à un "electric brain", un cerveau électrique. On n’a pas retiré le pouvoir de décision à l’individu McArthur, mais à McArthur en tant qu’homme, et si on a préféré le cerveau-instrument au cerveau de McArthur, ce n’est pas parce qu’on avait des raisons particulières de se méfier de l’intelligence de McArthur mais parce qu’il n’avait, précisément, qu’un cerveau humain.

Dire qu’on lui a "retiré" sa responsabilité en tant qu’homme, c’est bien sûr employer une expression trompeuse. Car la puissance qui l’a privé de son pouvoir de décision n’était pas une instance surhumaine, ce n’était ni "Moïra" (le Destin), ni "Tyché" (la Fortune), ni "Dieu", ni l’ "Histoire", mais c’était l’homme lui-même qui, dépouillant sa main gauche avec sa main droite, déposait son butin – sa conscience morale et sa liberté de décision – sur l’autel de la machine et montrait par cet acte qu’il se soumettait à celle-ci, à ce robot calcultateur qu’il avait lui-même fabriqué et qu’il était prêt à considérer comme une conscience morale de substitution et une machine à oracles, bref une machine littéralement providentielle.

En subordonnant le général à cet instrument, l’humanité s’est en quelque sorte porté atteinte à elle-même. Qu’on ne se méprenne pas. Rien n’est plus éloigné de nos intentions que de nous solidariser avec McArthur. Que l’histoire, en cet instant exemplaire, se soit justement servie de lui pour tenir ce rôle est un pur caprice : n’importe quelle autre personnalité publique aurait aussi bien fait l’affaire. Nous voulons seulement dire que celui qui transfère la responsabilité d’un homme à un instrument lui transfère aussi, par là même, la responsabilité de tous. En cette occasion, l’humanité s’est pour la première fois humiliée elle-même de façon significative et a ouvertement déclaré : "On ne peut pas compter sur nous puisque nous comptons plus mal que nos machines. Qu’on ne tienne donc pas "compte" de nous." Elle n’a, pour la première fois, ressenti aucune honte d’avoir ouvertement honte.

On a donc "nourri" - to feed est le terme technique qu’on emploi pour désigner l’opération par laquelle on introduit dans l’appareil les éléments nécessaires à la décision – cette machine à oracles de touts les données relatives à l’économie américaine et à celle de l’ennemi. "Toutes les données", c’est beaucoup dire. Car les machines possèdent par essence leurs "idées fixes" : le nombre de paramètres qu’elles prennent en compte est artificiellement limité. [...] On les a ainsi exclusivement "nourries" de données susceptibles d’être facilement quantifiées – des données portant donc sur le caractère utile ou dommageable, rentable ou non rentable de la guerre en question. [...]

On sait bien que l’assimilation des données par les intestins mécaniques prend un temps ridiculement court. A peine avait-on nourri l’appareil qu’il délivra son oracle. Sa conclusion ayant valeur de décision, on sut alors si l’on pouvait se lancer dans cette entreprise et déclarer la guerre sainte, ou s’il fallait renoncer à cette mauvaise affaire et la condamner comme immorale.

Après quelques secondes de réflexion ou de digestion électrique, le "brain" donna une réponse qui se révéla, par hasard, plus humaine que les mesures suggérées par l’homme McArthur. Il proclama haut et fort que cette guerre serait une "mauvaise affaire", une catastrophe pour l’économie américaine. Ce fut sans aucun doute une grande chance, peut-être même la chance de l’humanité, puisqu’elle était déjà entrée dans l’ère atomique lorsque l’oracle sortit de la bouche de la machine. Mais le choix de ce mode de décision fut aussi la plus grande défaite que l’humanité se soit jamais infligée à elle-même : car jamais auparavant elle ne s’était abaissée à ce point et n’était allée jusqu’à confier à une chose le soin de statuer sur son histoire – et peut-être même sur son être ou son non-être. Que le jugement ait été cette fois-là un veto, une grâce, cela ne change rien à l’affaire. Ce n’en fut pas moins une sentence de mort puisqu’on avait placé dans une chose la source de toute grâce possible. [...] Si nous voulions bien réaliser que des milliers d’hommes, au nombre desquels nous figurons peut-être nous-mêmes, ne doivent ce que nous appelons aujourd’hui la "vie" - c’est-à-dire leur chance de n’avoir pas encore été tués  - qu’au "non" calculé par un instrument, à ce "non" sélectionné par l’électromécanique, alors nous voudrions rentrer sous terre pour cacher notre honte.

Auteur: Anders Günther Stern

Info: Dans "L'obsolescence de l'homme", trad. de l'allemand par Christophe David, éditions Ivrea, Paris, 2002, pages 78-81

[ historique ] [ délégation de la responsabilité humaine ] [ instrument médiumnique ]

bon sens

L'utilisation d'armes biologiques était déjà interdite par le protocole de Genève de 1925, un traité international que les États-Unis n'avaient jamais ratifié. C'est alors que Matthew Meselson rédigea un document intitulé "Les États-Unis et le protocole de Genève", dans lequel il expliquait pourquoi ils devaient le faire. Meselson connaissait Henry Kissinger, qui a transmis son document au président Nixon et, à la fin de 1969, ce dernier renonçait aux armes biologiques.

Vint ensuite la question des toxines - poisons dérivés d'organismes vivants. Certains conseillers de Nixon estimaient que les États-Unis devaient renoncer à l'utilisation de toxines d'origine naturelle, mais conserver le droit d'utiliser des versions artificielles des mêmes substances. C'est un autre document de Meselson, "What Policy for Toxins", qui conduisit Nixon à rejeter cette distinction arbitraire et à renoncer à l'utilisation de toutes les armes à toxines.

Sur les conseils de Meselson, Nixon soumis à nouveau le protocole de Genève à l'approbation du Sénat. Mais il alla également allé au-delà des termes du protocole - qui interdit uniquement l'utilisation d'armes biologiques - pour renoncer à la recherche biologique offensive elle-même. Les stocks de substances biologiques offensives, comme l'anthrax que Meselson avait découvert à Fort Detrick, furent détruits.

Une fois que les États-Unis eurent adopté cette politique plus stricte, Meselson se tourna vers la scène mondiale. Lui et ses pairs voulaient un accord international plus fort que le protocole de Genève, un accord qui interdirait le stockage et la recherche offensive en plus de l'utilisation et prévoirait un système de vérification. Leurs efforts aboutirent à la Convention sur les armes biologiques, signée en 1972 et toujours en vigueur aujourd'hui.

"Grâce en grande partie au travail inlassable du professeur Matthew Meselson, le monde s'est réuni et a interdit les armes biologiques, garantissant ainsi que la science toujours plus puissante de la biologie aide l'humanité au lieu de lui nuire. Pour cela, il mérite la profonde gratitude de l'humanité", déclara l'ancien secrétaire général des Nations unies, Ban Ki-Moon.

M. Meselson déclara que la guerre biologique "pourrait effacer la distinction entre la guerre et la paix". Les autres formes de guerre ont un début et une fin - on sait clairement ce qui relève de la guerre et ce qui n'en relève pas. Une guerre biologique serait différente : "On ne sait pas ce qui se passe, ou alors on sait ce qui se passe mais ça se passe sans cesse."

Et les conséquences de la guerre biologique pourraient même être plus importantes que la destruction de masse ; les attaques via l'ADN pourraient modifier fondamentalement l'humanité. La FLI rend hommage à Matthew Meselson pour ses efforts visant à protéger non seulement la vie humaine mais aussi la définition même de l'humanité.

Selon l'astronome Lord Martin Rees, "Matt Meselson est un grand scientifique - et l'un des rares à s'être profondément engagé pour que le monde soit à l'abri des menaces biologiques. Il s'agit là d'un défi aussi important que le contrôle des armes nucléaires - et bien plus difficile à relever. Ses efforts soutenus et dévoués méritent pleinement une plus large reconnaissance."

Le 9 avril 2022, le Dr Matthew Meselson a reçu le prix Future of Life, d'une valeur de 50 000 dollars, lors d'une cérémonie organisée dans le cadre de la conférence sur les affaires mondiales de l'université de Boulder. Le Dr Meselson a été l'une des forces motrices de la Convention sur les armes biologiques de 1972, une interdiction internationale qui a empêché l'une des formes de guerre les plus inhumaines que connaisse l'humanité. Le 9 avril a marqué la veille du 47e anniversaire de la convention.

La longue carrière de M. Meselson est jalonnée de moments forts : la confirmation de l'hypothèse de Watson et Crick sur la structure de l'ADN, la résolution du mystère de l'anthrax de Sverdlovsk, l'arrêt de l'utilisation de l'agent orange au Viêt Nam. Mais c'est surtout son travail sur les armes biologiques qui fait de lui un héros international.

"Par son travail aux États-Unis et au niveau international, Matt Meselson a été l'un des principaux précurseurs de la convention sur les armes biologiques de 1972", a déclaré Daniel Feakes, chef de l'unité de soutien à la mise en œuvre de la convention sur les armes biologiques. "Le traité interdit les armes biologiques et compte aujourd'hui 182 États membres. Depuis lors, il n'a cessé d'être le gardien de la BWC. L'avertissement qu'il a lancé en 2000 sur le potentiel d'exploitation hostile de la biologie a préfiguré bon nombre des avancées technologiques dont nous sommes aujourd'hui témoins dans les sciences de la vie et les réponses qui ont été adoptées depuis."

M. Meselson a commencé à s'intéresser aux armes biologiques dans les années 60, alors qu'il travaillait pour l'Agence américaine de contrôle des armements et du désarmement. C'est lors d'une visite de Fort Detrick, où les États-Unis fabriquaient alors de l'anthrax, qu'il a appris ce qu'il en éltait du développement des armes biologiques : elles étaient moins chères que les armes nucléaires. M. Meselson fut frappé, dit-il, par l'illogisme de ce raisonnement : diminuer le coût de production des ADM serait un risque évident pour la sécurité nationale.

"Aujourd'hui, la biotechnologie est une force du bien dans le monde, associée au fait de sauver plutôt que de prendre des vies, parce que Matthew Meselson a contribué à tracer une ligne rouge claire entre les utilisations acceptables et inacceptables de la biologie", ajoute Max Tegmark, professeur au MIT et président de la FLI. "C'est une source d'inspiration pour ceux qui veulent tracer une ligne rouge similaire entre les utilisations acceptables et inacceptables de l'intelligence artificielle et interdire les armes autonomes létales".

Auteur: Internet

Info: https://futureoflife.org/2019/04/09

[ sagesse ] [ responsabilité scientifique ] [ savants responsables ] [ gratitude ]