décalage contextuel

Ô Vous, grandes personnes matures, ne fréquentez que d'autres gens adultes, et votre maturité est telle qu'elle ne peut s'accorder qu'avec la maturité !

Auteur: Gombrowicz Witold

Info: Ferdydurke

[ rapports humains ] [ générations ]

épistémologie

L'objectif est de montrer que le développement universel de la science moderne est la résultante, non pas tant d'un progrès inévitable et historiquement cumulatif du savoir, mais d'un processus qui démultiplie délibérément les lieux où les techniques scientifiques peuvent être appliquées.

Auteur: Schaffer Simon

Info: ​​​​​​​La fabrique des sciences modernes

[ contextuelle ] [ situationnelle ]

femmes-hommes

Si la langue est maternelle et l’écriture paternelle, dans la langue elle-même, pour chacun d’entre nous – toujours, toujours – la prose est paternelle et la poésie maternelle. Les histoires, les récits, et la pensée, nous sont donnés par nos pères ; l’instant vertical, métaphysique, instinctif, de la poésie, par nos mères. 

Auteur: Amigorena Santiago H.

Info: Le premier exil, p. 287

[ parents ] [ idiomes sexués ] [ contextuel-téléonomique ]

christianisme

L’Eglise, la religion, ayant cessé d’être souveraine, au lieu d’être une menace pour la liberté, serait plutôt une sauvegarde pour la liberté. L’Eglise, la religion, privée de l’appui du bras séculier, devient libérale par raison, par intérêt ou, si vous aimez mieux, par force ; dites, si vous voulez, qu’elle devient libérale malgré elle ; le fait est qu’elle est contrainte de le devenir, et elle ne le devient pas, uniquement, par tactique et par calcul. La foi chrétienne, la religion en général, l’Eglise catholique elle-même, est libérale, elle défend la liberté humaine, en ce sens qu’elle s’oppose à l’absolutisme des majorités et à la mainmise de l’Etat sur les consciences et qu’elle est, par là même, un obstacle à l’omnipotence de l’Etat, à l’absorption de l’individu par l’Etat.

Auteur: Leroy-Beaulieu Anatole

Info: " Les doctrines de haine ", éditions Payot et Rivages, Paris, 2022, page 255

[ anti-étatisme ] [ préservation ] [ contextuel ]

sémantique expérimentale

Application francophone prévue pour l'accompagnement des changements d'habitudes de lecture apportées par le numérique, FLP développe un nouveau genre de classifiation lexicographique et permet aussi d'aller vers une lecture analytique approfondie, au sens sémantique du terme. Nous sommes ici dans le domaine des participants actifs au projet des Fils de La Pensée. 

C'est donc la proposition d'une nouvelle forme de slow slow thinking au sens où le logiciel, en dispensant un nuage de corrélats après tout résultat de recherche, aide le lecteur attentif et motivé, via la permutation intellectuelle des termes/concepts proposés par le nuage, à aller vers une lecture plus verticale, "arrêtée", puisque la grappe de corrélats "ouvre" la confrontation de sa propre réflexivité sémantique avec un corpus de termes plus étendu. Rencontre qui permettra, fortuitement, de comparer sa subjectivité avec une certaine objectivité du langage consensus. Ensuite l'usage de FLP en rétroaction aidera les plus assidus avec des investigations plus fouillées. Chacun sa sauce. 

On pourra aussi voir cette opération comme une confrontation/réflexion du factuel avec le téléologique, du contextuel avec le téléonomique voire même du performatif avec le constatif. Nous ne sommes pas très loin de l'idée de l'Heptapod B proposé par Ted Chiang.

Auteur: Mg

Info: 3 mars 2022

[ sérendipité ] [ citation s’appliquant à ce logiciel ] [ mode d'emploi ] [ non-séquentiel ]

interactions continues

En bref, la relation au monde ne saurait se définir en soi par le type d’activités ou les domaines d’objets qu’elle met en jeu, mais seulement par l’attitude au monde et l’expérience du monde qu’elle implique. La formation et le maintien ou non d’axes de résonance constitutifs dépendent premièrement des dispositions (physiques, biographiques, émotionnelles, psychiques et sociales) du sujet, deuxièmement de la configuration institutionnelle, culturelle, contextuelle et physique des fragments de monde en jeu et troisièmement, du type de relation existant entre entre les deux. Même les fragments de monde tendanciellement inhospitaliers et hostiles tels les déserts, les paysages enneigés ou les stations-service peuvent devenir, sous certaines conditions, de véritables oasis de résonance. L’aliénation, comprise comme relation au monde muette, froide, figée ou en échec, est dès lors le résultat d’une subjectivité dégradée, de configurations sociales ou matérielles hostiles à la résonance ou bien d’une inadéquation, c’est-à-dire d’un défaut d’ajustement entre le sujet et le fragment de monde. C’est dire que la sociologie de la relation au monde que je propose ici vise à dépasser le problème des essentialisations infondées : point n’est besoin de formuler une hypothèse substantialiste sur l’essence véritable de la nature humaine afin de pouvoir se prononcer sur la réussite ou la non-réussite de la vie. Admettons plutôt que cette essence est tout aussi changeante que l’organisation et l’orientation sociales et culturelles du monde. Les relations au monde doivent ainsi être considérées comme des configurations globales historiquement et culturellement variables, qui ne définissent pas seulement un certain rapport entre un sujet et un objet, mais coproduisent elles-mêmes, de facto, ces sujets et ces objets. La sociologie des relations au monde entreprise ici se présente donc comme une critique des rapports de résonance historiquement réalisés – et par là même, du moins je l’espère, comme une forme renouvelée de la Théorie critique.

Auteur: Rosa Hartmut

Info: Résonance. Une sociologie de la relation au monde, pp 23, 24

[ constante adaptabilité ]

intelligence artificielle

- Peux-tu nous parler des "transformateurs" dans le processus d'IA ?

- Les transformateurs (transformers) sont un type d'architecture de réseau neuronal qui a gagné en popularité et en succès dans les tâches de traitement du langage naturel (NLP), telles que la traduction linguistique, la réponse aux questions et la modélisation linguistique. Ils ont été introduits par Vaswani et al. dans un article fondateur en 2017, et sont depuis devenus un outil standard dans la communauté du TAL.

L'innovation clé de l'architecture du transformateur est l'utilisation de mécanismes d'auto-attention, qui permettent au réseau de s'intéresser à différentes parties de la séquence d'entrée lors du traitement de chaque élément de la séquence. Cela permet au réseau de saisir les dépendances complexes entre les mots ou les tokens de la séquence d'entrée, sans s'appuyer sur un traitement séquentiel*. Le mécanisme d'auto-attention permet également au réseau d'apprendre des représentations contextuelles des mots, qui peuvent être utilisées pour générer des traductions ou des prédictions plus précises et plus fluides.

L'architecture du transformateur présente plusieurs avantages par rapport aux modèles de réseaux neuronaux antérieurs pour les tâches de NLP. Elle peut traiter des séquences d'entrée de longueur variable, ce qui est important pour des tâches telles que la modélisation linguistique et la traduction automatique. Elle peut également capturer les dépendances à longue portée entre les mots, ce qui est important pour des tâches telles que la réponse aux questions et le résumé. En outre, il a été démontré que l'architecture des transformateurs est plus parallélisable et plus efficace sur le plan informatique que d'autres modèles de réseaux neuronaux, ce qui permet d'accélérer les temps d'apprentissage et d'inférence.

Dans l'ensemble, les transformateurs ont eu un impact significatif sur le domaine de l'IA et du NLP**, et ils continuent d'être un domaine actif de recherche et de développement. Ils sont largement utilisés dans de nombreuses applications pratiques, notamment les assistants virtuels, les chatbots et les systèmes de traduction automatique.

Auteur: chatGPT4

Info: 1 mai 2023 *traitement des données dans l'ordre où elles se présentent, sans sélection, regroupement ou tri préalable.**Natural langage processing

[ . ]

anticipation

Cette anticipation démentie de notre auteur conduit à s'interroger sur la dimension prospective de la Science-Fiction, et sur la persistance de son intérêt même lorsque la vision est démentie par le déroulement de l'histoire. C'est une vieille question posée dès les premiers romans de Wells et ses essais prospectifs. Elle a été profondément renouvelée par les romans “réalistes” de John Brunner, l'Orbite déchiquetée, Tous à Zanzibar, Sur l'onde de choc et Le troupeau aveugle .

En plus d'un sens, le public y a répondu en continuant à lire avec enthousiasme des œuvres qui avaient, apparemment, perdu leur actualité. Le Vingt mille lieues sous les mers de Jules Verne a toujours des lecteurs, tout comme les Premiers hommes dans la Lune de Wells. Sous certaines conditions de présentation, une intrigue spéculative demeure passionnante comme si son lecteur pouvait se remettre dans les conditions d'ignorance qui rendaient possible l'énigme originelle. Peut-être s'agit-il même là d'un des traits importants de la Science-Fiction. Elle ne serait pas spéculation à partir d'un savoir, un au-delà du savoir positif en somme, comme affectent de s'en indigner certains scientifiques à propos de ses facilités, ou une ébauche de métaphysique comme s'en félicitent quelques philosophes. Mais elle serait un problème soulevé dans un cadre à peu près consistant et à laquelle l'auteur donne une ou plusieurs réponses à peu près logiques dans ce cadre. Sa vraisemblance est plus interne que contextuelle. Si le lecteur admet le problème, il va s'intéresser à la démarche de l'auteur dans l'exposition de ses propositions de réponse, allant jusqu'à faire abstraction de ses connaissances antérieures et admettant ce qui, en temps normal, lui aurait paru absolument inadmissible. Dans le cas d'un problème simple comme celui du voyage interstellaire, la question n'est donc pas de savoir si la solution proposée par l'auteur respecte ou non les limitations relativistes ni comment il les tourne ; elle n'est pas non plus tellement d'accepter que le voyage interstellaire soit possible sans trop s'inquiéter de ses moyens et d'explorer quelles en seraient les conséquences, ce qui est la définition la plus souvent donnée de la Science-Fiction ; mais elle est de voir quelle dramaturgie, quel style, l'auteur va adopter pour faire accepter sa solution.

Auteur: Klein Gérard

Info: In Préface d'Eon de Greg Bear

[ futur-ancien ] [ littérature ] [ être bon public ] [ lecteur docile ]

intelligence artificielle

Résumé et explication du texte "Attention is All You Need"

Le texte "Attention is All You Need" (Vaswani et al., 2017) a révolutionné le domaine du traitement du langage naturel (TLN) en introduisant l'architecture Transformer, un modèle neuronal basé entièrement sur le mécanisme d'attention. Ce résumé explique les concepts clés du texte et son impact sur le TLN.

Concepts clés:

• 
  

  Attention: Le mécanisme central du Transformer. Il permet au modèle de se concentrer sur des parties spécifiques d'une séquence d'entrée (par ex., une phrase) lors du traitement, capturant ainsi les relations à longue distance entre les mots.

  
  


• 
  

  Encodeur-décodeur: L'architecture du Transformer. L'encodeur traite la séquence d'entrée et produit une représentation contextuelle. Le décodeur utilise ensuite cette représentation pour générer la séquence de sortie.

  
  


• 
  

  Positional encoding: Ajoute des informations de position aux séquences d'entrée et de sortie, permettant au modèle de comprendre l'ordre des mots.

  
  


• 
  

  Apprentissage par self-attention: Le Transformer utilise uniquement des mécanismes d'attention, éliminant le besoin de réseaux récurrents (RNN) comme les LSTM.

  
  

Impact:

• 
  

  Efficacité: Le Transformer a surpassé les modèles RNN en termes de performance et de parallélisation, permettant un entraînement plus rapide et une meilleure scalabilité.

  
  


• 
  

  Polyvalence: L'architecture Transformer s'est avérée efficace pour une large gamme de tâches en TLN, telles que la traduction automatique, le résumé de texte et la réponse aux questions.

  
  


• 
  

  Impact durable: Le Transformer est devenu l'architecture de base pour de nombreux modèles de pointe en TLN et continue d'inspirer des innovations dans le domaine.

  
  

En résumé:

"Attention is All You Need" a marqué un tournant dans le TLN en introduisant l'architecture Transformer. Le mécanisme d'attention et l'absence de RNN ont permis d'améliorer considérablement l'efficacité et la polyvalence des modèles de TLN, ouvrant la voie à de nombreuses avancées dans le domaine.

Points importants:

• 
  

  Le Transformer repose sur le mécanisme d'attention pour capturer les relations à longue distance dans les séquences.

  
  


• 
  

  L'architecture encodeur-décodeur avec self-attention offre une grande efficacité et une grande flexibilité.

  
  


• 
  

  Le Transformer a eu un impact profond sur le domaine du TLN et continue d'inspirer de nouvelles recherches.

  
  

Auteur: Internet

Info: Compendium de gemini

[ historique ] [ traitement automatique du langage ] [ écrit célèbre ]

xénolinguistique

Gary a hoché la tête et pointé son doigt. - On dirait qu'ils expriment l'idée de "clairement" en changeant la courbure de ces traits au milieu.

- Tout juste, cette modulation peut s'appliquer à plein de verbes, le logogramme* de "voir" peut être modulé de la même façon pour donner "voir clairement", tout comme celui de "lire" et bien d'autres. Et changer la courbure de ces traits n'a aucun équivalent dans leur énonciation ; dans la langue parlée, ils ajoutent un préfixe au verbe afin d'exprimer la facilité et les préfixes utilisés pour "voir" et "entendre" sont différent. Il y a d'autres exemples mais cela vous donne une idée. Essentiellement il s'agit d'une grammaire en deux dimensions.

Il a entrepris de faire les cent pas, l'air pensif. - Y'a t'il quoi que ce soit de comparable dans les systèmes d'écriture humains ?

- Les équations mathématiques, ou les notations qui servent à la musique et à la danse. Ce sont des systèmes très spécialisés, toutefois ; nous ne pourrions pas les utiliser pour enregistrer cette conversation. Mais il ne semble que, si nous le maitrisions assez bien, nous pourrions enregistrer cette conversation dans le système d'écriture heptapode. Je crois qu'îl s'agit d'un langage graphique complet, général.

Gary a froncé les sourcils. - Donc leur écriture constitue une entité séparée de leur langue parlée, non ?

- Oui. D'ailleuirs, il serait plus précis d'appeler leur système d'écriture "Heptapod B" et de réserver "Heptapod A" à leur langue parlée.

- Une petite seconde... Pourquoi utiliser deux langues là ou une seule suffirait ? ça parait inutilement difficile à apprendre. 

- Comme l'orthographe anglaise ? La facilité d'apprentissage n'est pas le moteur principal de l'évolution d'une langue. Pour les heptapodes, l'écrit et l'oral jouent peut-être des rôles culturels et cognitifs si disparates qu'utiliser des langues séparées serait plus logique qu'utiliser des formes distinctes de la même langue.

Il a réfléchi. - Je vois ce que vous voulez dire. Il jugent peut être notre écriture redondante, comme si on on gaspillait un second canal de communication.

- C'est très possible. Découvrir pourquoi ils utilisent une autre langue quand ils écrivent nous apprendra beauoup à leur sujet.

Auteur: Chiang Ted

Info: La tour de Babylone, L'histoire de ta vie. pp 164-165. *Dessin correspondant à une notion ou à une suite de sons, dans les écritures dites à idéogrammes (hiéroglyphes, caractères chinois)

[ science-fiction ] [ dualité sémantique ] [ codages ] [ factuel-téléologique ] [ contextuel-téléonomique ] [ action description ] [ performatif-constatif ]