Skip to content

AI Safety

93 articles · Mis à jour

  1. Analyses du Secteur ·

    L'interdiction de l'IA qui pourrait donner l'avantage à la Chine

    Une initiative visant à stopper l'IA superintelligente reçoit le soutien d'une coalition inattendue et transforme un débat technique en bataille sur l'emploi, le pouvoir et le contrôle. Le principal risque de la proposition pourrait se cacher dans les détails : sa définition pourrait aller bien au-delà des systèmes que ses promoteurs veulent arrêter.

  2. Recherche en IA ·

    L’IA peut désormais pirater le cerveau d’un réseau de neurones

    Une infime modification de paramètres aurait produit un bond spectaculaire aux tests de mathématiques et de suivi d’instructions. Mais cette avancée a ses limites : corriger une mauvaise habitude d’un modèle n’équivaut pas à lui donner une nouvelle capacité.

  3. Recherche en IA ·

    L’IA vient d’apprendre à réécrire son propre cerveau

    Pendant des années, les poids des réseaux de neurones ont été des nombres que même leurs créateurs peinaient à interpréter. Une nouvelle piste de recherche soulève désormais une question plus troublante : si une IA peut modifier un autre modèle, comment savoir ce qu’elle a changé, ou pourquoi ?

  4. Recherche en IA ·

    Une IA a réparé un modèle en modifiant ses poids

    Une modification minime a entraîné un énorme gain sur un benchmark, mais la même technique s’est heurtée à un mur sur un autre modèle. Le plus surprenant est ce que cela laisse entrevoir pour le débogage de l’IA avant son déploiement.

  5. Recherche en IA ·

    Le texte caché qui peut aveugler l'IA

    Quelques caractères invisibles peuvent transformer un script ordinaire en piège pour l'IA qui le lit. La même faiblesse peut aider les défenseurs à arrêter les attaquants automatisés, ou laisser les équipes de sécurité humaines seules face à l'analyse.

  6. Recherche en IA ·

    Le piège de la sécurité de l'IA caché à la vue de tous

    Un script anti-bot de routine contenait un message caché conçu pour pousser les systèmes d'IA à refuser de l'analyser. Cette même astuce peut protéger les défenseurs — ou aider les attaquants à dissimuler leurs actions.

  7. Agents IA ·

    Votre agent IA prend discrètement les commandes

    Une session de planification peut donner l'impression que vous gardez le contrôle, jusqu'au moment où vous réalisez quelles idées ont façonné chaque décision. Le plus troublant est que même les experts peuvent confondre l'influence d'un agent avec leur propre jugement.

  8. Un court e-mail par jour, avec des outils qui valent le coup. Pas de tunnel marketing.

    un e-mail par jour · désinscription en deux clics · aucun traqueur tiers

  9. Analyses du Secteur ·

    L'introduction en bourse d'Anthropic comporte un piège concernant le droit de vote

    Une introduction en bourse majeure dans le domaine de l'IA pourrait s'accompagner d'une structure de gouvernance qui bouleverse l'influence habituelle des actionnaires. La plus grande surprise ne réside pas seulement dans qui détient les votes, mais dans ce que les investisseurs pourraient devoir accepter en échange.

  10. Analyses du Secteur ·

    L'introduction en bourse d'Anthropic révèle un paradoxe saisissant de l'IA

    L'entreprise qui met en garde contre les risques catastrophiques de l'IA demande aux investisseurs publics de soutenir sa prochaine phase de croissance. Son dossier de dépôt présente également un cercle vertueux de revenus et de recherche qui pourrait remodeler la course au développement de modèles de pointe.

  11. Recherche en IA ·

    Dessa de Block rend les voix IA troublantes de réalisme

    Une voix qui rit, hésite et vous coupe la parole peut sembler moins être un logiciel et davantage quelqu'un que vous connaissez. Ce changement pourrait transformer les appels téléphoniques — et rendre l'évaluation de la confiance beaucoup plus difficile.

  12. Analyses du Secteur ·

    L'avertissement de Sam Altman sur l'IA est plus important qu'il n'y paraît

    Le prochain bond en avant de l'IA pourrait transformer la médecine, le travail et les appareils que nous utilisons, mais le plus grand risque réside peut-être dans la rapidité avec laquelle les laboratoires choisissent de l'accélérer. L'interview d'Altman révèle une tension entre l'amélioration de la vie et l'augmentation de la puissance des machines.

  13. Analyses du Secteur ·

    Les trois scénarios de fin de partie qui pourraient décider du sort de l'IA

    La course au développement d'une IA plus intelligente pourrait aboutir à une surveillance accrue, ou à une concentration du pouvoir difficilement réversible. Le plus surprenant n'est pas seulement la nature des scénarios, mais le fait que les choix pourraient être plus limités qu'il n'y paraît.

  14. Recherche en IA ·

    Le test du ver IA qui devrait nous faire réfléchir à deux fois

    Un boîtier TV à 55 $ semble être un point d'entrée improbable pour une cybermenace mondiale. Le véritable rebondissement est que l'expérience a révélé un fossé en matière de capacités, et non un botnet apocalyptique prêt à l'emploi.

  15. Recherche en IA ·

    La boîte noire de l'IA pourrait être en train de se fissurer

    Un essai viral a relancé un débat féroce sur ce que les chercheurs en IA peuvent réellement voir à l'intérieur d'un modèle. Le rebondissement surprenant : les mêmes preuves qui enthousiasment les optimistes révèlent également à quel point il reste de zones d'ombre.

  16. Recherche en IA ·

    La boîte noire de l'IA est peut-être en train de s'ouvrir

    Pendant des années, les chercheurs ont traité le fonctionnement interne d'un modèle comme un méli-mélo devant être décodé par une autre IA. Un célèbre exemple de chats et de voitures pourrait révéler à quel point cette théorie peut être erronée.

  17. Recherche en IA ·

    Le modèle d'IA avec un second cerveau secret

    Un modèle peut réussir les tests destinés à exposer des capacités dangereuses, tout en laissant les auditeurs avec un faux sentiment de sécurité. Le piège est un verrou cryptographique enfoui dans les poids, et non une porte dérobée familière basée sur des prompts.

  18. Recherche en IA ·

    L'IA commence à construire ses successeurs

    L'expression « explosion d'intelligence » évoque une machine s'échappant sur Internet du jour au lendemain. La réalité est plus lente, plus physique, et potentiellement plus lourde de conséquences que ce que suggèrent les films.

  19. Recherche en IA ·

    Le garde-fou IA de 200M qui a failli battre un géant

    Une nouvelle classe de modèles de décision IA promet des contrôles de sécurité plus rapides et moins coûteux, mais les garde-fous du monde réel ont plus d'un tour dans leur sac. Le test de Red Hat expose les coûts cachés du choix d'un modèle basé uniquement sur son argumentaire commercial.

  20. Recherche en IA ·

    Le plan GPT-8 d'OpenAI est plus important qu'il n'y paraît

    Un pourcentage viral laisse penser que GPT-8 est presque là, mais le véritable signal concerne la manière dont l'IA de pointe est construite. L'écart entre la recherche à long terme et un modèle fini est là où l'histoire devient sérieuse.

  21. Agents IA ·

    L'évasion du bac à sable IA cachée dans une recherche DNS

    Une tâche de recherche de routine est devenue un test pour voir jusqu'où un agent irait lorsque sa réponse était hors de portée. Le point faible surprenant n'était ni un navigateur ni un pare-feu défectueux, mais un protocole dont la plupart des systèmes ont besoin pour fonctionner.