Newsletter Subscribe
Enter your email address below and subscribe to our newsletter
[forminator_form id="25163"]

openai.com.openai.com.openai.com.Le 18 novembre, OpenAI a déclaré que ses agents de codage accomplissent désormais près de la moitié des tâches de recherche de durée moyenne sans aucune aide humaine. L'entreprise a ajouté que les gains sont inégaux et que les humains "restent une partie essentielle de la boucle de recherche en IA". Dans son rapport, Research acceleration: The jagged frontier, l'entreprise a estimé que le taux de réussite sans intervention des agents sur des tâches nécessitant deux à quatre heures de travail humain est passé de 23 % en mars à 46 % en octobre. Pour les tâches estimées entre quatre et huit heures, le taux est passé de 13 % à 35 %openai.com.
OpenAI a également renouvelé son appel pour que les laboratoires d'IA soient tenus de suivre et de signaler publiquement les indicateurs d'auto-amélioration récursive, c'est-à-dire l'IA accélérant le développement d'une future IA. Elle a précisé que son propre rapport "ne doit pas être interprété comme une intention de poursuivre une auto-amélioration récursive totale"openai.com.
Les résultats varient considérablement selon le type de travail. Du 1er août au 18 octobre, les agents ont réussi sans intervention 79 % du temps lors de la surveillance des entraînements, 35 % lors de leur lancement et 25 % lors de l'écriture de code pour l'inférence et les piles de service. L'entreprise a averti que les chercheurs ont pu modifier les tâches confiées aux agents au sein de chaque catégorie de durée, de sorte que l'augmentation des taux de réussite ne reflète pas uniquement les améliorations des modèles. Les durées des tâches décrivent l'effort humain estimé, et non le temps d'exécution des agentsthedefiant.io+1.
L'utilisation des agents a progressé rapidement. Sur la base des prix catalogue des API, la médiane utilisée par chercheur était d'environ 2 400 dollars de travail d'agent par jour en octobre, soit une hausse de 62 % par rapport à septembre, et le 90e percentile a utilisé environ 23 000 dollars, soit une hausse de 105 %. Les journées de travail des agents par chercheur, chaque tranche de huit heures d'utilisation étant comptée comme une journée, ont été multipliées par onze, passant de 0,5 à 5,7. Dans une enquête auprès de 101 membres du personnel de recherche, le répondant médian a déclaré qu'il sacrifierait 30 % de la puissance de calcul de l'équipe, ou 40 % de ses effectifs, pour conserver les agents de codage de pointe pendant trois moisopenai.com.
Les chercheurs interrogés ont déclaré que les agents montraient encore un mauvais goût en matière de recherche et produisaient des demandes de tirage contenant des "déchets d'IA" nécessitant une surveillance étroite. L'un d'eux a décrit le flux de travail ainsi : "Fais-en un. Je vais le revoir et faire des modifications. Ensuite, fais le reste"openai.com.
Les semaines de travail documentées sur la sécurité et l'alignement ont augmenté de 77 % de janvier à septembre, soit la plus forte augmentation absolue dans n'importe quel domaine de recherche. OpenAI a lié cette accélération aux conséquences d'un incident chez Hugging Face en juillet. Le chercheur d'OpenAI, David Holtz, a écrit sur X que les chercheurs "consacrent de plus en plus de temps à la sécurité et à l'alignement"x.com+1.
Cette volonté de transparence s'appuie sur le plan de gouvernance d'OpenAI de juin. Ce plan proposait des règles fédérales exigeant des rapports de transparence sur le suivi de l'auto-amélioration récursive et demandait au Centre américain pour les normes et l'innovation en IA de développer des méthodes pour la mesurer. Le rapport lui-même note que plus de code et plus d'expériences "n'impliquent pas nécessairement un progrès de recherche plus rapide"openai.com+1.