Visual Blocks est un framework de programmation visuelle qui permet aux utilisateurs de programmer en connectant des blocs dans un flux de blocs, créant un pipeline d'apprentissage automatique. Cependant, les utilisateurs novices peuvent avoir du mal à configurer et à lier des nœuds à partir d'un espace de travail vide. Pour résoudre ce problème, les auteurs ont introduit InstructPipe, un assistant AI qui génère des pipelines d'apprentissage automatique avec des instructions en texte. InstructPipe se compose de trois modules : deux modules de modèle de langage large (LLM) et un interprète de code. Les modules LLM génèrent du pseudocode pour un pipeline cible, et l'interprète rend le pipeline dans l'éditeur visuel pour la collaboration homme-IA. Les auteurs ont mis en œuvre InstructPipe avec une stratégie de promptage de raffinement LLM en deux étapes, suivie d'une étape d'interprétation de pseudocode pour rendre un pipeline. Les utilisateurs peuvent décrire un pipeline souhaité dans un langage naturel, et InstructPipe génère automatiquement un pipeline correspondant, éditable. Les auteurs ont évalué InstructPipe à travers un atelier hybride de deux jours et une étude utilisateur, démontrant que InstructPipe permet aux utilisateurs de créer des pipelines d'apprentissage automatique avec une charge de travail significativement réduite. InstructPipe permet aux utilisateurs de construire des workflows sophistiqués avec une charge de travail plus faible, permettant une prototypage d'idées rapide et réduisant significativement les interactions utilisateur. Les auteurs espèrent que InstructPipe servira de catalyseur pour les recherches futures, favorisant l'innovation dans la collaboration homme-IA et déverrouillant de nouveaux niveaux d'expressivité et de créativité dans l'apprentissage automatique et au-delà.