Databricks mettra prochainement Lakeflow Designer à disposition en preview privée.
Lors de son sommet Data + AI à San Francisco, Databricks lance Lakeflow Designer. Cet outil visuel permet aux utilisateurs non techniques de construire des pipelines de données prêts pour la production sans coder. Lakeflow Designer utilise un assistant IA et s’intègre à la solution Lakeflow existante, qui est maintenant généralement disponible.
Pipelines sans code sans compromis sur le contrôle et l’évolutivité
Lakeflow Designer offre une interface glisser-déposer permettant aux utilisateurs professionnels de concevoir des pipelines ETL. Via des commandes en langage naturel, ils peuvent automatiser des tâches sans l’aide d’ingénieurs de données. L’outil est intégré à Unity Catalog pour la gestion des données et à Databricks Assistant pour le support IA. Cela permet de créer des flux de travail visuels offrant la même fiabilité et évolutivité que les alternatives basées sur le code.
L’introduction de Lakeflow Designer vise à résoudre un problème courant dans les équipes de données : d’une part, il existe des outils qui offrent de la simplicité mais sont limités en termes de contrôle et d’évolutivité ; d’autre part, les pipelines robustes nécessitent généralement l’intervention de profils techniques. Avec Lakeflow, Databricks tente de combiner les deux mondes.
Rénovations étendues au sein de la plateforme Lakeflow
Outre Lakeflow Designer, Databricks annonce également la disponibilité générale de Lakeflow. Cette plateforme unifie le traitement, la transformation et l’orchestration des données dans un seul environnement. Au sein de Lakeflow, il existe de nouveaux pipelines qui peuvent être entièrement écrits en SQL ou Python sans gestion d’infrastructure. Il y a également un nouvel environnement de développement offrant des fonctionnalités assistées par l’IA, telles que le débogage et la validation.
De plus, Databricks lance de nouveaux connecteurs point-and-click pour les sources de données telles que Google Analytics, ServiceNow, SQL Server et SharePoint. Via la fonctionnalité Zerobus, les utilisateurs peuvent écrire de grands volumes de données d’événements en temps réel dans leur lac de données sans infrastructure supplémentaire.
Databricks lance également une preview publique du nouvel environnement de développement pour l’ingénierie des données. La fonction Zerobus et Lakeflow Designer lui-même seront bientôt disponibles en preview privée.