JuiceFS, un système de fichiers distribué taillé pour l'IA - Le Monde Informatique

Le stockage objet s'est imposé comme le backend de référence des infrastructures modernes : scalabilité quasi illimitée, durabilité extrême (onze neuf de disponibilité chez AWS S3), accès multi-régions et coût plancher d'environ deux centimes par gigaoctet et par mois. Mais pour les développeurs et les équipes data, travailler directement avec ces ressources reste ardu : pas de mise à jour en place, pas de hiérarchie de répertoires, des opérations de métadonnées coûteuses et une latence structurellement plus élevée qu'un système de fichiers local. C'est précisément ces lacunes que JuiceFS de JuiceData cherche à combler. "L'idée originelle de JuiceFS était de remplacer HDFS pour constituer une fondation unifiée pour le stockage de fichiers. Mais c'est parce que les frameworks Python de machine learning travaillent nativement avec des fichiers - et qu'à l'heure de l'IA, les données d'entraînement atteignent l'échelle d...
[Courte citation de 8% de l'article original]