MinIO

VAR-As-A-Service ist ein MLOps Ansatz zur Vereinheitlichung und Wiederverwendung von statistischen Modellen und Pipelines zur Bereitstellung von maschinellem Lernen. Es handelt sich um den zweiten Teil einer Artikelserie, die auf diesem Projekt aufbaut und Experimente mit verschiedenen statistischen und maschinellen Lernmodellen, Datenpipelines, die mithilfe vorhandener DAG Tools implementiert wurden, und Speicherdiensten, sowohl cloudbasiert als auch alternativen lokalen Lösungen, darstellt. Dieser Artikel konzentriert sich auf die Modelldateispeicherung unter Verwendung eines Ansatzes, der auch für maschinelle Lernmodelle anwendbar und verwendet wird. Der…

Trino ist eine Open-Source verteilte SQL-Abfrage-Engine, die entwickelt wurde, um große Datenmengen zu analysieren, die über eine oder mehrere heterogene Datenquellen verteilt sind. Trino wurde entwickelt, um Datenbank- und ETL-Anwendungen sowie interaktive Analysen für große Datenmengen und Berichtserstellung zu handhaben. Alluxio ist eine Open-Source Datenorchestrierungsplattform für groß angelegte Analysen und KI. Alluxio befindet sich zwischen Berechnungsframeworks wie Trino und Apache Spark und verschiedenen Speichersystemen wie Amazon S3, Google Cloud Storage, HDFS und MinIO. Dies ist ein Tutorial zur Bereitstellung von…

Der Autor dieses Beitrags stellt die in einem MinIO-Artikel dargestellte Perspektive in Frage, der zufolge POSIX nicht geeignet ist für Objektspeicher. Er führte umfangreiche Tests durch, die MinIO s3fs-fuse und JuiceFS umfassten. Die Ergebnisse zeigen, dass sowohl MinIO als auch JuiceFS hervorragende Leistungen liefern, während s3fs-fuse zurückbleibt. Bei Szenarien mit Überschreibung von kleinen Dateien übertrifft JuiceFS FUSE-POSIX andere Lösungen. Kürzlich stieß ich auf einen Artikel auf dem MinIO-Blog mit dem Titel „Putting a Filesystem on Top of an Object Store…