Quelles options de stockage pour une startup qui doit conserver plus de 10+PB de données ?
(news.ycombinator.com)Une question publiée sur HN, avec diverses réponses. Les données sont actuellement stockées sur S3 et le volume augmente progressivement.
-
Côté coût matériel, l’auto-hébergement est évidemment moins cher : HP Apollo, RackMountPro, etc.
-
Mais il existe des coûts cachés : recrutement d’un ingénieur stockage, coût des locaux au-delà du matériel, reprise après sinistre, remplacement du matériel, CAPEX/OPEX, etc.
-
La configuration et l’administration du système de fichiers sont aussi un sujet : Ceph, MinIO, ZFS
-
D’autres services cloud de stockage spécialisés comme Backblaze B2 / Wasabi / Scaleway
-
Des solutions S3 on-prem comme Cloudian / Scality / NetApp Storagegrid
-
AWS Direct Connect
-
À cette échelle, négocier directement avec AWS/Azure/GCP pour faire baisser les prix
-
Le subreddit où se retrouvent les personnes qui stockent de très gros volumes de données : https://www.reddit.com/r/DataHoarder/
3 commentaires
Une startup avec plus de 10 PB, c’est difficile à imaginer. On dirait que ce genre de chose est devenu courant ?
Il s’agit de KeepSafe, un service payant de stockage personnel de photos/vidéos.
L’entreprise est assez connue, notamment parce qu’elle est réputée pour stocker les données en toute sécurité grâce à des technologies de chiffrement.
MinIO - stockage objet open source haute performance basé sur K8S https://fr.news.hada.io/topic?id=4211
Backblaze B2, API compatible S3 disponible publiquement https://fr.news.hada.io/topic?id=2020