Qu'est-ce que DoubleCloud ?
DoubleCloud est une plateforme d'infrastructure analytique entièrement gérée, basée sur des solutions open-source comme ClickHouse, Kafka et Airflow. Elle permet aux équipes techniques de créer des pipelines de données (ingestion, stockage, orchestration, visualisation) sans maintenance manuelle. Bien que DoubleCloud ait cessé ses activités, son offre reste un exemple de stack intégrée pour l'analyse en temps réel, ciblant les ingénieurs data qui souhaitent déployer rapidement des clusters et transferts de données.
Quelles sont les caractéristiques de DoubleCloud ?
- Services managés open-source : ClickHouse pour les requêtes OLAP temps réel, Kafka pour le streaming, Airflow pour l'orchestration – déployés sur AWS ou Google Cloud.
- Moteur d'intégration ELT sans code : Data Transfer synchronise les données en temps réel entre systèmes, avec une vitesse de transmission jusqu'à 9x plus rapide que Airbyte.
- Visualisation en temps réel : Outil de visualisation de données intégré pour créer des tableaux de bord et des graphiques directement connectés aux sources.
- Déploiement automatisé : Infrastructure-as-code via Terraform ou API, avec export de métriques vers Prometheus, logs intégrés, et IDE SQL web.
- Stockage hybride S3 : Possibilité d'utiliser S3 comme stockage froid, réduisant jusqu'à 5x l'espace disque nécessaire par rapport aux solutions traditionnelles.
Quels sont les cas d'utilisation de DoubleCloud ?
- Ingénieurs data souhaitant déployer un cluster ClickHouse en quelques clics sans administrer l'infrastructure sous-jacente.
- Équipes d'analyse en temps réel collectant des logs ou événements à grande échelle via Kafka et les visualisant instantanément.
- Entreprises AdTech/MarTech extrayant des données de Meta Ads, Google Ads et LinkedIn pour alimenter des tableaux de bord clients.
- Startups mobiles ou gaming optimisant l'analyse des métriques d'usage avec une faible latence et un coût maîtrisé.
Comment utiliser DoubleCloud ?
- Créez un compte sur DoubleCloud et activez les $300 de crédits gratuits proposés.
- Sélectionnez un fournisseur cloud (AWS ou GCP), une région et les ressources nécessaires pour votre cluster.
- Utilisez Data Transfer pour connecter vos sources (bases de données, APIs) et synchroniser vos données en temps réel vers ClickHouse.
- Explorez vos données via le SQL IDE intégré ou créez des tableaux de bord avec l'outil de visualisation.
- Automatisez le déploiement et les mises à jour avec Terraform ou l'API, et surveillez via Prometheus.
