ClickHouse acquiert Langfuse

• ClickHouse acquiert Langfuse ; les deux entreprises continueront à développer une plateforme d’ingénierie IA fondée sur l’open source
• Langfuse conserve son modèle open source et self-hosted, sans changement immédiat de licence ni du mode d’exploitation de son service cloud
• Grâce au soutien technique et aux ressources de ClickHouse, les performances, la stabilité, la sécurité et la conformité pourront être renforcées
• Les deux entreprises partagent déjà une infrastructure de données et une base clients et collaborent étroitement depuis longtemps ; cette acquisition officialise leur partenariat
• L’équipe Langfuse rejoint ClickHouse et se concentrera sur le développement avancé d’une plateforme au service de la création d’agents IA en production

---

Vue d’ensemble de l’acquisition

• ClickHouse acquiert Langfuse ; Langfuse conserve son objectif de construire la meilleure plateforme d’ingénierie LLM
• Du point de vue des utilisateurs, aucun changement immédiat d’usage, avec maintien des canaux de support et du niveau de service existants
• Cette acquisition permet d’accélérer le développement et d’augmenter la capacité d’investissement, tout en renforçant les performances, la fiabilité et l’exécution de la feuille de route produit

Ce qui reste inchangé

• Langfuse reste open source et self-hosted, sans projet de modification de licence
• Langfuse Cloud continue d’être exploité comme aujourd’hui, avec le même produit, les mêmes endpoints et la même expérience utilisateur
• Le dispositif de support reste identique, avec maintien des SLA et des canaux existants pour les clients actuels

Ce qui va s’améliorer

• L’intégration à ClickHouse permettra d’améliorer les performances et la fiabilité d’une architecture intensive en données
  • En collaborant avec l’équipe d’ingénierie de ClickHouse, les domaines clés de performance seront renforcés
• Renforcement de la sécurité et de la conformité de niveau entreprise, grâce aux ressources de ClickHouse
• Partage du savoir-faire en réussite client et en support, pour consacrer davantage de temps à un développement centré sur les utilisateurs

Les raisons de la croissance de Langfuse

• Langfuse a été lancé pour résoudre des problèmes récurrents dans le développement d’agents basés sur des LLM
• Au départ, un prototype basé sur Postgres a permis une mise sur le marché rapide et la création d’une communauté
• Avec la hausse de l’usage, les limites de Postgres sont apparues, ce qui a conduit Langfuse v3 à migrer sa couche de données vers ClickHouse
• Cette transition a permis de disposer d’une architecture adaptée à l’analyse rapide et au traitement de données à grande échelle

Historique de la collaboration avec ClickHouse

• Langfuse fonctionne sur ClickHouse, et ClickHouse utilise Langfuse pour améliorer ses propres agents
• Langfuse Cloud est un client majeur de ClickHouse Cloud, et les deux entreprises poursuivent leurs retours techniques et améliorations conjointes
• La coopération s’est renforcée grâce à des meetups communs et des événements communautaires (Berlin, San Francisco, Amsterdam, etc.)
• Lors de la transition de Langfuse v2 vers v3, des milliers d’équipes ont adopté ClickHouse, créant une base de croissance mutuelle
• Cette acquisition vise à transformer un partenariat existant en une relation de collaboration permanente

Affinité culturelle et technique

• Les deux entreprises partagent une culture centrée sur l’open source, une philosophie produit orientée développeurs et une priorité donnée aux performances et à la fiabilité
• Toute l’équipe Langfuse rejoint ClickHouse et poursuivra le développement du produit Langfuse
• La collaboration avec une équipe d’ingénierie d’infrastructure de classe mondiale devrait améliorer la qualité du produit

Axes de travail à venir

• Renforcement des fonctions de monitoring et d’analyse des agents en environnement de production
• Intégration des workflows de tracing, labelling et expérimentation afin de raccourcir les cycles d’itération
• Montée en charge des performances pour le self-hosting à grande échelle et les déploiements enterprise
• Amélioration de l’UI/UX et de l’expérience développeur, en gardant des fonctionnalités complexes simples à utiliser
• Partage de l’avancement du développement via une feuille de route publique

Communauté et remerciements

• Langfuse s’est développé grâce aux issues GitHub, PR, retours utilisateurs et échanges sur Slack
• Pour répondre à la confiance de la communauté, l’entreprise compte s’appuyer sur les ressources de ClickHouse pour renforcer la fiabilité du produit
• L’équipe continue de recruter à Berlin et San Francisco, tout en maintenant ses canaux d’échange avec les utilisateurs

Résumé de la FAQ

• Maintien de l’open source : aucun changement de licence
• Self-hosting possible : toujours pris en charge
• Langfuse Cloud : produit, endpoints et contrats inchangés
• Canaux de support : inchangés
• Composition de l’équipe : toute l’équipe Langfuse rejoint ClickHouse et poursuit le développement du produit

Participation de la communauté

• Recueil des avis utilisateurs dans GitHub Discussions
• Les demandes des clients enterprise sont traitées via l’e-mail dédié ([e-mail])

[GN⁺]

Avis Hacker News

• ClickHouse a récemment bouclé une levée de fonds de 400 millions de dollars. Sa valorisation de 15 milliards de dollars aurait plus que doublé par rapport à il y a seulement un an
  L’entreprise ne se positionne plus simplement comme un produit de base de données, mais comme un « logiciel de base de données pour le développement d’agents IA »
  Lien vers l’article Bloomberg

  • Après avoir récemment acquis PeerDB, ClickHouse a lancé un service d’hébergement Postgres et continue d’étendre sa plateforme d’observability basée sur HyperDX et ClickStack
    Avec Langfuse en plus, l’entreprise évolue vers une alternative à Snowflake / Databricks
  • Les investisseurs sont volatils par nature. Une entreprise dépendante du financement VC a du mal à s’arrêter avant d’avoir pleinement réussi
    En ce moment, tout le monde cherche un récit IA, donc pour lever des fonds, il faut bien suivre cette tendance
  • Sur le marché actuel du financement, il est difficile de paraître tourné vers l’avenir sans une « histoire IA et agents »
    Même une startup DB qui génère plusieurs millions de dollars de revenus paraît moins séduisante qu’une startup IA déficitaire si elle n’a pas de narration IA
    Le récit IA est désormais devenu une hypothèse de base et une condition de survie
  • Gagner de l’argent en tant que pur éditeur de bases de données est déjà difficile depuis 10 à 20 ans
    C’est pourquoi la plupart pivotent vers les tendances du moment (sécurité, observability, crypto, IA, etc.)

• La formule « notre objectif est de construire la meilleure plateforme d’ingénierie LLM » était intéressante.
  C’est surprenant d’entendre cela de la part de ClickHouse, qui était à l’origine une entreprise de base de données de séries temporelles

  • Cette formule n’est pas de ClickHouse, mais le headline de Langfuse
    Si l’on lit l’annonce officielle de ClickHouse (lien), le titre parle de « l’avenir de l’observability open source pour les LLM », ce qui signifie que l’équipe Langfuse poursuivra son travail existant au sein de ClickHouse
  • ClickHouse n’est pas une base de données de séries temporelles, mais une entreprise de base de données orientée colonnes
    Cela dit, les formulations autour des LLM paraissent quand même un peu maladroites. Chaque fois qu’une entreprise de DB mentionne les LLM, cela sonne légèrement poseur
  • Comme dans l’analogie « Berkshire Hathaway était à l’origine une entreprise textile, et c’est maintenant une holding diversifiée », les entreprises ne cessent de s’étendre et d’évoluer
    ClickHouse n’a jamais vraiment été, dans son essence, une base de données de séries temporelles
  • Les modèles de langage peuvent être vus comme une forme de modèle de séries temporelles
    Quand on étudie le NLP, il y a un moment où cette intuition s’impose, et l’éventail d’outils mobilisables devient alors beaucoup plus large
  • Oui, cet article était rédigé du point de vue de Langfuse, pas comme une prise de position de ClickHouse

• L’acquisition de HyperDX l’an dernier par ClickHouse (une partie de ClickStack) et celle de Langfuse maintenant s’emboîtent bien
  La plupart des plateformes d’observability ajoutent aujourd’hui des fonctions d’observation des LLM
  Lien connexe

  • Je serais curieux de savoir quelle plateforme tu utilises et quelles fonctions tu recherches dans une nouvelle plateforme

• J’aimerais poser la question à ceux qui ont utilisé Langfuse avec ClickHouse
  J’ai déjà essayé des outils wrapper pour LLM comme Langchain, LlamaIndex ou Autogen, mais je les ai évités parce qu’ils étaient soit de mauvaise qualité, soit rapidement dépassés
  Langfuse est-il différent de ces outils ?

  • J’ai utilisé Langfuse, et c’est complètement différent de Langchain ou Autogen
    C’est plutôt un outil de logging / tracing de LLM, et la « gestion de prompts » ou les « fonctions d’expérimentation » sont des options annexes
    Les outils mentionnés sont pour la plupart peu utiles et ont de fortes chances de disparaître bientôt
  • Les fonctions d’observability sont utiles en déploiement, mais ces frameworks ne font pas grand-chose en pratique
    Un développeur expérimenté fera mieux de concevoir lui-même une meilleure architecture
  • Notre équipe aime Langfuse pour l’observability basée sur OpenTelemetry
    En revanche, ses fonctions de gestion de prompts sont trop simples, ce qui est un peu décevant

• Cette acquisition ne semble pas être simplement une mode IA, mais faire partie d’un mouvement de consolidation chez les fournisseurs de données
  Snowflake a acquis Observe, AWS a facilité l’intégration des logs CloudWatch dans un catalogue Iceberg, et Azure tente quelque chose de similaire avec Fabric
  La frontière entre analyse de données et observability devient de plus en plus floue

• La migration douloureuse de ClickHouse v2 vers v3 prend maintenant tout son sens
  Guide de mise à niveau

  • Mais ce changement était prévu depuis un an, et n’a rien à voir avec cette acquisition

• En tant que fan de ClickHouse, je pense que le domaine de l’évaluation d’agents (agent eval) est l’un de ses points forts
  Cette acquisition ressemble à une stratégie visant à approfondir sa présence sur un marché où ses propres produits fonctionnent bien, et à renforcer son intégration verticale

  • Tu parles peut-être de ça ? Tracing des agents OpenAI dans ClickStack

• Langfuse vient de la promotion YC 23, et le fait qu’il ait été acquis aussi vite est impressionnant

  • Comme le montant de l’acquisition n’a pas été dévoilé, on ne sait pas s’il faut féliciter ou compatir
    Il est très possible qu’ils aient brûlé l’intégralité des 4 millions de dollars levés en seed en 2023, et que ce soit une fire sale
  • Tous les indicateurs étant relatifs, il n’est pas certain que ce soit forcément un bon deal

• (Bravo à l’équipe !) On a l’impression qu’en ce moment, quelqu’un se fait acquérir chaque jour
  Que se passe-t-il donc dans l’environnement macroéconomique ?

  • (Transmission des remerciements)

• Peut-être que ClickHouse en profitera pour résoudre enfin le caractère abscons de la documentation de Langfuse