Über Bitvavo
Bitvavo, eine der führenden Kryptowährungs-Handelsplattformen in Europa, bedient über 1,5 Millionen Nutzer mit einer sicheren und intuitiven Benutzererfahrung. Als ihre Kundenbasis wuchs, erweiterte sich ihre Confluent Cloud Infrastruktur, um Tausende von Kafka-Themen und -Partitionen zu bewältigen.
Das Skalieren bedeutete nicht nur, mehr Daten zu verarbeiten – es bedeutete, komplexe Betriebs und regulatorische Herausforderungen zu navigieren. Conduktor ermöglichte es Bitvavo, Arbeitsabläufe zu optimieren, die Aufsicht zu verbessern und strenge Sicherheitsstandards zu erfüllen. Mit der Unterstützung von Conduktor konnte Bitvavo seine Streaming-Infrastruktur effizient skalieren und blieb dabei den sich entwickelnden regulatorischen Anforderungen immer einen Schritt voraus.
25
Clusters
Challenges in Kafka adoption
In order to maintain its competitive edge, Virgin embarked on an ambitious initiative to modernize and replatform its legacy systems, with Kafka at the core of its efforts. However, the team soon encountered some challenges, including:
Limited visibility: Teams lacked intuitive tools to effectively visualize and troubleshoot Kafka data flows.
Complex user access: Provisioning users onto Confluent Cloud and controlling access for diverse user groups, from developers to testers, was time consuming and inefficient.
Fragmented operations: Without centralized tools, collaboration and operational efficiency were hindered.
To address these issues, Virgin Australia implemented Conduktor Desktop in 2022, empowering users to monitor, manage, and maintain their Kafka data flows. Teams could more efficiently diagnose and debug issues, accelerate onboarding for new users and projects, and even increase developer productivity and autonomy by reducing reliance on central platform teams.
Herausforderung
Die Ingenieure von Bitvavo kannten die hohen Einsätze: Kafka diente als Rückgrat ihrer Plattform, die den Echtzeithandels, Kundeninteraktionen und kritische Datenaustausche antrieb. Als die Plattform wuchs und das Volumen der Streaming-Daten zunahm, traten mehrere Herausforderungen auf:
Eingeschränkte Sichtbarkeit: Entwickler hatten oft Schwierigkeiten, bestehende Kafka-Themen zu finden, was zu Ineffizienzen und unnötiger Datenverdopplung führte.
Compliance-Risiken: Es gab ständige Bedenken und potenzielle Risiken, dass sensible Informationen auf nicht konforme Weise durch den Cluster fließen könnten, und ohne robuste Kontrollen wurde die Einhaltung der GDPR zu einer gewaltigen Aufgabe.
Steigende regulatorische Anforderungen: Die Einführung der DORA und MiCA-Regulierungen fügte neue Ebenen von operativen und Sicherheitsanforderungen hinzu. Diese Rahmenbedingungen verlangten strenge Maßnahmen für Resilienz, Sicherheit und Compliance, mit schweren finanziellen Strafen für Verstöße..
Für Bitvavo war es wichtig, diese Herausforderungen anzugehen - es war mehr als eine technische Notwendigkeit; es war entscheidend, um die betriebliche Resilienz aufrechtzuerhalten und ihr Geschäft in einem zunehmend regulierten Markt zu schützen.
Moving to Conduktor Scale: more power, less complexity
To address these new challenges and standardize their Kafka user experience, Virgin Australia upgraded to Conduktor Scale at the end of 2024.
"Mit der Plattform und den Self-Service-Funktionen von Conduktor haben wir endlich die Governance und Kontrolle, die wir benötigen"
Lionel Segarra - Software-Ingenieur bei Air France
With Scale, Virgin Australia teams could now:
Centralize deployment with automatic user updates, eliminating the need for individualized software installations.
Simplify user management, thereby facilitating operations like onboarding and access provisioning.
Comprehensive visibility into Kafka flows through powerful, built-in tools or via integrations with third-party observability solutions.
Prevent issues from impacting downstream applications by rapidly detecting, investigating, and debugging issues.
Accelerate development cycles and enhance data quality by enabling testers and developers to efficiently access and validate Kafka data during projects.
The Results: Efficiency and Adoption Soar
The use of Conduktor Scale has delivered quantifiable improvements, including:
Increased efficiency. By simplifying workflows, the team collectively saved significant amounts of time—roughly 48 hours per week for testers and 20 hours per week for developers.
Widespread adoption. A diverse range of users, including testers and even less technical roles such as analysts, now actively use Kafka for their projects.
Shortened investigations and resolutions. Teams can use advanced tools and visualizations to better understand and troubleshoot their Kafka environment.
Beyond these measurable gains, Scot also highlighted the “unquantifiable” value of Conduktor Scale. “Being able to share data seamlessly and collaborate across teams without friction has saved countless hours,” Scot explains. “It’s improved the quality of questions and insights we receive, which boosts overall productivity in ways that are hard to quantify.”
“With Conduktor Scale, it’s so much easier for developers, analysts, and testers to get a handle on the data they need, how it all flows, and resolve issues quickly,” Scot concludes. “It’s been a game changer for efficiency and adoption.”
Skalierung für die Zukunft
Mit etablierten Compliance-Rahmenbedingungen und gelösten betrieblichen Herausforderungen konzentriert sich Bitvavo nun darauf, seine Infrastruktur zukunftssicher zu machen. Während ihre Kafka-Themen und -Partitionen weiterhin expandieren, gewährleistet Conduktors nahtlose Integration mit ihrem Kubernetes (Helm)-Deployment eine robuste Grundlage sowohl für Skalierbarkeit als auch für regulatorische Compliance.
Eine kritische Priorität für Bitvavo ist die Erfüllung von DORAs strengen Failover-Anforderungen. Aktuelle manuelle Prozesse während Vorfällen können zu verlängerten Ausfallzeiten führen – ein Risiko, das in einem Markt, in dem Vertrauen und Betriebszeit entscheidend sind, nicht zu akzeptieren ist. Conduktors automatisches Clusterwechsel und Failover Funktionen lösen dieses Problem, indem sie eine nahezu sofortige Wiederherstellung und erheblich schnellere Wiederherstellungsziele (RTO) ermöglichen.
Wenn Bitvavo seine nächste Wachstumsphase betritt, werden Conduktors Lösungen weiterhin die Zuverlässigkeit, Skalierbarkeit und Compliance-Ausrichtung bieten, die für die Wahrung der Führungsposition im Kryptowährungsmarkt und das fortwährende Vertrauen von Benutzern und Regulierungsbehörden unerlässlich sind.
Die Niederlande, Europa
201-500
