november 19, 2026

De Uitdaging: Nauwkeurige Gebruiksmeting op Grote Schaal
Atlassian stond voor de uitdaging om een schaalbaar, betrouwbaar en kostenefficiënt factureringssysteem te bouwen voor zijn Forge-platform. Met een pay-as-you-go model is het accuraat meten van het verbruik van duizenden apps cruciaal. De door hen ontwikkelde Forge Billing Architecture biedt een fascinerende casestudy voor elke organisatie die worstelt met cloud financial management. Het systeem moest niet alleen enorme hoeveelheden gebruiks-events kunnen verwerken, maar ook garanderen dat geen enkel event verloren gaat of dubbel wordt geteld. Dit is een fundamentele vereiste voor een betrouwbaar FinOps-raamwerk, waarbij financiële nauwkeurigheid en schaalbaarheid hand in hand moeten gaan. De keuze voor een volledig serverless architectuur op AWS vormt de ruggengraat van hun succesvolle oplossing.

Luister naar dit artikel:

De Architectuur: Een Serverless Pijplijn voor Dataverwerking
De kern van de oplossing is een slim ontworpen, asynchrone dataverwerkingspijplijn. Gebruiks-events worden eerst ontvangen door een API Gateway, die ze doorstuurt naar een Lambda-functie voor validatie. Om het systeem robuust en schaalbaar te maken, worden de gevalideerde events vervolgens in een SQS-wachtrij (Simple Queue Service) geplaatst. Dit ontkoppelt de data-ingestie van de verwerking, vangt piekbelastingen op en voorkomt dataverlies met behulp van een Dead-Letter Queue (DLQ). Een cruciale factor voor financiële integriteit is het gebruik van een idempotency-sleutel bij elk event. Dit mechanisme zorgt ervoor dat, zelfs als een event per ongeluk meerdere keren wordt aangeboden, het slechts één keer wordt verwerkt, waardoor dubbele facturatie wordt uitgesloten.
Aggregatie en Opslag in de Forge Billing Architecture
Na de wachtrij volgt de aggregatiefase. Een tweede Lambda-functie leest de events in batches van de SQS-wachtrij, aggregeert de data in-memory om het aantal schrijfacties te minimaliseren, en schrijft de geconsolideerde gebruikstotalen naar een DynamoDB-tabel. De keuze voor DynamoDB is strategisch: deze NoSQL-database biedt de lage latentie en schaalbaarheid die nodig zijn om de totalen per klant of app in bijna real-time bij te werken. Deze aanpak is niet alleen performant, maar ook kostenefficiënt. In plaats van elk individueel event op te slaan in de dure 'hot' database, worden alleen de geaggregeerde resultaten bewaard. Alle ruwe data wordt via DynamoDB Streams en Kinesis Firehose op een kosteneffectieve manier gestreamd naar Amazon S3 voor lange-termijn opslag.
Van Data naar Inzicht: Facturatie en FinOps Analyse
Het proces culmineert in de facturatiecyclus. Via een geplande taak met Amazon EventBridge en AWS Step Functions wordt aan het einde van de periode een Lambda-functie geactiveerd. Deze functie leest de finale, geaggregeerde data uit DynamoDB en genereert de facturen. Hiermee is de operationele cirkel rond. De waarde van de architectuur reikt echter verder. De data die in S3 is gearchiveerd, is een goudmijn voor FinOps-analyse. Met tools als Amazon Athena kunnen teams ad-hoc query's uitvoeren op historische gebruiksdata. Dit maakt diepgaande kosteananalyse, het identificeren van trends, het opsporen van anomaliën en het verbeteren van forecasting-modellen mogelijk, waarmee de FinOps-levenscyclus van meten naar optimaliseren volledig wordt ondersteund.