Ontwikkeling van software voor dataverwerking

Diaceutics is een wereldwijde leider op het gebied van diagnostische data-analyse en diensten. Het bedrijf, met hoofdkantoor in het Verenigd Koninkrijk, is al meer dan tien jaar actief op de markt. Diaceutics heeft de grootste verzameling diagnostische testgegevens opgebouwd, met een groeiend netwerk van meer dan 2500 laboratoria in 51 landen.

Begin 2020 stelde Diaceutics zich ten doel om ’s werelds eerste diagnostische testoplossing te ontwikkelen die alle belanghebbenden in precisiegeneeskunde (farmaceutische bedrijven, laboratoria, diagnostische ondernemingen, enz.) veilige toegang tot diagnostische testgegevens zou bieden en een netwerkomgeving zou creëren voor effectieve samenwerking en vooruitgang op dit gebied.

Ze bundelden de krachten van verschillende technologiebedrijven om software voor gegevensverwerking, een ETL-pijplijn en diensten te ontwikkelen en het DXRX-platform voor precisiegeneeskunde binnen een jaar te lanceren.

De DXRX diagnostische netwerkoplossing is een grootschalig cloudgebaseerd platform met een focus op microservices, een veelzijdige webinterface en diverse functionaliteiten. Het bestaat uit verschillende modules en biedt meer dan 50 diensten voor eindgebruikers.

Het netwerk verbindt verschillende belanghebbenden in precisiegeneeskunde (laboratoria, farmaceutische bedrijven, onderzoekers, diagnostische professionals, enz.) in één Marketplace — een dynamische omgeving waar klanten profielen kunnen aanmaken, projecten kunnen verkennen, nieuwe samenwerkingen kunnen starten of bestaande kunnen joinen en samen kunnen werken aan het oplossen van wereldwijde uitdagingen in diagnostische testen.

Belangrijk is dat het netwerk klanten veilige toegang biedt tot kwalitatieve diagnostische testgegevens en tools om deze te manipuleren en inzichten eruit te halen. Digiteum-engineers namen het voortouw bij de ontwikkeling van verschillende data-analyse-, visualisatie- en rapportagetools zoals Lab Mapping en Testing Dashboard.

Het project had een strakke deadline en werd op tijd en binnen budget opgeleverd door de gezamenlijke inspanningen van verschillende technologiebedrijven. Als integraal onderdeel van dit team namen Digiteum-engineers deel aan en werken zij nog steeds aan de frontend (Angular8) en Java-gebaseerde backendontwikkeling, integraties en configuratie van externe systemen. QA-lead en engineers voeren volledige tests van het platform uit en werken aan een strategie om dit proces volledig te automatiseren.

De DXRX-netwerkoplossing is gebaseerd op meerdere AWS-services voor big data-analyse en -beheer en omvat een verscheidenheid aan technologieën (ETL, data-engineering), frameworks (AngularJS, Spring) en datawetenschappelijke tools en methoden (machine learning).

De kern van het systeem is een complexe ETL-pijplijn. Deze is ontworpen en gebouwd om ongestructureerde diagnostische gegevens in verschillende formaten (testresultaten, patiëntgegevens, enz.) te verwerken en te beheren, zodat deze gegevens kunnen worden gesorteerd, opgeschoond, geanonimiseerd, gestructureerd en getransformeerd tot waardevolle inzichten voor klanten.

Met solide ervaring in het bouwen van gegevensverwerkingspijplijnen zorgen Digiteum-engineers voor automatisering en ondersteuning van de bestaande ETL-pijplijn, voegen gegevens toe en verbeteren de workflow volgens de behoeften en vereisten van datawetenschappers. DevOps-engineers aan de kant van Digiteum ondersteunen en onderhouden de complexe AWS-infrastructuur met behulp van het Infrastructure as Code-model, optimaliseren de deployment met best practices voor continuous integration (CI) en zorgen ervoor dat het systeem stabiel en foutloos blijft.

Sinds de lancering van het platform in oktober 2020 heeft het verschillende grote farmaceutische en diagnostische bedrijven en tientallen laboratoria verenigd met een gemeenschappelijk doel: het verbeteren van de snelheid en kwaliteit van kankerdiagnostiek. Dit is slechts één van de vele use cases voor deze schaalbare, multifunctionele oplossing.