Globus faciliteert researchteams via zijn globale datanetwerk
Onderzoeks- en HPC-omgevingen staan voor een fundamentele architectuuruitdaging: het veilig en efficiënt verplaatsen, delen en verwerken van data over institutionele grenzen heen, zonder dat onderzoekers of IT-teams worden belast met complexe infrastructuuruitdagingen. Globus, een non-profitplatform voortgekomen uit de ‘University of Chicago’, adresseert dit met een hybride ‘Platform-as-a-Service’ (PaaS) dat inmiddels dagelijks petabytes aan onderzoeksdata verwerkt. Over de mogelijkheden van Globus werden we tijdens de 66e IT Press Tour in SiIlicon Valley bijgepraat door Rachana Ananthakrishnan (foto), een Executive Director bij de ‘University of Chicago’.
Rachana: “De kern van Globus is een hybride architectuurmodel. In tegenstelling tot gecentraliseerde cloudoplossingen, claimt Globus geen eigendom over data of infrastructuur. Instellingen behouden volledige controle over hun opslag- en compute-resources, terwijl Globus daarover een service laag aanbiedt voor orkestratie, beveiliging en automatisering. Data verplaatst zich rechtstreeks tussen eindpunten over high-performance onderzoeksnetwerken, terwijl Globus zich beperkt tot de control plane voor planning, foutafhandeling en optimalisatie.”
Lokale Globus Connect-agents vormen de interface met bestaande infrastructuur. Zij ondersteunen uiteenlopende opslagtypen, waaronder POSIX-filesystems, object storage en tape-archieven, dit alles via een uitbreidbaar connector-model. Voor rekenwerk biedt Globus Compute een function-as-a-service-benadering voor on-prem HPC- en cloudomgevingen, met ondersteuning voor gangbare schedulers zoals Slurm en Kubernetes. Dit maakt het mogelijk om compute-taken programmatisch te distribueren zonder directe toegang tot de onderliggende systemen te vereisen
Een essentieel onderdeel voor IT-architecten is het beveiligingsmodel van Globus. Het platform gebruikt OAuth 2.0 en OpenID Connect om authenticatie te federeren over duizenden identiteitsproviders. Onderzoekers gebruiken hun bestaande instellingsaccounts, terwijl autorisatie fijnmazig wordt afgedwongen op dataset-, directory- of API-niveau. Deze security omgeving is ontworpen volgens een gedeeld verantwoordelijkheidsmodel, waarbij Globus platformcontroles implementeert en instellingen zelf verantwoordelijk blijven voor de endpointbeveiliging en het lokale beleid
Functioneel biedt Globus meerdere modulaire functies. Managed Transfer levert betrouwbare ‘fire-and-forget’ datatransfers met automatische retries, checksums en voortgangsmonitoring. Data Sharing maakt het mogelijk om bestaande opslag veilig te delen met externe partijen, zonder dat data gekopieerd of lokale accounts aangemaakt hoeven te worden. Aanvullend bieden Globus Search, Flows en Unified Access respectievelijk metadata-indexering, workflow-automatisering en abstractie van heterogene opslag.
Rachana:”Voor beheerders betekent Globus een referentiearchitectuur voor gedistribueerde research computing op schaal. Het platform laat zien hoe federatieve authenticatie, decentrale dataflows en SaaS-orkestratie gecombineerd kunnen worden tot een robuuste en uitbreidbare oplossing voor moderne onderzoeksomgevingen.”
Er wordt gebruik gemaakt van abonnementen die gekoppeld zijn aan functionaliteiten. Daarmee is maatwerk mogelijk. De kosten van het abonnement hangen samen met het budget dat bij een project beschikbaar is. Commercieel gebruik vereist altijd een betaald abonnement.
Meer over As a Service
Over Hans Steeman
