Tag: Supercomputing

  • Succesvolle test: 1,2 Tbit/s datatransfer om langeafstandsnetwerk klaar te maken voor AI en supercomputing

    Succesvolle test: 1,2 Tbit/s datatransfer om langeafstandsnetwerk klaar te maken voor AI en supercomputing

    CSC, SURF en Nokia hebben met succes een hogecapaciteits- en quantumveilige glasvezelverbinding getest waarbij een snelheid van meer dan 1,2 terabit per seconde werd gehaald tussen Amsterdam en Kajaani (Finland) – een afstand van ruim 3.500 kilometer. De test laat de mogelijkheden zien van ultrasnelle, grensoverschrijdende connectiviteit voor onderzoeksdata.

    Er werden tests uitgevoerd over verschillende routes, waaronder de langste route van 4.700 km via Noorwegen, met een capaciteit van 1 Tbit/s. Om dit in perspectief te plaatsen: 1 Tbit/s is genoeg om 200.000 full HD-films (bij 5 Mbit/s elk) tegelijkertijd te streamen.

    Deze resultaten zijn bijzonder veelbelovend nu de onderzoekswereld zich voorbereidt op het online komen van supercomputers en AI-fabrieken – waar betrouwbare, schaalbare en veilige verbindingen cruciaal zullen zijn voor het ondersteunen van enkele van ’s werelds grootste datasets en meest veeleisende werklasten.

    De test maakte gebruik van een combinatie van echte onderzoeksgegevens en synthetische gegevens, die rechtstreeks van schijf naar schijf werden overgebracht – van SURF’s faciliteit in Amsterdam naar het datacenter van CSC in Kajaani – via vijf bestaande onderzoeks- en onderwijsnetwerken: SURF (Nederland), NORDUnet (Nordic backbone), Sunet (Zweden), SIKT (Noorwegen) en Funet (het netwerk van CSC in Finland).

    De netwerkoplossing was gebaseerd op Nokia’s IP/MPLS-routing en quantumveilige optische netwerktechnologie. Nokia’s IP-technologie demonstreerde met succes Flexible Ethernet (FlexE) om “elephant flows”, of zeer grote, continue datastromen, te verwerken, terwijl de hogecapaciteits optische transporttechnologie in staat bleek enorme datasets van HPC’s over lange afstanden te verplaatsen.

    Afstand tussen supercomputercentra geen obstakel

    Met de exponentiële groei van onderzoeksdata, vooral voor het trainen van grootschalige AI-modellen, is de behoefte aan veerkrachtige, hoogwaardige en veilige connectiviteit belangrijker dan ooit. Deze test bevestigt dat multi-domein datatransfers met hoge capaciteit via Europese onderzoeksnetwerken zowel haalbaar als toekomstbestendig zijn. Het testen van een operationele netwerkverbinding over lange afstanden biedt unieke inzichten op in het transport en de opslag van grote hoeveelheden data. Zulke testen zijn cruciaal om de infrastructuur voor data-intensief onderzoek te verbeteren.

    “We ontwerpen onderzoeksnetwerken met toekomstige behoeften in gedachten,” zegt Jani Myyry, Senior Network Specialist bij CSC. “Het datacenter van CSC in Kajaani huisvest nu al de pan-Europese LUMI-supercomputer, en met de komst van de LUMI-AI-supercomputer en de AI Factory zijn betrouwbare en schaalbare dataverbindingen door heel Europa essentieel. Ondanks de aanzienlijke geografische afstand vormt dit geen belemmering voor dataverkeer.”

    Klaar om de volgende stap te zetten in het verbinden van Europese supercomputers

    “Als SURF zijn we klaar om de volgende stap te zetten in het op elkaar afstemmen van Europese supercomputers,” zegt Arno Bakker, Senior Network Specialist bij SURF. “Deze inspanningen bieden toekomstperspectieven voor het trainen van gefedereerde LLM als OpenEuroLLM op LUMI en Snellius, of voor een onderzoeker om op LUMI te rekenen met zeer grote datasets die gehost worden bij SURF, zoals de KNMI (Koninklijk Nederlands Meteorologisch Instituut) datasets.”

    “Deze test was niet mogelijk zonder de ondersteuning van NIKHEF, het Nederlandse nationale instituut voor subatomaire fysica. Hun ervaring in het afhandelen van enorme hoeveelheden natuurkundige meetgegevens en beschikbare hardware zorgt ervoor dat dit soort testen succesvol gedaan kunnen worden. Daarnaast geeft Bakker aan dat we onze Scandinavische partners erg dankbaar zijn voor hun hulp bij het opzetten van deze testverbinding. Dit is opnieuw een voorbeeld van de voortdurende goede samenwerking tussen NREN’s om de best mogelijke internationale infrastructuur voor onderzoek en onderwijs te creëren.”

    “Baanbrekende testen zoals deze laten zien hoe geavanceerde netwerken van fundamenteel belang zijn voor het ontsluiten van het volledige potentieel van AI en high-performance computing,” zegt Mikhail Lenko,Customer Solutions Architect voor Nokia. “Deze succesvolle samenwerking met CSC en SURF is een bewijs van de innovatie en het leiderschap van de wetenschappelijke gemeenschap, en van wat er mogelijk is als we samenwerken.”

    “Terwijl het netwerk zich voorbereidt op de volgende golf van supercomputers en AI-fabrieken, zijn wij trots dat we de quantumveilige, hogecapaciteits en veerkrachtige IP/MPLS- en optische infrastructuur leveren die deze systemen mogelijk maakt. We kijken ernaar uit om onze steun aan wereldwijde onderzoeks- en onderwijsnetwerken voort te zetten, hen te helpen met vertrouwen op te schalen en de volgende generatie ontdekkingen en innovaties te stimuleren.”

  • Internationale samenwerking op SuperComputing24: NetherLight/SURF neemt deel aan door NICT geleid experiment om hogesnelheidsgegevensinnovaties te bevorderen

    Internationale samenwerking op SuperComputing24: NetherLight/SURF neemt deel aan door NICT geleid experiment om hogesnelheidsgegevensinnovaties te bevorderen

    Tijdens het evenement SuperComputing 2024 (SC24) in Atlanta leidde het Japanse National Institute of Information and Communications Technology(NICT) een ambitieus experiment met behulp van een experimenteel netwerk op wereldschaal. Dit netwerk, dat tot stand kwam door samenwerking met 19 internationale partners, verbond Tokio en Atlanta met 10 snelle 100 Gbps paden, waarmee een totale capaciteit van 800 Gbps werd bereikt. Het project liet baanbrekende demonstraties zien van gegevensoverdracht met hoge snelheid, anonieme communicatie en innovatief gegevensbeheer.

    Een opmerkelijk hoogtepunt was een experiment met gegevensoverdracht dat 466 Gbps bereikte, en een bekroonde anonieme communicatiedemonstratie door de Universiteit van Osaka bereikte 588 Gbps terwijl de privacy gewaarborgd bleef.

    NetherLight, het Global Exchange Point (GXP) van SURF, speelde een cruciale rol bij het faciliteren van deze complexe experimenten. Andere belangrijke bijdragers waren onderzoeks- en onderwijsnetwerken en GXP’s van over de hele wereld, die de collectieve inspanning lieten zien die nodig is om een dergelijke innovatie tot stand te brengen.

    Dit NICT-experiment op SC24 benadrukt het belang van internationale samenwerking en partnerschappen in wereldwijde onderzoeks- en onderwijsnetwerken. Door samen te werken in dit soort experimenten kunnen we gezamenlijk het potentieel laten zien en beoordelen voor transformatieve technologieën in gegevensverwerking en communicatie, die essentieel zijn voor toekomstige wetenschappelijke vooruitgang.

    Voor meer details, afbeeldingen en grafieken, en informatie over de partijen die aan dit experiment hebben bijgedragen, kun je hier het volledige persbericht van het NICT lezen.

  • SC24: Gedistribueerd hybride kwantumrekenen met SURF en NetherLight

    SC24: Gedistribueerd hybride kwantumrekenen met SURF en NetherLight

    Tijdens SuperComputing 2024 (SC24) in Atlanta toonde een internationale samenwerking een baanbrekende demonstratie van gedistribueerde hybride kwantumcomputing beveiligd door geavanceerde post-kwantum cryptografie (PQC) en kwantum sleuteldistributie (QKD). Deze wereldwijde inspanning bracht partners uit Europa en de VS samen en liet zien hoe kwantum- en klassieke computersystemen kunnen worden geïntegreerd en beveiligd op wereldschaal.

    De uitdaging en kans van kwantumcomputing

    Quantum computing heeft een enorm potentieel voor het oplossen van complexe problemen op gebieden als chemie, biologie, meteorologie en financiële systemen – uitdagingen die buiten het bereik liggen van klassieke computing. De kosten, gevoeligheid en beperkte beschikbaarheid van de technologie vormen echter obstakels voor een wijdverspreide toepassing. Bovendien vormt quantum computing een bedreiging voor de veiligheid van de huidige encryptiesystemen, wat de inzet voor robuuste, toekomstbestendige oplossingen verhoogt.

    Om deze uitdagingen aan te gaan, was de demonstratie erop gericht om:

    1. Combineer kwantumcomputing met klassieke middelen om de toegankelijkheid en kosteneffectiviteit te verbeteren.

    2. Wereldwijde distributie van deze hybride systemen mogelijk maken voor bredere toegang voor onderzoekers.

    3. Deze systemen en gegevens beschermen tegen bedreigingen in een post-kwantum cryptografische omgeving.

    Internationale samenwerking stimuleert innovatie

    Deze demonstratie was het resultaat van een internationaal samenwerkingsverband tussen Europese organisaties (PSNC, GÉANT, SURF/NetherLight) en Amerikaanse instellingen (Internet2, ESnet, ICAIR/Northwestern University, StarLight). Samen bouwden ze een trans-Atlantisch hybride kwantum-klassiek computernetwerk dat testbeds in Poznan, Polen, en Atlanta, VS, verbindt met behulp van live productie netwerkinfrastructuur.

    SURF en de NetherLight uitwisseling speelden een centrale rol door wereldwijde connectiviteit mogelijk te maken naast andere grote netwerken zoals GÉANT, Internet2 en SCinet. Deze gezamenlijke aanpak maakte gebruik van de expertise en middelen van alle partners om de grenzen te verleggen van wat mogelijk is bij de integratie van kwantum- en klassieke computers.

    Technische doorbraken en veilige gegevensoverdracht

    De demonstratie liet zien:

    – Hybride kwantum-klassieke computerintegratie met Quantum Processing Units (QPU’s), CPU’s en GPU’s.

    – Gegevenstransmissie op hoge snelheid over trans-Atlantische verbindingen beveiligd met PQC algoritmen en QKD encryptie.

    – Geavanceerde beveiligingsmaatregelen, waaronder DWDM-diensten voor versleuteling over lange afstanden en QKD-technologie voor beveiliging van lokale netwerkgegevens.

    Deze opstelling demonstreerde de levensvatbaarheid van een gedistribueerde kwantum-klassieke infrastructuur die gebruikscases voor onderzoek op gebieden als materiaalwetenschap en optimalisatie kan ondersteunen. Door gebruik te maken van bestaande kwantumcomputersystemen met ~100 qubit capaciteit, bevordert het project het doel om “kwantumbruikbaarheid” te bereiken.

    Een model voor toekomstige innovatie

    De SC24 demonstratie onderstreept de kracht van internationale samenwerking om complexe uitdagingen op te lossen en technologische doorbraken te stimuleren. Door het integreren van geavanceerde technologieën en middelen van verschillende wereldwijde partners, effent dit project de weg voor de volgende generatie van veilige, gedistribueerde kwantumcomputerinfrastructuur.

    De deelname van SURF en NetherLight illustreert hun toewijding aan het bevorderen van wetenschap en innovatie door middel van wereldwijde partnerschappen. Samen met andere partners laten ze zien hoe collectieve inspanningen het potentieel van quantum computing voor onderzoek en onderwijs wereldwijd kunnen ontsluiten.

    Het project was te zien op SC24’s Network Research Exhibition, met een live presentatie in het NRE Theatre, waar het transformatieve potentieel van gedistribueerde hybride kwantumcomputers werd getoond.

    Meer informatie en het volledige persbericht vind je hier.