GCRI · Foundry
Calcolo ed edge
Risk analysis needs compute in very different places: a large cloud allocation for a national ensemble, a ministry’s own servers for records that may not leave, a field laptop that keeps a model running when the network fails. This page sets out how compute risk develops, from capacity shortfall and concentration in a few providers to jurisdiction, energy and degraded connectivity, and how cloud, local nodes and edge devices are designed to be scheduled as one capacity.
Calcolo ed edge, agli atti.
Compute and edge: how the risk develops.
Capacità tecnica di cloud, nodi locali e edge. Il dossier che segue illustra come si sviluppa il rischio, che cosa viene misurato, da dove provengono i dati, come sono modellati e chi decide.
La capacità viene meno quando serve
Demand for compute peaks during events, exactly when shared capacity is contested, networks are degraded and power is unstable. Queues lengthen, ensembles shrink and forecasts arrive after the decision window has closed.
Concentrazione
Many institutions rely on a few cloud providers, regions and chip suppliers. An outage, sanction, price change or supply shortage reaches all of them at once, which makes compute concentration a systemic dependency in its own right.
Giurisdizione e ubicazione dei dati
Where data may be processed is set by law and contract. Moving analysis to the data keeps records in place, but constrains which methods can run and can still leave results open to inference about the inputs.
Disconnessione e riconciliazione
Edge nodes keep working offline and reconcile later. Conflicting edits, clock skew and stale models accumulate during an outage, and reconciliation after a long disconnection may need human judgement rather than an automatic merge.
How compute and edge is modelled, measured and tested.
Il modello, le sue ipotesi, i suoi dati e la sua incertezza, nella forma in cui uno scienziato o un ingegnere li verificherebbe. Le strutture seguono metodi pubblicati. I valori rappresentati sono illustrativi, non risultati.
Modello, equazioni e ipotesi
La struttura del modello usata per calcolo ed edge, le ipotesi che formula e come ciascuna viene verificata.
Ri = f(Hi, Ei, Vi, Ci)pericolo, esposizione, vulnerabilità e capacità di rispostaEAL = ∑k pk · Lkover events k with annual probability pkxt+1 = A xt + B ut + εtA carries the couplings, u the shock, ε the error| Ipotesi | Perché è realizzato | Come viene testato |
|---|---|---|
| Pericolo ed esposizione sono indipendenti all'interno di un evento | Mantiene trattabile l'integrale delle perdite | Confrontare con un adattamento di copula su registrazioni congiunte |
| Gli accoppiamenti sono lineari vicino al punto di funzionamento | Consente agli shock di propagarsi attraverso A | Perturbare oltre l'intervallo lineare e confrontare |
| Le curve di vulnerabilità si trasferiscono da un luogo all'altro | Le curve locali sono raramente disponibili | Validare rispetto alle perdite osservate, dove esistono |
- Input
- set di dati versionati con provenienza
- Risultati
- distribuzioni, mai valori singoli
- Codice
- pubblicato con la scheda del modello e i test
- Riproduzione
- stessi dati, codice, ambiente e seed
Compute is designed to serve each domain’s heaviest models.
- WaterIn practiceFlood models need high-resolution runs.What a reader can checkRun times
- EnergiaIn praticaLe simulazioni di rete elettrica crescono con le dimensioni della rete.Che cosa può verificare un lettoreUso delle risorse
- BiodiversitàIn praticaL'elaborazione dei dati di osservazione della Terra richiede grandi capacità di archiviazione.Che cosa può verificare un lettoreStoccaggio e trasferimento
Compute readiness is designed for the Foundry Build and Readiness series. Energy efficiency is reported with ISO/IEC 30134 indicators; no hardware specifications are summed into performance claims.
- Workload profiles.
- Misurazioni dell'efficienza.
Cosa viene misurato e con quale accuratezza.
Ogni indicatore riporta la sua unità, la sua cadenza, il tipo di fonte su cui si basa e l'etichetta di evidenza che un valore riporterebbe. Non sono mostrati valori: un programma li fornisce sotto la propria autorità.
| Indicatore | Unità | Cadenza | Tipo di fonte | Etichetta |
|---|---|---|---|---|
| Queue wait time | minuti, mediana e coda | giornaliero | Contabilità dello scheduler | OSSERVATO |
| Disponibilità del servizio | proporzione del tempo programmato | mensile | Monitoraggio della disponibilità | OSSERVATO |
| Workloads placed outside permitted jurisdiction | conteggio | per placement | Placement policy logs | OSSERVATO |
| Edge reconciliation conflicts | numero per risincronizzazione | per evento | Registri di sincronizzazione | OSSERVATO |
| Consumo energetico per carico di lavoro | kilowatt-hours | per esecuzione | Telemetria di potenza o stime dei fornitori | STIMATO |
| Carbon intensity of electricity used | grams CO2 equivalent per kilowatt-hour | orario | Dati dei gestori di rete e dei fornitori | STIMATO |
| Capacità offerta rispetto alla capacità assegnata | ore di core o ore di GPU | mensile | Offer and allocation register | DICHIARATO |
| Recovery time in failover exercises | minuti | per esercitazione | Registri delle esercitazioni | OSSERVATO |
Da dove provengono le evidenze.
Set di dati pubblici e registri istituzionali specifici, ciascuno con la sua classe di licenza. Le fonti soggette ad accordo sono utilizzate solo alle relative condizioni e mai ripubblicate.
| Fonte | Cosa fornisce | Classe di licenza |
|---|---|---|
| Classifiche TOP500 e Green500 | Prestazioni ed efficienza energetica pubblicate di grandi sistemi | Gratuito, alle condizioni del progetto |
| Dati sull'elettricità di Ember | Mix di generazione e intensità di carbonio dell'elettricità per paese | CC BY 4.0 |
| Copernicus Data Space Ecosystem | Earth observation archives with processing next to the data | Gratuito e aperto, attribuzione |
| NASA Earthdata Cloud | Archivi di scienze della Terra in archiviazione a oggetti nel cloud per l'analisi nella regione | Free and open, NASA data policy |
| Registri delle regioni e dello stato del cloud pubblico | Region locations, availability history and incident reports | Condizioni del fornitore |
| Registri dei rilasci e delle dismissioni di Kubernetes | Version support windows and API removals that affect workload portability | CC BY 4.0 |
Chi decide, e a cosa servono le evidenze.
Foundry prepara le evidenze. Le decisioni riportate di seguito sono prese dalle autorità indicate, secondo le rispettive norme, e mai dalla piattaforma.
| Chi decide | La domanda | Evidenze fornite da questa pagina |
|---|---|---|
| Titolari dei dati e autorità per la protezione dei dati | Where data may be processed, and whether results may leave | Placement logs, the jurisdiction of each tier, federated execution records |
| Responsabili di progetto | How to prioritise workloads within an allocation during an event | Stato della coda, allocazione residua, scadenze |
| Contributori e operatori delle infrastrutture | What capacity to offer and on what terms | Registro delle offerte, utilizzo, energia e carico di supporto |
| Ministeri responsabili delle infrastrutture digitali | In che misura l' analisi del rischio nazionale dipende da fornitori esteri o concentrati | Mappa delle dipendenze da fornitori e regioni; piani di uscita e di failover |
Output prodotti da questo argomento
- Politiche di collocamento per classe di dati, giurisdizione, urgenza e costo
- Workload packages portable across cloud, private and edge tiers
- Failover and degraded-operation runbooks with exercise records
- Register of capacity offered, allocated and used, kept apart
What computing engineers and data owners ask.
- Dove è consentito, per legge e per contratto, elaborare i dati?
- Quali carichi di lavoro richiedono capacità di picco e quali una disponibilità stabile e locale?
- How does work continue when connectivity is degraded or lost?
- Come si distingue la capacità offerta da quella effettivamente assegnata e utilizzata?
One control plane across three tiers.
NXS-COR (compute, nodes and runtimes) is designed as the compute control plane across cloud, private infrastructure and edge. Workloads are packaged with their dependencies so they can run on any tier that the project’s policy allows, and the scheduler places them according to data location, sensitivity, cost and urgency. Where data cannot move, the analysis is designed to run where the data is held and only permitted results leave.
Edge capacity matters most when it is hardest to provide: during the events risk work is about. Field kits, observatory nodes managed through NXS-OPS (instruments, sensors and calibration) and offline operation of NXS-NST (civilian common operating picture) are designed so that coordination continues through outages, synchronising when connectivity returns. Energy use, cooling and hardware supply are part of the engineering, and the platform’s computing questions connect to the energy and data-centre analysis at Data and Compute.
What is engineered, and what remains hard.
Compute to data
L'esecuzione federata mantiene i dati sensibili dove si trovano e sposta il codice e i risultati consentiti.
Funzionamento degradato
I nodi edge proseguono in locale e si riconciliano in seguito, con i conflitti segnalati anziché sovrascritti in silenzio.
Offerta non significa assegnazione
Contributed infrastructure is recorded as an offer until it is separately allocated.
Limiti: l'analisi federata limita i metodi eseguibili, i dispositivi edge hanno poca capacità e la riconciliazione dopo una lunga disconnessione può richiedere un giudizio umano. Nessuna specifica hardware viene sommata in dichiarazioni di prestazioni.
Come viene studiato, e cosa i metodi non possono dire.
- 01Calcolo ad alte prestazioni, cloud ed edgePianificazione degli insiemi di simulazioni tra livelli · Esecuzione federata accanto ai datiApplicato qui
- 02Ingegneria dei sistemiInventario canonico dei sistemi · Interfacce definite dal contratto · Requisiti ricondotti alle evidenzeApplicato qui
- 03Ingegneria del software e dei sistemi critici per la sicurezzaControlli delle politiche a sicurezza intrinseca · Provenienza delle build e distinte dei materiali · Casi di garanziaApplicato qui
- 04Ingegneria, interoperabilità e gestione responsabile dei datiConvalida al confine di acquisizione · Estrazioni di dati congelate per prodotti riproducibiliApplicato qui
- 05Sistemi informativi geospazialiCataloghi di immagini tramite STAC · Sovrapposizioni dell'esposizione con aggregazione dichiarataApplicato qui
Where this page’s references lead.
Gli organismi e i documenti alla luce dei quali si legge questa pagina. Stato ed edizioni cambiano; ogni link porta all'organismo emittente.
Domande e risposte.
Perché portare l'analisi ai dati anziché il contrario?
What happens to edge work during an outage?
La mia istituzione può mettere a disposizione dei server?
Il consumo energetico è rendicontato?
Does membership include compute?
È aperta qualche assegnazione di calcolo?
Contribuisci con evidenze da questa pagina.
Reports è la pubblicazione trimestrale del consorzio. Ciò che sai su questo tema può diventare un'evidenza, un caso o una correzione nella prossima edizione, attribuita a te e pubblicata con licenza CC BY 4.0 se si tratta di un tuo lavoro.
- E-mailPortale GW-GCRIInvialo da questa paginaUn'evidenza, una correzione, un caso, un metodo, una revisione, una traduzione o un contributo a un profilo. Arriva etichettata con questa pagina, così la riceve la persona redattrice che ne è responsabile.
- ZenodoOpen depositDeposit it and submit to the communityPublish your own record on Zenodo with your ORCID iD, then submit it to the Reports community there. Curators review it; the DOI stays yours.
- RapportiGCRIVedi tutti i modi per contribuireI tipi di contributo, come viene revisionato ciascuno, il riconoscimento che ricevi, la licenza e ciò che non è mai accettato.
Non inviare mai dati personali, dettagli su infrastrutture sensibili o qualsiasi cosa che tu non abbia il diritto di condividere. Un contributo viene sottoposto a revisione prima dell'uso; inviarlo non conferisce diritti di paternità né editoriali, e la sponsorizzazione non compra mai un risultato.
Porta un metodo, un set di dati o una domanda.
Informazioni e richieste sono aperte oggi. Una richiesta riceve un riferimento e indica il passo successivo; candidature, pagamenti, assegnazioni di calcolo e registrazioni si aprono solo quando esistono il team, le condizioni e la capacità di revisione.
Documenti legali.
Le mappe, i dati e le cifre di questo sito sono mostrati a titolo di contesto e di informazione generale. Non costituiscono consigli, previsioni né allerte; i limiti dell'informazione sono esposti nelle Dichiarazioni di esclusione di responsabilità e nelle Note sui dati.