Skip to content

GCRI · Foundry

Calcolo ed edge

Risk analysis needs compute in very different places: a large cloud allocation for a national ensemble, a ministry’s own servers for records that may not leave, a field laptop that keeps a model running when the network fails. This page sets out how compute risk develops, from capacity shortfall and concentration in a few providers to jurisdiction, energy and degraded connectivity, and how cloud, local nodes and edge devices are designed to be scheduled as one capacity.

02La domanda

Compute and edge: how the risk develops.

Capacità tecnica di cloud, nodi locali e edge. Il dossier che segue illustra come si sviluppa il rischio, che cosa viene misurato, da dove provengono i dati, come sono modellati e chi decide.

Meccanismo

La capacità viene meno quando serve

Demand for compute peaks during events, exactly when shared capacity is contested, networks are degraded and power is unstable. Queues lengthen, ensembles shrink and forecasts arrive after the decision window has closed.

Meccanismo

Concentrazione

Many institutions rely on a few cloud providers, regions and chip suppliers. An outage, sanction, price change or supply shortage reaches all of them at once, which makes compute concentration a systemic dependency in its own right.

Meccanismo

Giurisdizione e ubicazione dei dati

Where data may be processed is set by law and contract. Moving analysis to the data keeps records in place, but constrains which methods can run and can still leave results open to inference about the inputs.

Meccanismo

Disconnessione e riconciliazione

Edge nodes keep working offline and reconcile later. Conflicting edits, clock skew and stale models accumulate during an outage, and reconciliation after a long disconnection may need human judgement rather than an automatic merge.

03Metodi ed evidenze

How compute and edge is modelled, measured and tested.

Il modello, le sue ipotesi, i suoi dati e la sua incertezza, nella forma in cui uno scienziato o un ingegnere li verificherebbe. Le strutture seguono metodi pubblicati. I valori rappresentati sono illustrativi, non risultati.

Modello, equazioni e ipotesi

La struttura del modello usata per calcolo ed edge, le ipotesi che formula e come ciascuna viene verificata.

Rischio dell'elemento iRi = f(Hi, Ei, Vi, Ci)pericolo, esposizione, vulnerabilità e capacità di risposta
Perdita annua attesaEAL = ∑k pk · Lkover events k with annual probability pk
Sistemi accoppiatixt+1 = A xt + B ut + εtA carries the couplings, u the shock, ε the error
IpotesiPerché è realizzatoCome viene testato
Pericolo ed esposizione sono indipendenti all'interno di un eventoMantiene trattabile l'integrale delle perditeConfrontare con un adattamento di copula su registrazioni congiunte
Gli accoppiamenti sono lineari vicino al punto di funzionamentoConsente agli shock di propagarsi attraverso APerturbare oltre l'intervallo lineare e confrontare
Le curve di vulnerabilità si trasferiscono da un luogo all'altroLe curve locali sono raramente disponibiliValidare rispetto alle perdite osservate, dove esistono
Input
set di dati versionati con provenienza
Risultati
distribuzioni, mai valori singoli
Codice
pubblicato con la scheda del modello e i test
Riproduzione
stessi dati, codice, ambiente e seed
Formulazioni standard del rischio e dello spazio degli stati; le ipotesi elencate sono tipiche del metodo, dichiarate per la revisione, non risultati.
FAIR guiding principles · GO FAIR and FORCE11W3C PROV · World Wide Web ConsortiumGuidance on consistent treatment of uncertainties · IPCCCEOS Analysis Ready Data · Committee on Earth Observation Satellites
05Indicatori

Cosa viene misurato e con quale accuratezza.

Ogni indicatore riporta la sua unità, la sua cadenza, il tipo di fonte su cui si basa e l'etichetta di evidenza che un valore riporterebbe. Non sono mostrati valori: un programma li fornisce sotto la propria autorità.

IndicatoreUnitàCadenzaTipo di fonteEtichetta
Queue wait timeminuti, mediana e codagiornalieroContabilità dello schedulerOSSERVATO
Disponibilità del servizioproporzione del tempo programmatomensileMonitoraggio della disponibilitàOSSERVATO
Workloads placed outside permitted jurisdictionconteggioper placementPlacement policy logsOSSERVATO
Edge reconciliation conflictsnumero per risincronizzazioneper eventoRegistri di sincronizzazioneOSSERVATO
Consumo energetico per carico di lavorokilowatt-hoursper esecuzioneTelemetria di potenza o stime dei fornitoriSTIMATO
Carbon intensity of electricity usedgrams CO2 equivalent per kilowatt-hourorarioDati dei gestori di rete e dei fornitoriSTIMATO
Capacità offerta rispetto alla capacità assegnataore di core o ore di GPUmensileOffer and allocation registerDICHIARATO
Recovery time in failover exercisesminutiper esercitazioneRegistri delle esercitazioniOSSERVATO
06Fonti

Da dove provengono le evidenze.

Set di dati pubblici e registri istituzionali specifici, ciascuno con la sua classe di licenza. Le fonti soggette ad accordo sono utilizzate solo alle relative condizioni e mai ripubblicate.

FonteCosa fornisceClasse di licenza
Classifiche TOP500 e Green500Prestazioni ed efficienza energetica pubblicate di grandi sistemiGratuito, alle condizioni del progetto
Dati sull'elettricità di EmberMix di generazione e intensità di carbonio dell'elettricità per paeseCC BY 4.0
Copernicus Data Space EcosystemEarth observation archives with processing next to the dataGratuito e aperto, attribuzione
NASA Earthdata CloudArchivi di scienze della Terra in archiviazione a oggetti nel cloud per l'analisi nella regioneFree and open, NASA data policy
Registri delle regioni e dello stato del cloud pubblicoRegion locations, availability history and incident reportsCondizioni del fornitore
Registri dei rilasci e delle dismissioni di KubernetesVersion support windows and API removals that affect workload portabilityCC BY 4.0
07Decisioni

Chi decide, e a cosa servono le evidenze.

Foundry prepara le evidenze. Le decisioni riportate di seguito sono prese dalle autorità indicate, secondo le rispettive norme, e mai dalla piattaforma.

Chi decideLa domandaEvidenze fornite da questa pagina
Titolari dei dati e autorità per la protezione dei datiWhere data may be processed, and whether results may leavePlacement logs, the jurisdiction of each tier, federated execution records
Responsabili di progettoHow to prioritise workloads within an allocation during an eventStato della coda, allocazione residua, scadenze
Contributori e operatori delle infrastruttureWhat capacity to offer and on what termsRegistro delle offerte, utilizzo, energia e carico di supporto
Ministeri responsabili delle infrastrutture digitaliIn che misura l' analisi del rischio nazionale dipende da fornitori esteri o concentratiMappa delle dipendenze da fornitori e regioni; piani di uscita e di failover

Output prodotti da questo argomento

  • Politiche di collocamento per classe di dati, giurisdizione, urgenza e costo
  • Workload packages portable across cloud, private and edge tiers
  • Failover and degraded-operation runbooks with exercise records
  • Register of capacity offered, allocated and used, kept apart
08Questioni centrali

What computing engineers and data owners ask.

  • Dove è consentito, per legge e per contratto, elaborare i dati?
  • Quali carichi di lavoro richiedono capacità di picco e quali una disponibilità stabile e locale?
  • How does work continue when connectivity is degraded or lost?
  • Come si distingue la capacità offerta da quella effettivamente assegnata e utilizzata?
09Meccanismi

One control plane across three tiers.

NXS-COR (compute, nodes and runtimes) is designed as the compute control plane across cloud, private infrastructure and edge. Workloads are packaged with their dependencies so they can run on any tier that the project’s policy allows, and the scheduler places them according to data location, sensitivity, cost and urgency. Where data cannot move, the analysis is designed to run where the data is held and only permitted results leave.

Edge capacity matters most when it is hardest to provide: during the events risk work is about. Field kits, observatory nodes managed through NXS-OPS (instruments, sensors and calibration) and offline operation of NXS-NST (civilian common operating picture) are designed so that coordination continues through outages, synchronising when connectivity returns. Energy use, cooling and hardware supply are part of the engineering, and the platform’s computing questions connect to the energy and data-centre analysis at Data and Compute.

10Metodi e limiti

What is engineered, and what remains hard.

Federation

Compute to data

L'esecuzione federata mantiene i dati sensibili dove si trovano e sposta il codice e i risultati consentiti.

Resilienza

Funzionamento degradato

I nodi edge proseguono in locale e si riconciliano in seguito, con i conflitti segnalati anziché sovrascritti in silenzio.

Accounting

Offerta non significa assegnazione

Contributed infrastructure is recorded as an offer until it is separately allocated.

Limiti: l'analisi federata limita i metodi eseguibili, i dispositivi edge hanno poca capacità e la riconciliazione dopo una lunga disconnessione può richiedere un giudizio umano. Nessuna specifica hardware viene sommata in dichiarazioni di prestazioni.

12Where this page’s references

Where this page’s references lead.

Gli organismi e i documenti alla luce dei quali si legge questa pagina. Stato ed edizioni cambiano; ogni link porta all'organismo emittente.

13Domande

Domande e risposte.

Perché portare l'analisi ai dati anziché il contrario?
Because some data may not legally or contractually leave its location, and some is too large to move. The code goes to the data, runs under the owner’s policy, and only permitted results come back.
What happens to edge work during an outage?
The node continues locally with the model and data it holds. When connectivity returns it synchronises and flags conflicts for a person to resolve rather than overwriting either side.
La mia istituzione può mettere a disposizione dei server?
Le offerte possono essere descritte alla Segreteria del Consortium. Un'offerta è registrata come offerta, non come capacità assegnata o utilizzata, finché non si concorda un'assegnazione distinta.
Il consumo energetico è rendicontato?
Il progetto registra energia e carbonio per carico di lavoro dove esistono dati di telemetria o stime del fornitore, con un'etichetta che indica quale dei due. Le stime non sono mai presentate come misurazioni.
Does membership include compute?
No. Né l'adesione né la sponsorizzazione garantiscono un'allocazione di calcolo.
È aperta qualche assegnazione di calcolo?
Not yet. Allocations open when their terms and review capacity exist.
RapportiContribuisci

Contribuisci con evidenze da questa pagina.

Reports è la pubblicazione trimestrale del consorzio. Ciò che sai su questo tema può diventare un'evidenza, un caso o una correzione nella prossima edizione, attribuita a te e pubblicata con licenza CC BY 4.0 se si tratta di un tuo lavoro.

GCRIFoundryFoundry Build and Readiness
Foundry

Porta un metodo, un set di dati o una domanda.

Informazioni e richieste sono aperte oggi. Una richiesta riceve un riferimento e indica il passo successivo; candidature, pagamenti, assegnazioni di calcolo e registrazioni si aprono solo quando esistono il team, le condizioni e la capacità di revisione.

The Global Centre for Risk and Innovation (GCRI Canada) is a Canadian not-for-profit organisation, not a registered charity, with its registered office in Ontario.