Skip to content

GCRI · Foundry

計算資源とエッジ

Risk analysis needs compute in very different places: a large cloud allocation for a national ensemble, a ministry’s own servers for records that may not leave, a field laptop that keeps a model running when the network fails. This page sets out how compute risk develops, from capacity shortfall and concentration in a few providers to jurisdiction, energy and degraded connectivity, and how cloud, local nodes and edge devices are designed to be scheduled as one capacity.

02質問

コンピュートとエッジ: リスクの進展の仕方。

クラウド、ローカルノード、エッジの技術的能力。以下のドシエでは、リスクがどのように展開するか、何を測定するか、データの出所、モデル化の方法、そして誰が決定するのかを示す。

メカニズム

必要なときに能力が機能しない

Demand for compute peaks during events, exactly when shared capacity is contested, networks are degraded and power is unstable. Queues lengthen, ensembles shrink and forecasts arrive after the decision window has closed.

メカニズム

集中度

Many institutions rely on a few cloud providers, regions and chip suppliers. An outage, sanction, price change or supply shortage reaches all of them at once, which makes compute concentration a systemic dependency in its own right.

メカニズム

管轄とデータの所在地

Where data may be processed is set by law and contract. Moving analysis to the data keeps records in place, but constrains which methods can run and can still leave results open to inference about the inputs.

メカニズム

切断と照合

Edge nodes keep working offline and reconcile later. Conflicting edits, clock skew and stale models accumulate during an outage, and reconciliation after a long disconnection may need human judgement rather than an automatic merge.

03手法とエビデンス

How compute and edge is modelled, measured and tested.

モデル、その仮定、データ、不確実性を、科学者やエンジニアが確認する形で示します。構造は公表された手法に従っています。描かれた値は例示であり、知見ではありません。

モデル、方程式、仮定

The model structure used for compute and edge, the assumptions it makes and how each is tested.

要素 i のリスクRi = f(Hi, Ei, Vi, Ci)ハザード、エクスポージャー、脆弱性、対処能力
年間期待損失EAL = ∑k pk · Lkover events k with annual probability pk
結合システムxt+1 = A xt + B ut + εtA carries the couplings, u the shock, ε the error
仮定作られる理由検証の方法
一つの事象の中では、ハザードとエクスポージャーは独立している損失の積分を扱いやすく保つ同時記録に当てはめたコピュラと比較
結合は動作点の近くで線形であるショックを A を通じて伝播させる線形範囲を超えて摂動を与えて比較する
脆弱性曲線は場所を越えて適用できる地域固有の曲線はめったに得られない観測された損失がある場合はそれに照らして検証
入力
来歴付きのバージョン管理されたデータセット
成果物
分布であり、単一の数値ではない
コード
モデルカードと試験とともに公開
再現
同じデータ、コード、環境、シード
標準的なリスクおよび状態空間の定式化です。挙げた前提はこの手法に典型的なもので、審査のために示しており、結果ではありません。
FAIR 原則・GO FAIR と FORCE11W3C PROV・World Wide Web Consortium不確実性の一貫した扱いに関するガイダンス・IPCCCEOS 解析即応データ・地球観測衛星委員会
045 つの分野において

Compute is designed to serve each domain’s heaviest models.

05指標

何を、どの程度うまく測定しているか。

各指標には、その単位、更新頻度、背後にある出典の種類、値が持つことになるエビデンスのラベルが付いています。値は表示しません:プログラムが自らの権限のもとで値を提供します。

指標単位周期出典の種類ラベル
Queue wait timeminutes, median and tail日次Scheduler accounting観測
サービスの可用性予定時間に占める割合月次可用性のモニタリング観測
許可された管轄区域外に配置されたワークロード件数per placementPlacement policy logs観測
Edge reconciliation conflicts再同期ごとの件数事象ごと同期ログ観測
ワークロードあたりのエネルギー使用量kilowatt-hours実行あたり電力テレメトリまたは事業者の推計値推定
Carbon intensity of electricity usedgrams CO2 equivalent per kilowatt-hour毎時Grid operator and provider data推定
Capacity offered against capacity allocatedコア時間または GPU 時間月次募集・割当の登録簿申告済み
Recovery time in failover exercises分演習ごと演習の記録観測
06出典

エビデンスの出所。

名前の明示された公開データセットと機関の記録。それぞれにライセンス区分があります。合意に基づく出典は、その条件のもとでのみ使用し、再公開することはありません。

出典提供するものライセンス区分
TOP500 および Green500 のリスト大規模 システムFree, terms of the project
Ember の電力データGeneration mix and carbon intensity of electricity by countryCC BY 4.0
Copernicus Data Space EcosystemEarth observation archives with processing next to the data無料かつオープン、帰属表示
NASA Earthdata Cloudリージョン内分析のための、クラウド・オブジェクトストレージ上の地球科学アーカイブFree and open, NASA data policy
パブリッククラウドのリージョンおよびステータスの記録Region locations, availability history and incident reportsProvider terms
Kubernetes release and deprecation recordsワークロードの可搬性に影響する、バージョンのサポート期間と API の廃止CC BY 4.0
07決定

誰が決め、エビデンスが何に役立つか。

Foundry はエビデンスを準備します。以下の決定は、記載された当局がそれぞれの規則に基づいて行うものであり、プラットフォームが行うことは決してありません。

誰が決定するか質問このページが提供するエビデンス
データ所有者とデータ保護当局Where data may be processed, and whether results may leave配置ログ、各階層の管轄、連合実行の記録
プロジェクトオーナーHow to prioritise workloads within an allocation during an eventキューの状態、残りの割り当て、期限
インフラの貢献者と運用者What capacity to offer and on what terms提供登録簿、利用状況、エネルギー、サポート負荷
Ministries responsible for digital infrastructure国の リスク分析 が、外国の事業者や集中した事業者にどの程度依存しているかProvider and region dependency map; exit and failover plans

このトピックが生み出す成果物

  • Placement policies by data class, jurisdiction, urgency and cost
  • Workload packages portable across cloud, private and edge tiers
  • 演習記録を伴うフェイルオーバーおよび縮退運転の運用手順書
  • 提供、割り当ておよび使用された容量の登録簿(それぞれ区別して管理)
08中核となる問い

What computing engineers and data owners ask.

  • Where is the data legally and contractually allowed to be processed?
  • どのワークロードにバースト容量が必要で、どれに安定したローカルの可用性が必要ですか。
  • 接続が低下または失われた場合、業務はどのように継続されますか。
  • 提示された引受能力と、実際に割り当てられ利用された引受能力は、どのように区別されますか。
09メカニズム

One control plane across three tiers.

NXS-COR (compute, nodes and runtimes) is designed as the compute control plane across cloud, private infrastructure and edge. Workloads are packaged with their dependencies so they can run on any tier that the project’s policy allows, and the scheduler places them according to data location, sensitivity, cost and urgency. Where data cannot move, the analysis is designed to run where the data is held and only permitted results leave.

Edge capacity matters most when it is hardest to provide: during the events risk work is about. Field kits, observatory nodes managed through NXS-OPS (instruments, sensors and calibration) and offline operation of NXS-NST (civilian common operating picture) are designed so that coordination continues through outages, synchronising when connectivity returns. Energy use, cooling and hardware supply are part of the engineering, and the platform’s computing questions connect to the energy and data-centre analysis at Data and Compute.

10手法と限界

What is engineered, and what remains hard.

Federation

Compute to data

Federated execution keeps sensitive data in place and moves code and permitted results.

レジリエンス

Degraded operation

エッジ・ノードはローカルで処理を継続し、後で同期します。競合は、黙って上書きされるのではなく、フラグが付けられます。

Accounting

提供は配分ではない

Contributed infrastructure is recorded as an offer until it is separately allocated.

限界:連合解析は実行できる手法を制約し、エッジデバイスの能力は小さく、長期の切断後の整合には人間の判断が必要になることがあります。ハードウェア仕様を合算して性能の主張に用いることはありません。

11手法

どのように研究され、手法が言えないことは何か。

  1. 高性能・クラウド・エッジ・コンピューティング階層をまたぐアンサンブルのスケジューリング · データに隣接した連合型実行ここでの適用
  2. システム工学正規のシステム目録 · 契約先行のインターフェース · エビデンスにたどれる要件ここでの適用
  3. ソフトウェアとセーフティクリティカル・システム工学フェイルクローズのポリシー・ゲート · ビルドの来歴と部品表 · 保証ケースここでの適用
  4. データエンジニアリング、相互運用性、データ・スチュワードシップ取り込みの境界での検証 · 再現可能なプロダクトのための固定データ・カットここでの適用
  5. 地理情報システムSTAC による画像カタログ · 集計方法を明示したエクスポージャーの重ね合わせここでの適用
12Where this page’s references

Where this page’s references lead.

このページの読解の基準となる機関と文書。状態と版は変わります。各リンクは発行機関へ移動します。

13質問

質問と回答。

Why move analysis to the data instead of the reverse?
Because some data may not legally or contractually leave its location, and some is too large to move. The code goes to the data, runs under the owner’s policy, and only permitted results come back.
What happens to edge work during an outage?
ノードは、保持しているモデルとデータを使って現地で稼働を続けます。接続が回復すると同期を行い、どちらか一方を上書きするのではなく、競合を人が解決できるよう示します。
Can my institution contribute servers?
Offers can be described to the Consortium Secretariat. An offer is recorded as an offer, not as allocated or used capacity, until a separate allocation is agreed.
Is energy use reported?
The design records energy and carbon per workload where telemetry or provider estimates exist, with a label stating which. Estimates are never presented as measurements.
メンバーシップには計算資源が含まれますか。
いいえ。会員資格もスポンサーシップも、計算資源の割り当てを保証するものではありません。
Is any compute allocation open?
Not yet. Allocations open when their terms and review capacity exist.
報告書貢献する

このページからエビデンスを提供する。

Reports はコンソーシアムの季刊刊行物です。このテーマについてあなたが知っていることは、次号でエビデンス、事例、または訂正となり得ます。あなたの名前を記し、あなた自身の著作物である場合は CC BY 4.0 で公表されます。

GCRI地域ミッションで最も多く使われる Foundry のFoundry の構築と準備度
地域ミッションで最も多く使われる Foundry の

手法、データセット、または問いを持ち込んでください。

情報提供と問い合わせは本日から受け付けています。問い合わせには参照番号が付き、次の手順が示されます。申請、支払い、計算資源の割り当て、登録は、担当チーム、規約、審査体制が整ってから開始します。

The Global Centre for Risk and Innovation (GCRI Canada) is a Canadian not-for-profit organisation, not a registered charity, with its registered office in Ontario.