GCRI · Foundry
計算資源とエッジ
Risk analysis needs compute in very different places: a large cloud allocation for a national ensemble, a ministry’s own servers for records that may not leave, a field laptop that keeps a model running when the network fails. This page sets out how compute risk develops, from capacity shortfall and concentration in a few providers to jurisdiction, energy and degraded connectivity, and how cloud, local nodes and edge devices are designed to be scheduled as one capacity.
計算資源とエッジの記録。
コンピュートとエッジ: リスクの進展の仕方。
クラウド、ローカルノード、エッジの技術的能力。以下のドシエでは、リスクがどのように展開するか、何を測定するか、データの出所、モデル化の方法、そして誰が決定するのかを示す。
必要なときに能力が機能しない
Demand for compute peaks during events, exactly when shared capacity is contested, networks are degraded and power is unstable. Queues lengthen, ensembles shrink and forecasts arrive after the decision window has closed.
集中度
Many institutions rely on a few cloud providers, regions and chip suppliers. An outage, sanction, price change or supply shortage reaches all of them at once, which makes compute concentration a systemic dependency in its own right.
管轄とデータの所在地
Where data may be processed is set by law and contract. Moving analysis to the data keeps records in place, but constrains which methods can run and can still leave results open to inference about the inputs.
切断と照合
Edge nodes keep working offline and reconcile later. Conflicting edits, clock skew and stale models accumulate during an outage, and reconciliation after a long disconnection may need human judgement rather than an automatic merge.
How compute and edge is modelled, measured and tested.
モデル、その仮定、データ、不確実性を、科学者やエンジニアが確認する形で示します。構造は公表された手法に従っています。描かれた値は例示であり、知見ではありません。
モデル、方程式、仮定
The model structure used for compute and edge, the assumptions it makes and how each is tested.
Ri = f(Hi, Ei, Vi, Ci)ハザード、エクスポージャー、脆弱性、対処能力EAL = ∑k pk · Lkover events k with annual probability pkxt+1 = A xt + B ut + εtA carries the couplings, u the shock, ε the error| 仮定 | 作られる理由 | 検証の方法 |
|---|---|---|
| 一つの事象の中では、ハザードとエクスポージャーは独立している | 損失の積分を扱いやすく保つ | 同時記録に当てはめたコピュラと比較 |
| 結合は動作点の近くで線形である | ショックを A を通じて伝播させる | 線形範囲を超えて摂動を与えて比較する |
| 脆弱性曲線は場所を越えて適用できる | 地域固有の曲線はめったに得られない | 観測された損失がある場合はそれに照らして検証 |
- 入力
- 来歴付きのバージョン管理されたデータセット
- 成果物
- 分布であり、単一の数値ではない
- コード
- モデルカードと試験とともに公開
- 再現
- 同じデータ、コード、環境、シード
Compute is designed to serve each domain’s heaviest models.
Compute readiness is designed for the Foundry Build and Readiness series. Energy efficiency is reported with ISO/IEC 30134 indicators; no hardware specifications are summed into performance claims.
- Workload profiles.
- 効率の測定値。
何を、どの程度うまく測定しているか。
各指標には、その単位、更新頻度、背後にある出典の種類、値が持つことになるエビデンスのラベルが付いています。値は表示しません:プログラムが自らの権限のもとで値を提供します。
| 指標 | 単位 | 周期 | 出典の種類 | ラベル |
|---|---|---|---|---|
| Queue wait time | minutes, median and tail | 日次 | Scheduler accounting | 観測 |
| サービスの可用性 | 予定時間に占める割合 | 月次 | 可用性のモニタリング | 観測 |
| 許可された管轄区域外に配置されたワークロード | 件数 | per placement | Placement policy logs | 観測 |
| Edge reconciliation conflicts | 再同期ごとの件数 | 事象ごと | 同期ログ | 観測 |
| ワークロードあたりのエネルギー使用量 | kilowatt-hours | 実行あたり | 電力テレメトリまたは事業者の推計値 | 推定 |
| Carbon intensity of electricity used | grams CO2 equivalent per kilowatt-hour | 毎時 | Grid operator and provider data | 推定 |
| Capacity offered against capacity allocated | コア時間または GPU 時間 | 月次 | 募集・割当の登録簿 | 申告済み |
| Recovery time in failover exercises | 分 | 演習ごと | 演習の記録 | 観測 |
エビデンスの出所。
名前の明示された公開データセットと機関の記録。それぞれにライセンス区分があります。合意に基づく出典は、その条件のもとでのみ使用し、再公開することはありません。
| 出典 | 提供するもの | ライセンス区分 |
|---|---|---|
| TOP500 および Green500 のリスト | 大規模 システム | Free, terms of the project |
| Ember の電力データ | Generation mix and carbon intensity of electricity by country | CC BY 4.0 |
| Copernicus Data Space Ecosystem | Earth observation archives with processing next to the data | 無料かつオープン、帰属表示 |
| NASA Earthdata Cloud | リージョン内分析のための、クラウド・オブジェクトストレージ上の地球科学アーカイブ | Free and open, NASA data policy |
| パブリッククラウドのリージョンおよびステータスの記録 | Region locations, availability history and incident reports | Provider terms |
| Kubernetes release and deprecation records | ワークロードの可搬性に影響する、バージョンのサポート期間と API の廃止 | CC BY 4.0 |
誰が決め、エビデンスが何に役立つか。
Foundry はエビデンスを準備します。以下の決定は、記載された当局がそれぞれの規則に基づいて行うものであり、プラットフォームが行うことは決してありません。
| 誰が決定するか | 質問 | このページが提供するエビデンス |
|---|---|---|
| データ所有者とデータ保護当局 | Where data may be processed, and whether results may leave | 配置ログ、各階層の管轄、連合実行の記録 |
| プロジェクトオーナー | How to prioritise workloads within an allocation during an event | キューの状態、残りの割り当て、期限 |
| インフラの貢献者と運用者 | What capacity to offer and on what terms | 提供登録簿、利用状況、エネルギー、サポート負荷 |
| Ministries responsible for digital infrastructure | 国の リスク分析 が、外国の事業者や集中した事業者にどの程度依存しているか | Provider and region dependency map; exit and failover plans |
このトピックが生み出す成果物
- Placement policies by data class, jurisdiction, urgency and cost
- Workload packages portable across cloud, private and edge tiers
- 演習記録を伴うフェイルオーバーおよび縮退運転の運用手順書
- 提供、割り当ておよび使用された容量の登録簿(それぞれ区別して管理)
What computing engineers and data owners ask.
- Where is the data legally and contractually allowed to be processed?
- どのワークロードにバースト容量が必要で、どれに安定したローカルの可用性が必要ですか。
- 接続が低下または失われた場合、業務はどのように継続されますか。
- 提示された引受能力と、実際に割り当てられ利用された引受能力は、どのように区別されますか。
One control plane across three tiers.
NXS-COR (compute, nodes and runtimes) is designed as the compute control plane across cloud, private infrastructure and edge. Workloads are packaged with their dependencies so they can run on any tier that the project’s policy allows, and the scheduler places them according to data location, sensitivity, cost and urgency. Where data cannot move, the analysis is designed to run where the data is held and only permitted results leave.
Edge capacity matters most when it is hardest to provide: during the events risk work is about. Field kits, observatory nodes managed through NXS-OPS (instruments, sensors and calibration) and offline operation of NXS-NST (civilian common operating picture) are designed so that coordination continues through outages, synchronising when connectivity returns. Energy use, cooling and hardware supply are part of the engineering, and the platform’s computing questions connect to the energy and data-centre analysis at Data and Compute.
What is engineered, and what remains hard.
Compute to data
Federated execution keeps sensitive data in place and moves code and permitted results.
Degraded operation
エッジ・ノードはローカルで処理を継続し、後で同期します。競合は、黙って上書きされるのではなく、フラグが付けられます。
提供は配分ではない
Contributed infrastructure is recorded as an offer until it is separately allocated.
限界:連合解析は実行できる手法を制約し、エッジデバイスの能力は小さく、長期の切断後の整合には人間の判断が必要になることがあります。ハードウェア仕様を合算して性能の主張に用いることはありません。
どのように研究され、手法が言えないことは何か。
- 01高性能・クラウド・エッジ・コンピューティング階層をまたぐアンサンブルのスケジューリング · データに隣接した連合型実行ここでの適用
- 02システム工学正規のシステム目録 · 契約先行のインターフェース · エビデンスにたどれる要件ここでの適用
- 03ソフトウェアとセーフティクリティカル・システム工学フェイルクローズのポリシー・ゲート · ビルドの来歴と部品表 · 保証ケースここでの適用
- 04データエンジニアリング、相互運用性、データ・スチュワードシップ取り込みの境界での検証 · 再現可能なプロダクトのための固定データ・カットここでの適用
- 05地理情報システムSTAC による画像カタログ · 集計方法を明示したエクスポージャーの重ね合わせここでの適用
Where this page’s references lead.
このページの読解の基準となる機関と文書。状態と版は変わります。各リンクは発行機関へ移動します。
質問と回答。
Why move analysis to the data instead of the reverse?
What happens to edge work during an outage?
Can my institution contribute servers?
Is energy use reported?
メンバーシップには計算資源が含まれますか。
Is any compute allocation open?
このページからエビデンスを提供する。
Reports はコンソーシアムの季刊刊行物です。このテーマについてあなたが知っていることは、次号でエビデンス、事例、または訂正となり得ます。あなたの名前を記し、あなた自身の著作物である場合は CC BY 4.0 で公表されます。
- メールゲートウェイ GW-GCRIこのページから送信するエビデンス、訂正、事例、手法、レビュー、翻訳、プロファイルへの入力。このページのタグが付いて届くため、担当の編集者が受け取ります。
- ZenodoOpen depositDeposit it and submit to the communityPublish your own record on Zenodo with your ORCID iD, then submit it to the Reports community there. Curators review it; the DOI stays yours.
- 報告書GCRI貢献のすべての方法を見る貢献の種類、それぞれの審査方法、受け取るクレジット、ライセンス、決して受け付けないもの。
個人データ、重要インフラの機微な詳細、共有する権利のないものは決して送らないでください。寄稿は利用前にレビューされます。送付によって著作者としての権利や編集上の権利が生じることはなく、スポンサーシップで調査結果を買うことは決してできません。
手法、データセット、または問いを持ち込んでください。
情報提供と問い合わせは本日から受け付けています。問い合わせには参照番号が付き、次の手順が示されます。申請、支払い、計算資源の割り当て、登録は、担当チーム、規約、審査体制が整ってから開始します。
法的文書。
このサイトの地図、データ、図表は、背景と一般的な情報として示すものです。助言、予報、警報ではありません。情報の限界は免責事項とデータに関する注意事項に記載しています。