WEKO3
-
RootNode
アイテム
すばるHSCパイプラインのPwrake/Gfarmによる高速化手法の提案
https://ipsj.ixsq.nii.ac.jp/records/184889
https://ipsj.ixsq.nii.ac.jp/records/184889e7f677b3-3603-48a1-a19a-92c18aedc7f5
| 名前 / ファイル | ライセンス | アクション |
|---|---|---|
IPSJ-HPC17162009.pdf (1.0 MB)
|
Copyright (c) 2017 by the Information Processing Society of Japan
|
|
| オープンアクセス | ||
| Item type | SIG Technical Reports(1) | |||||||||||
|---|---|---|---|---|---|---|---|---|---|---|---|---|
| 公開日 | 2017-12-11 | |||||||||||
| タイトル | ||||||||||||
| タイトル | すばるHSCパイプラインのPwrake/Gfarmによる高速化手法の提案 | |||||||||||
| 言語 | ||||||||||||
| 言語 | jpn | |||||||||||
| キーワード | ||||||||||||
| 主題Scheme | Other | |||||||||||
| 主題 | ストレージ | |||||||||||
| 資源タイプ | ||||||||||||
| 資源タイプ識別子 | http://purl.org/coar/resource_type/c_18gh | |||||||||||
| 資源タイプ | technical report | |||||||||||
| 著者所属 | ||||||||||||
| 筑波大学計算科学研究センター | ||||||||||||
| 著者所属 | ||||||||||||
| 筑波大学計算科学研究センター | ||||||||||||
| 著者所属 | ||||||||||||
| 筑波大学計算科学研究センター | ||||||||||||
| 著者所属(英) | ||||||||||||
| en | ||||||||||||
| Center for Computational Sciences, University of Tsukuba | ||||||||||||
| 著者所属(英) | ||||||||||||
| en | ||||||||||||
| Center for Computational Sciences, University of Tsukuba | ||||||||||||
| 著者所属(英) | ||||||||||||
| en | ||||||||||||
| Center for Computational Sciences, University of Tsukuba | ||||||||||||
| 著者名 |
田中, 昌宏
× 田中, 昌宏
× 建部, 修見
× 川島, 英之
|
|||||||||||
| 論文抄録 | ||||||||||||
| 内容記述タイプ | Other | |||||||||||
| 内容記述 | 本研究の目的は，すばる望遠鏡に搭載された主焦点カメラ Hyper Suprime-Cam (HSC) の一次処理パイプラインの高速化である．処理内容は変更せず，数百コアを使用した場合のスケールアウト性能向上による高速化を目指す．HSC パイプラインの 2 種類のタスクに対してスケールアウト性能について評価する実験では，Frame タスクについては GPFS が400 コア付近でスケーラビリティが限界となる一方，Gfarm ファイルシステムは 576 コアでもスケールアウトすることがわかった．また，36 ノード，全 576 コアを用いた実験では，実運用で用いられている従来手法から，並列処理フレームワークを Pwrake に，ファイルシステムを GPFS から Gfarm に変更することにより，処理全体で 1.71 倍の性能向上を確認できた．さらに，提案手法のタスクのオーバラップによるコア有効利用により，オーバーラップなしより性能が 1.26 倍向上し，実運用の環境からは 2.15 倍の性能向上を確認した． | |||||||||||
| 書誌レコードID | ||||||||||||
| 収録物識別子タイプ | NCID | |||||||||||
| 収録物識別子 | AN10463942 | |||||||||||
| 書誌情報 |
研究報告ハイパフォーマンスコンピューティング（HPC） 巻 2017-HPC-162, 号 9, p. 1-8, 発行日 2017-12-11 |
|||||||||||
| ISSN | ||||||||||||
| 収録物識別子タイプ | ISSN | |||||||||||
| 収録物識別子 | 2188-8841 | |||||||||||
| Notice | ||||||||||||
| SIG Technical Reports are nonrefereed and hence may later appear in any journals, conferences, symposia, etc. | ||||||||||||
| 出版者 | ||||||||||||
| 言語 | ja | |||||||||||
| 出版者 | 情報処理学会 | |||||||||||
