WEKO3
アイテム
{"_buckets": {"deposit": "b84ca8c2-aac7-414f-93ad-8fb7c7b042af"}, "_deposit": {"created_by": 1, "id": "1957", "owners": [1], "pid": {"revision_id": 0, "type": "depid", "value": "1957"}, "status": "published"}, "_oai": {"id": "oai:jaxa.repo.nii.ac.jp:00001957", "sets": ["77", "1405", "1893"]}, "author_link": ["1799", "1804", "1810", "1801", "1798", "1797", "1811", "1800", "1796", "1802", "1805", "1808", "1806", "1807", "1803", "1809"], "item_3_alternative_title_2": {"attribute_name": "その他のタイトル(英)", "attribute_value_mlt": [{"subitem_alternative_title": "High Performance Visualization Processing of Large-Scale Computer Simulation Data via NICT Science Cloud"}]}, "item_3_biblio_info_10": {"attribute_name": "書誌情報", "attribute_value_mlt": [{"bibliographicIssueDates": {"bibliographicIssueDate": "2014-03-31", "bibliographicIssueDateType": "Issued"}, "bibliographicPageEnd": "70", "bibliographicPageStart": "57", "bibliographicVolumeNumber": "JAXA-RR-13-010", "bibliographic_titles": [{"bibliographic_title": "宇宙航空研究開発機構研究開発報告: 宇宙科学情報解析論文誌: 第3号"}, {"bibliographic_title": "JAXA Research and Development Report: Journal of Space Science Informatics Japan: Volume 3", "bibliographic_titleLang": "en"}]}]}, "item_3_description_16": {"attribute_name": "抄録", "attribute_value_mlt": [{"subitem_description": "現在,欧米や日本において,科学研究向けクラウドとしてサイエンスクラウドが提案され,システムや利活用についての議論が進められている.サイエンスクラウドはビッグデータ時代のデータ指向型科学研究基盤として提案されている.クラウド上でのビッグデータ処理では,CPU の並列分散化だけではなくネットワークやI/O の並列分散が重要である.本研究ではクラウド環境で高い計算効率を得るための基礎研究として,CPU およびI/O を同時に分散処理するシステムを提案する.8 コアを有する6 台のクラスタ計算機で基礎実験を行った結果,ノード内のプロセス数が少ない場合はほぼ100%の並列化効率が達成され,100 台を超える大規模クラスタ環境でも高いスケーラビリティーが予測された.一方,ノード内で複数プロセスが処理を行う場合にはディスクアクセスの輻輳が発生し,必ずしも高いスケーラビリティーを得ることができない.8 コアを有する6 台の計算サーバで最も高い並列化効率を得たのは6 プロセス並列の場合であり,高速化率は20.6 であった.今後は,同ノード内のI/O 処理を分散化することで,並列化効率をさらに向上させることが期待される.", "subitem_description_type": "Abstract"}]}, "item_3_description_17": {"attribute_name": "抄録(英)", "attribute_value_mlt": [{"subitem_description": "Science cloud is a cloud system designed for scientific researches, and expected as a new infrastructure for big data sciences. Not only parallelization of CPU as in super-computers, but I/O and network throughput parallelization are crucial for the big data sciences. One of the typical structures of science cloud is a scalable cluster in which multiple clusters in a cloud are connected with high-speed network. In the present study, we examine performance of parallelization of both CPU and I/O in a cloud system as the first step to high performance scalable clusters. In case with few processes executed on each computational node (server), parallelization efficiency is almost 100%. This high efficiency is expected to maintain in larger-scale cluster systems such as those with 100 servers. On the condition of multi-processes on each node, the present parallelization does not show good performance due to the congestions of I/O. Parallelization efficiency (speed-up) is as low as 20.6%. New techniques of decentralization of I/O within each node are required in the next step.", "subitem_description_type": "Other"}]}, "item_3_description_18": {"attribute_name": "内容記述", "attribute_value_mlt": [{"subitem_description": "形態: カラー図版あり", "subitem_description_type": "Other"}]}, "item_3_description_19": {"attribute_name": "内容記述(英)", "attribute_value_mlt": [{"subitem_description": "Physical characteristics: Original contains color illustrations", "subitem_description_type": "Other"}]}, "item_3_description_32": {"attribute_name": "資料番号", "attribute_value_mlt": [{"subitem_description": "資料番号: AA0062302007", "subitem_description_type": "Other"}]}, "item_3_description_33": {"attribute_name": "レポート番号", "attribute_value_mlt": [{"subitem_description": "レポート番号: JAXA-RR-13-010", "subitem_description_type": "Other"}]}, "item_3_publisher_8": {"attribute_name": "出版者", "attribute_value_mlt": [{"subitem_publisher": "宇宙航空研究開発機構(JAXA)"}]}, "item_3_publisher_9": {"attribute_name": "出版者(英)", "attribute_value_mlt": [{"subitem_publisher": "Japan Aerospace Exploration Agency (JAXA)"}]}, "item_3_source_id_21": {"attribute_name": "ISSN", "attribute_value_mlt": [{"subitem_source_identifier": "1349-1113", "subitem_source_identifier_type": "ISSN"}]}, "item_3_source_id_24": {"attribute_name": "書誌レコードID", "attribute_value_mlt": [{"subitem_source_identifier": "AA1192675X", "subitem_source_identifier_type": "NCID"}]}, "item_3_text_35": {"attribute_name": "JAXAカテゴリ", "attribute_value_mlt": [{"subitem_text_value": "JAXAカテゴリ: 研究開発報告"}]}, "item_3_text_36": {"attribute_name": "JAXAカテゴリ2", "attribute_value_mlt": [{"subitem_text_value": "JAXAカテゴリ2: IS"}]}, "item_3_text_38": {"attribute_name": "NASA分類コード", "attribute_value_mlt": [{"subitem_text_value": "NASA分類コード: 82"}]}, "item_3_text_39": {"attribute_name": "NASA分類表目標", "attribute_value_mlt": [{"subitem_text_value": "NASA分類: Documentation and Information Science"}]}, "item_3_text_40": {"attribute_name": "jaxa出版物種類", "attribute_value_mlt": [{"subitem_text_value": "jaxa出版物種類: RR"}]}, "item_3_text_41": {"attribute_name": "jaxa出版物シリーズ", "attribute_value_mlt": [{"subitem_text_value": "jaxa出版物シリーズ: 001"}]}, "item_3_text_43": {"attribute_name": "DSpaceコレクション番号", "attribute_value_mlt": [{"subitem_text_value": "DSpaceコレクション番号: 7"}]}, "item_3_text_6": {"attribute_name": "著者所属", "attribute_value_mlt": [{"subitem_text_value": "情報通信研究機構(NICT)"}, {"subitem_text_value": "株式会社サイエンス・サービス"}, {"subitem_text_value": "情報通信研究機構(NICT)"}, {"subitem_text_value": "九州大学情報基盤研究開発センター"}, {"subitem_text_value": "情報通信研究機構(NICT)"}, {"subitem_text_value": "筑波大学計算科学研究センター"}, {"subitem_text_value": "筑波大学計算科学研究センター"}, {"subitem_text_value": "愛媛大学医学部"}]}, "item_3_text_7": {"attribute_name": "著者所属(英)", "attribute_value_mlt": [{"subitem_text_language": "en", "subitem_text_value": "National Institute of Information and Communications Technology (NICT)"}, {"subitem_text_language": "en", "subitem_text_value": "Science Service Co., Ltd."}, {"subitem_text_language": "en", "subitem_text_value": "National Institute of Information and Communications Technology (NICT)"}, {"subitem_text_language": "en", "subitem_text_value": "Research Institute for Information Technology, Kyushu University"}, {"subitem_text_language": "en", "subitem_text_value": "National Institute of Information and Communications Technology (NICT)"}, {"subitem_text_language": "en", "subitem_text_value": "Center for Computational Sciences, University of Tsukuba"}, {"subitem_text_language": "en", "subitem_text_value": "Center for Computational Sciences, University of Tsukuba"}, {"subitem_text_language": "en", "subitem_text_value": "Department of Medical Informatics, Ehime University"}]}, "item_creator": {"attribute_name": "著者", "attribute_type": "creator", "attribute_value_mlt": [{"creatorNames": [{"creatorName": "村田, 健史"}], "nameIdentifiers": [{"nameIdentifier": "1796", "nameIdentifierScheme": "WEKO"}]}, {"creatorNames": [{"creatorName": "磯田, 総子"}], "nameIdentifiers": [{"nameIdentifier": "1797", "nameIdentifierScheme": "WEKO"}]}, {"creatorNames": [{"creatorName": "渡邉, 英伸"}], "nameIdentifiers": [{"nameIdentifier": "1798", "nameIdentifierScheme": "WEKO"}]}, {"creatorNames": [{"creatorName": "深沢, 圭一郎"}], "nameIdentifiers": [{"nameIdentifier": "1799", "nameIdentifierScheme": "WEKO"}]}, {"creatorNames": [{"creatorName": "山本, 和憲"}], "nameIdentifiers": [{"nameIdentifier": "1800", "nameIdentifierScheme": "WEKO"}]}, {"creatorNames": [{"creatorName": "建部, 修見"}], "nameIdentifiers": [{"nameIdentifier": "1801", "nameIdentifierScheme": "WEKO"}]}, {"creatorNames": [{"creatorName": "田中, 昌宏"}], "nameIdentifiers": [{"nameIdentifier": "1802", "nameIdentifierScheme": "WEKO"}]}, {"creatorNames": [{"creatorName": "木村, 映善"}], "nameIdentifiers": [{"nameIdentifier": "1803", "nameIdentifierScheme": "WEKO"}]}, {"creatorNames": [{"creatorName": "Murata, Ken T.", "creatorNameLang": "en"}], "nameIdentifiers": [{"nameIdentifier": "1804", "nameIdentifierScheme": "WEKO"}]}, {"creatorNames": [{"creatorName": "Isoda, Fusako", "creatorNameLang": "en"}], "nameIdentifiers": [{"nameIdentifier": "1805", "nameIdentifierScheme": "WEKO"}]}, {"creatorNames": [{"creatorName": "Watanabe, Hidenobu", "creatorNameLang": "en"}], "nameIdentifiers": [{"nameIdentifier": "1806", "nameIdentifierScheme": "WEKO"}]}, {"creatorNames": [{"creatorName": "Fukazawa, Keiichiro", "creatorNameLang": "en"}], "nameIdentifiers": [{"nameIdentifier": "1807", "nameIdentifierScheme": "WEKO"}]}, {"creatorNames": [{"creatorName": "Yamamoto, Kazunori", "creatorNameLang": "en"}], "nameIdentifiers": [{"nameIdentifier": "1808", "nameIdentifierScheme": "WEKO"}]}, {"creatorNames": [{"creatorName": "Tatebe, Osamu", "creatorNameLang": "en"}], "nameIdentifiers": [{"nameIdentifier": "1809", "nameIdentifierScheme": "WEKO"}]}, {"creatorNames": [{"creatorName": "Tanaka, Masahiro", "creatorNameLang": "en"}], "nameIdentifiers": [{"nameIdentifier": "1810", "nameIdentifierScheme": "WEKO"}]}, {"creatorNames": [{"creatorName": "Kimura, Eizen", "creatorNameLang": "en"}], "nameIdentifiers": [{"nameIdentifier": "1811", "nameIdentifierScheme": "WEKO"}]}]}, "item_files": {"attribute_name": "ファイル情報", "attribute_type": "file", "attribute_value_mlt": [{"accessrole": "open_date", "date": [{"dateType": "Available", "dateValue": "2020-01-15"}], "displaytype": "detail", "download_preview_message": "", "file_order": 0, "filename": "62302007.pdf", "filesize": [{"value": "2.3 MB"}], "format": "application/pdf", "future_date_message": "", "is_thumbnail": false, "licensetype": "license_free", "mimetype": "application/pdf", "size": 2300000.0, "url": {"label": "62302007.pdf", "url": "https://jaxa.repo.nii.ac.jp/record/1957/files/62302007.pdf"}, "version_id": "d351b138-ccc6-4af6-8b92-af05f88563a1"}]}, "item_keyword": {"attribute_name": "キーワード", "attribute_value_mlt": [{"subitem_subject": "Science Cloud", "subitem_subject_language": "en", "subitem_subject_scheme": "Other"}, {"subitem_subject": "Gfarm", "subitem_subject_language": "en", "subitem_subject_scheme": "Other"}, {"subitem_subject": "Pwrake", "subitem_subject_language": "en", "subitem_subject_scheme": "Other"}, {"subitem_subject": "Big data", "subitem_subject_language": "en", "subitem_subject_scheme": "Other"}, {"subitem_subject": "Magnetospheric MHD simulation", "subitem_subject_language": "en", "subitem_subject_scheme": "Other"}, {"subitem_subject": "I/O parallelization", "subitem_subject_language": "en", "subitem_subject_scheme": "Other"}]}, "item_language": {"attribute_name": "言語", "attribute_value_mlt": [{"subitem_language": "jpn"}]}, "item_resource_type": {"attribute_name": "資源タイプ", "attribute_value_mlt": [{"resourcetype": "technical report", "resourceuri": "http://purl.org/coar/resource_type/c_18gh"}]}, "item_title": "NICTサイエンスクラウドによる大規模シミュレーションデータ分散可視化処理", "item_titles": {"attribute_name": "タイトル", "attribute_value_mlt": [{"subitem_title": "NICTサイエンスクラウドによる大規模シミュレーションデータ分散可視化処理"}]}, "item_type_id": "3", "owner": "1", "path": ["77", "1405", "1893"], "permalink_uri": "https://jaxa.repo.nii.ac.jp/records/1957", "pubdate": {"attribute_name": "公開日", "attribute_value": "2015-03-26"}, "publish_date": "2015-03-26", "publish_status": "0", "recid": "1957", "relation": {}, "relation_version_is_last": true, "title": ["NICTサイエンスクラウドによる大規模シミュレーションデータ分散可視化処理"], "weko_shared_id": -1}
NICTサイエンスクラウドによる大規模シミュレーションデータ分散可視化処理
https://jaxa.repo.nii.ac.jp/records/1957
https://jaxa.repo.nii.ac.jp/records/1957ef2ce298-f2bb-4dd6-8ca2-41de0e8ec30b
名前 / ファイル | ライセンス | アクション |
---|---|---|
62302007.pdf (2.3 MB)
|
|
Item type | テクニカルレポート / Technical Report(1) | |||||
---|---|---|---|---|---|---|
公開日 | 2015-03-26 | |||||
タイトル | ||||||
タイトル | NICTサイエンスクラウドによる大規模シミュレーションデータ分散可視化処理 | |||||
言語 | ||||||
言語 | jpn | |||||
キーワード | ||||||
言語 | en | |||||
主題Scheme | Other | |||||
主題 | Science Cloud | |||||
キーワード | ||||||
言語 | en | |||||
主題Scheme | Other | |||||
主題 | Gfarm | |||||
キーワード | ||||||
言語 | en | |||||
主題Scheme | Other | |||||
主題 | Pwrake | |||||
キーワード | ||||||
言語 | en | |||||
主題Scheme | Other | |||||
主題 | Big data | |||||
キーワード | ||||||
言語 | en | |||||
主題Scheme | Other | |||||
主題 | Magnetospheric MHD simulation | |||||
キーワード | ||||||
言語 | en | |||||
主題Scheme | Other | |||||
主題 | I/O parallelization | |||||
資源タイプ | ||||||
資源タイプ識別子 | http://purl.org/coar/resource_type/c_18gh | |||||
資源タイプ | technical report | |||||
その他のタイトル(英) | ||||||
その他のタイトル | High Performance Visualization Processing of Large-Scale Computer Simulation Data via NICT Science Cloud | |||||
著者 |
村田, 健史
× 村田, 健史× 磯田, 総子× 渡邉, 英伸× 深沢, 圭一郎× 山本, 和憲× 建部, 修見× 田中, 昌宏× 木村, 映善× Murata, Ken T.× Isoda, Fusako× Watanabe, Hidenobu× Fukazawa, Keiichiro× Yamamoto, Kazunori× Tatebe, Osamu× Tanaka, Masahiro× Kimura, Eizen |
|||||
著者所属 | ||||||
情報通信研究機構(NICT) | ||||||
著者所属 | ||||||
株式会社サイエンス・サービス | ||||||
著者所属 | ||||||
情報通信研究機構(NICT) | ||||||
著者所属 | ||||||
九州大学情報基盤研究開発センター | ||||||
著者所属 | ||||||
情報通信研究機構(NICT) | ||||||
著者所属 | ||||||
筑波大学計算科学研究センター | ||||||
著者所属 | ||||||
筑波大学計算科学研究センター | ||||||
著者所属 | ||||||
愛媛大学医学部 | ||||||
著者所属(英) | ||||||
en | ||||||
National Institute of Information and Communications Technology (NICT) | ||||||
著者所属(英) | ||||||
en | ||||||
Science Service Co., Ltd. | ||||||
著者所属(英) | ||||||
en | ||||||
National Institute of Information and Communications Technology (NICT) | ||||||
著者所属(英) | ||||||
en | ||||||
Research Institute for Information Technology, Kyushu University | ||||||
著者所属(英) | ||||||
en | ||||||
National Institute of Information and Communications Technology (NICT) | ||||||
著者所属(英) | ||||||
en | ||||||
Center for Computational Sciences, University of Tsukuba | ||||||
著者所属(英) | ||||||
en | ||||||
Center for Computational Sciences, University of Tsukuba | ||||||
著者所属(英) | ||||||
en | ||||||
Department of Medical Informatics, Ehime University | ||||||
出版者 | ||||||
出版者 | 宇宙航空研究開発機構(JAXA) | |||||
出版者(英) | ||||||
出版者 | Japan Aerospace Exploration Agency (JAXA) | |||||
書誌情報 |
宇宙航空研究開発機構研究開発報告: 宇宙科学情報解析論文誌: 第3号 en : JAXA Research and Development Report: Journal of Space Science Informatics Japan: Volume 3 巻 JAXA-RR-13-010, p. 57-70, 発行日 2014-03-31 |
|||||
抄録 | ||||||
内容記述タイプ | Abstract | |||||
内容記述 | 現在,欧米や日本において,科学研究向けクラウドとしてサイエンスクラウドが提案され,システムや利活用についての議論が進められている.サイエンスクラウドはビッグデータ時代のデータ指向型科学研究基盤として提案されている.クラウド上でのビッグデータ処理では,CPU の並列分散化だけではなくネットワークやI/O の並列分散が重要である.本研究ではクラウド環境で高い計算効率を得るための基礎研究として,CPU およびI/O を同時に分散処理するシステムを提案する.8 コアを有する6 台のクラスタ計算機で基礎実験を行った結果,ノード内のプロセス数が少ない場合はほぼ100%の並列化効率が達成され,100 台を超える大規模クラスタ環境でも高いスケーラビリティーが予測された.一方,ノード内で複数プロセスが処理を行う場合にはディスクアクセスの輻輳が発生し,必ずしも高いスケーラビリティーを得ることができない.8 コアを有する6 台の計算サーバで最も高い並列化効率を得たのは6 プロセス並列の場合であり,高速化率は20.6 であった.今後は,同ノード内のI/O 処理を分散化することで,並列化効率をさらに向上させることが期待される. | |||||
抄録(英) | ||||||
内容記述タイプ | Other | |||||
内容記述 | Science cloud is a cloud system designed for scientific researches, and expected as a new infrastructure for big data sciences. Not only parallelization of CPU as in super-computers, but I/O and network throughput parallelization are crucial for the big data sciences. One of the typical structures of science cloud is a scalable cluster in which multiple clusters in a cloud are connected with high-speed network. In the present study, we examine performance of parallelization of both CPU and I/O in a cloud system as the first step to high performance scalable clusters. In case with few processes executed on each computational node (server), parallelization efficiency is almost 100%. This high efficiency is expected to maintain in larger-scale cluster systems such as those with 100 servers. On the condition of multi-processes on each node, the present parallelization does not show good performance due to the congestions of I/O. Parallelization efficiency (speed-up) is as low as 20.6%. New techniques of decentralization of I/O within each node are required in the next step. | |||||
内容記述 | ||||||
内容記述タイプ | Other | |||||
内容記述 | 形態: カラー図版あり | |||||
内容記述(英) | ||||||
内容記述タイプ | Other | |||||
内容記述 | Physical characteristics: Original contains color illustrations | |||||
ISSN | ||||||
収録物識別子タイプ | ISSN | |||||
収録物識別子 | 1349-1113 | |||||
書誌レコードID | ||||||
収録物識別子タイプ | NCID | |||||
収録物識別子 | AA1192675X | |||||
資料番号 | ||||||
内容記述タイプ | Other | |||||
内容記述 | 資料番号: AA0062302007 | |||||
レポート番号 | ||||||
内容記述タイプ | Other | |||||
内容記述 | レポート番号: JAXA-RR-13-010 |