Item type |
テクニカルレポート / Technical Report(1) |
公開日 |
2015-03-26 |
タイトル |
|
|
タイトル |
IUGONETメタデータ登録・管理システムの処理性能評価 |
言語 |
|
|
言語 |
jpn |
キーワード |
|
|
言語 |
en |
|
主題Scheme |
Other |
|
主題 |
IUGONET, metadata, metadata management, Git, DSpace |
資源タイプ |
|
|
資源タイプ識別子 |
http://purl.org/coar/resource_type/c_18gh |
|
資源タイプ |
technical report |
その他のタイトル(英) |
|
|
その他のタイトル |
Performance study of IUGONET metadata management system |
著者 |
堀, 智昭
梅村, 宜生
阿部, 修司
小山, 幸伸
田中, 良昌
林, 寛生
上野, 悟
新堀, 淳樹
佐藤, 由佳
八木, 学
Hori, Tomoaki
Umemura, Norio
Abe, Shuji
Koyama, Yukinobu
Tanaka, Yoshimasa
Hayashi, Hiroo
Ueno, Satoru
Shinbori, Atsuki
Sato, Yuka
Yagi, Manabu
|
著者所属 |
|
|
|
名古屋大学太陽地球環境研究所 |
著者所属 |
|
|
|
名古屋大学太陽地球環境研究所 |
著者所属 |
|
|
|
九州大学国際宇宙天気科学・教育センター |
著者所属 |
|
|
|
京都大学理学研究科附属地磁気世界資料解析センター |
著者所属 |
|
|
|
国立極地研究所 |
著者所属 |
|
|
|
京都大学生存圏研究所 : 富士通エフ・アイ・ピー株式会社 |
著者所属 |
|
|
|
京都大学理学研究科附属天文台 |
著者所属 |
|
|
|
京都大学生存圏研究所 |
著者所属 |
|
|
|
国立極地研究所 |
著者所属 |
|
|
|
東北大学理学研究科附属惑星プラズマ・大気研究センター |
著者所属(英) |
|
|
|
en |
|
|
Solar-Terrestrial Environment Laboratory, Nagoya University |
著者所属(英) |
|
|
|
en |
|
|
Solar-Terrestrial Environment Laboratory, Nagoya University |
著者所属(英) |
|
|
|
en |
|
|
International Center for Space Weather Science and Education, Kyushu University |
著者所属(英) |
|
|
|
en |
|
|
Data Analysis Center for Geomagnetism and Space Magnetism, Graduate School of Science, Kyoto University |
著者所属(英) |
|
|
|
en |
|
|
National Institute of Polar Research |
著者所属(英) |
|
|
|
en |
|
|
Research Institute for Sustainable Humanosphere, Kyoto University : FUJITSU FIP CORPORATION |
著者所属(英) |
|
|
|
en |
|
|
Kwasan and Hida Observatories, Graduate School of Science, Kyoto University |
著者所属(英) |
|
|
|
en |
|
|
Research Institute for Sustainable Humanosphere, Kyoto University |
著者所属(英) |
|
|
|
en |
|
|
National Institute of Polar Research |
著者所属(英) |
|
|
|
en |
|
|
Planetary Plasma and Atmospheric Research Center, Tohoku University |
出版者 |
|
|
出版者 |
宇宙航空研究開発機構(JAXA) |
出版者(英) |
|
|
出版者 |
Japan Aerospace Exploration Agency (JAXA) |
書誌情報 |
宇宙航空研究開発機構研究開発報告: 宇宙科学情報解析論文誌: 第2号
en : JAXA Research and Development Report: Journal of Space Science Informatics Japan Volume 2
巻 JAXA-RR-12-006,
p. 71-78,
発行日 2013-03-29
|
抄録 |
|
|
内容記述タイプ |
Abstract |
|
内容記述 |
本論文では,大学間連携プロジェクト「超高層大気長期変動の全球地上ネットワーク観測・研究」(IUGONET) において、作成されたメタデータの受付やメタデータ・データベースへの登録を行っている「メタデータ登録・管理システム」のメタデータ登録処理に関する性能試験の結果について報告する.メタデータ登録・管理システムは,フリーのバージョン管理ソフトウェアであるGit を利用したメタデータ受付部と,そこからメタデータ・データベースへメタデータを登録するメタデータインポート部の,2つの処理部で構成される.この2つの処理部の性能を評価するために,実際に作成・登録されたメタデータを用いて,物理マシンおよび仮想マシン上に構築したLinux 環境のそれぞれについて,メタデータの処理速度を計測した.その結果,Git によるメタデータ受付部は物理マシンか仮想マシンかに依らず,メタデータ総数が500 万件レベルまで増えても数分以内で処理が完了するのに対して,メタデータインポート部は処理時間が数時間から数十時間とかなり長くなり,特に検索エンジンであるLucene のインデックス更新については,物理マシンにおける実行速度が仮想マシンのそれより約4 倍高速であることがわかった.メタデータインポート部を物理マシン上に実装した場合,メタデータ総数500 万件では,新規登録メタデータ数10 万件につき5 時間弱プラスLucene インデックス更新で21 時間ほど処理時間がかかると見積もられる. |
抄録(英) |
|
|
内容記述タイプ |
Other |
|
内容記述 |
This paper reports on the benchmark test of the metadata management system developed by the Inter-university Upper atmosphere Global Observation NETwork (IUGONET) project. The IUGONET metadata management system consists of the metadata reception module based on file repositories of Git, which is a widely-used version control software, and the metadata import module to register metadata to the metadata database using the DSpace commands. We made the performance assessments for these two modules in terms of the processing speed for registering/importing metadata both on a native Linux platform and a virtualized Linux platform. As a result, the metadata reception module processes properly even millions of registered metadata within several minutes at most, showing roughly the similar performance for the native and virtualized platform. On the other hand, the metadata import module needs much longer processing times of several to a few tens of hours for the same amount of metadata. As compared with the virtualized platform, the native platform gives a four times faster speed for updating indices for the built-in search engine based on Lucene. From a perspective of the regular operation of the metadata management system, the metadata import module runs more efficiently on the native Linux platform and it is estimated by our performance test that it takes about 5 hours to newly import 10(exp5) metadata files and subsequently takes about 21 hours to update the Lucene indices for the registered metadata of 5× 10(exp6) in total. |
内容記述 |
|
|
内容記述タイプ |
Other |
|
内容記述 |
形態: カラー図版あり |
内容記述(英) |
|
|
内容記述タイプ |
Other |
|
内容記述 |
Physical characteristics: Original contains color illustrations |
ISSN |
|
|
収録物識別子タイプ |
ISSN |
|
収録物識別子 |
1349-1113 |
書誌レコードID |
|
|
収録物識別子タイプ |
NCID |
|
収録物識別子 |
AA1192675X |
資料番号 |
|
|
内容記述タイプ |
Other |
|
内容記述 |
資料番号: AA0061914008 |
レポート番号 |
|
|
内容記述タイプ |
Other |
|
内容記述 |
レポート番号: JAXA-RR-12-006 |