Hadoop・HBaseを利用したJ-PARC運転データアーカイビングの現状

Status of J-PARC operation data archiving using Hadoop and HBase

菊澤 信宏 ; 吉位 明伸; 池田 浩; 加藤 裕子

Kikuzawa, Nobuhiro; Yoshii, Akinobu; Ikeda, Hiroshi; Kato, Yuko

J-PARCにおいては多数の機器により制御されており、Linac, RCSに関して約64000点にも及ぶEPICSレコードのデータを収集している。現状ではRDBMSのPostgreSQLを利用したシステムにてデータアーカイブを行っているが、性能や拡張性に対する諸問題に対応するため、分散処理フレームワークのHadoopと分散データベースのHBaseを利用した次世代アーカイブシステムについて検討し、テストシステムの実装と利用を行っている。このテストシステムの結果について報告する。

J-PARC is consists of much equipment. In Linac and 3GeV synchrotron, the data of over the 64,000 EPICS records for these apparatus control is being collected. The data has been being stored by a RDB system using PostgreSQL now, but it is not enough in availability, performance, and extendibility. Therefore, the new system architecture is required, which is rich in the pliability and can respond to the data increasing continuously for years to come. In order to cope with this problem, we considered adoption of the distributed database architecture and constructed the demonstration system using HBase. We present results of these demonstration.