WEKO3
-
RootNode
アイテム
簡潔データ構造のオンライン構築とブルームフィルタによる検索性能の向上
https://ipsj.ixsq.nii.ac.jp/records/79661
https://ipsj.ixsq.nii.ac.jp/records/79661cb1b0dd3-708d-4cb3-8ed6-ac5793a7a7fb
名前 / ファイル | ライセンス | アクション |
---|---|---|
![]() |
Copyright (c) 2011 by the Information Processing Society of Japan
|
|
オープンアクセス |
Item type | Trans(1) | |||||||
---|---|---|---|---|---|---|---|---|
公開日 | 2011-12-28 | |||||||
タイトル | ||||||||
タイトル | 簡潔データ構造のオンライン構築とブルームフィルタによる検索性能の向上 | |||||||
タイトル | ||||||||
言語 | en | |||||||
タイトル | Online Building of Succinct Data Structures and Search Performance Improvement by Bloom Filters | |||||||
言語 | ||||||||
言語 | jpn | |||||||
キーワード | ||||||||
主題Scheme | Other | |||||||
主題 | 研究論文 | |||||||
資源タイプ | ||||||||
資源タイプ識別子 | http://purl.org/coar/resource_type/c_6501 | |||||||
資源タイプ | journal article | |||||||
著者所属 | ||||||||
筑波大学大学院システム情報工学研究科コンピュータサイエンス専攻/日本アイ・ビー・エム大和ソフトウェア研究所 | ||||||||
著者所属 | ||||||||
日本アイ・ビー・エム東京基礎研究所 | ||||||||
著者所属 | ||||||||
株式会社Preferred Infrastructure | ||||||||
著者所属 | ||||||||
筑波大学大学院システム情報工学研究科コンピュータサイエンス専攻 | ||||||||
著者所属(英) | ||||||||
en | ||||||||
Department of Computer Science, University of Tsukuba / IBM Yamato Software Laboratory | ||||||||
著者所属(英) | ||||||||
en | ||||||||
IBM Research - Tokyo | ||||||||
著者所属(英) | ||||||||
en | ||||||||
Preferred Infrastructure, Inc. | ||||||||
著者所属(英) | ||||||||
en | ||||||||
Department of Computer Science, University of Tsukuba | ||||||||
著者名 |
小柳, 光生
× 小柳, 光生
|
|||||||
著者名(英) |
Teruo, Koyanagi
× Teruo, Koyanagi
|
|||||||
論文抄録 | ||||||||
内容記述タイプ | Other | |||||||
内容記述 | 簡潔データ構造は空間効率のきわめて高いデータ構造であり,その一種であるLOUDS(Level-Order Unary Degree Sequence)を用いてトライ木を作れば,大量の文字列を少ない容量で格納できる.インクリメンタルにデータを追加しながらLOUDSを構築するには,差分を保持するLOUDSを複数作成して,それらを定期的にマージする方法がある.しかし,この方法では,検索すべきLOUDSの数が増え,検索速度が低下するという問題がある.本論文では,この問題を解決するために,各LOUDSにブルームフィルタを設置する手法を提案する.提案手法では,ブルームフィルタによって検索の不要なLOUDSをスキップし,検索コストを削減する.実験により,ブルームフィルタの精度が全体の性能に与える影響を明らかにする.650万件の語彙を含む約2.4億件の単語データから辞書を作成する実験を行い,提案方式の有効性を確認した. | |||||||
論文抄録(英) | ||||||||
内容記述タイプ | Other | |||||||
内容記述 | Succinct data structures are extremely space efficient data representations. LOUDS (Level-Order Unary Degree Sequence) is a succinct data structure for trees which can be used as a TRIE to store a large number of strings. To add data incrementally into LOUDS, we can use a method to create multiple LOUDS as deltas and to merge them periodically. In this approach, there is a problem that the search performance degrades proportional to the number of LOUDS. To solve this problem, we propose a method to set bloom filters with created LOUDS, respectively. The bloom filters avoid unnecessary searches in many cases that the search key is not included in the key set of LOUDS. The efficiency of our method is confirmed by the experiment using 240 million word stream that consists of 6.5 million unique keywords. | |||||||
書誌レコードID | ||||||||
収録物識別子タイプ | NCID | |||||||
収録物識別子 | AA11464847 | |||||||
書誌情報 |
情報処理学会論文誌データベース(TOD) 巻 4, 号 4, p. 1-10, 発行日 2011-12-28 |
|||||||
ISSN | ||||||||
収録物識別子タイプ | ISSN | |||||||
収録物識別子 | 1882-7799 | |||||||
出版者 | ||||||||
言語 | ja | |||||||
出版者 | 情報処理学会 |