WEKO3
アイテム
{"_buckets": {"deposit": "8eb6e9ee-98b5-4ffc-af9e-3cf49236bb47"}, "_deposit": {"created_by": 2, "id": "414", "owners": [2], "pid": {"revision_id": 0, "type": "depid", "value": "414"}, "status": "published"}, "_oai": {"id": "oai:fun.repo.nii.ac.jp:00000414", "sets": ["33", "34"]}, "author_link": ["722", "13"], "item_9_alternative_title_15": {"attribute_name": "その他の言語のタイトル", "attribute_value_mlt": [{"subitem_alternative_title": "An Attempt to Adapt the Client Cooperation Type Deduplication Method to Object Storage"}]}, "item_9_biblio_info_5": {"attribute_name": "書誌情報", "attribute_value_mlt": [{"bibliographicIssueDates": {"bibliographicIssueDate": "2019-07-26", "bibliographicIssueDateType": "Issued"}, "bibliographicIssueNumber": "29", "bibliographicVolumeNumber": "2019-HPC-170", "bibliographic_titles": [{"bibliographic_title": "第170回ハイパフォーマンスコンピューティング研究発表会(SWoPP2019)"}]}]}, "item_9_description_3": {"attribute_name": "抄録", "attribute_value_mlt": [{"subitem_description": "近年,動画ファイルや画像データを始めとする非構造化データの増大に伴い,従来のファイルストレージのI/O にボトルネックが生じるようになった.こうした,急激に増大するデータに対する課題を解決する手段としてオブジェクトストレージと呼ばれるストレージシステムが注目を集めている.オブジェクトストレージでは,データをオブジェクトという単位でフラットな空間に保存することで安価に大容量なストレージを構築することが可能となった.一方でストレージの容量効率を高める重複排除技術も注目を集めているが,重複排除の処理には大量のメモリと処理のための時間が必要となる.そのため,低コストかつ大容量を特徴とするオブジェクトストレージにおいて通常の重複排除を適応させることは難しい.\n本研究では,クライアント協調型の重複排除方式と提案することで重複排除にかかる処理負荷の一部をクライアント側へオフロードし,オブジェクトストレージに対する重複排除の適応を試みる.本稿では,提案方式実現へ向けインライン方式での重複排除機能を搭載した簡易オブジェクトストレージを実装し.重複排除の負荷実験を行った.結果として実験環境下にてデータを固定長サイズ読み込み,そのハッシュを計算する処理が,データをストレージに保存する処理と比較した時に,最大で約130 倍メモリを消費していることが分かった.", "subitem_description_type": "Abstract"}]}, "item_9_publisher_17": {"attribute_name": "出版者", "attribute_value_mlt": [{"subitem_publisher": "情報処理学会"}]}, "item_9_select_10": {"attribute_name": "単著共著", "attribute_value_mlt": [{"subitem_select_item": "共著/joint"}]}, "item_9_select_8": {"attribute_name": "査読有無", "attribute_value_mlt": [{"subitem_select_item": "なし/no"}]}, "item_9_select_9": {"attribute_name": "研究業績種別", "attribute_value_mlt": [{"subitem_select_item": "国内学会/Domestic Conference"}]}, "item_9_version_type_13": {"attribute_name": "著者版フラグ", "attribute_value_mlt": [{"subitem_version_resource": "http://purl.org/coar/version/c_970fb48d4fbd8a85", "subitem_version_type": "VoR"}]}, "item_creator": {"attribute_name": "著者", "attribute_type": "creator", "attribute_value_mlt": [{"creatorNames": [{"creatorName": "七海, 龍平"}], "nameIdentifiers": [{"nameIdentifier": "722", "nameIdentifierScheme": "WEKO"}]}, {"creatorAffiliations": [{"affiliationNameIdentifiers": [{"affiliationNameIdentifier": "", "affiliationNameIdentifierScheme": "ISNI", "affiliationNameIdentifierURI": "http://www.isni.org/isni/"}], "affiliationNames": [{"affiliationName": "", "affiliationNameLang": "ja"}]}], "creatorNames": [{"creatorName": "伊藤, 恵", "creatorNameLang": "ja"}], "familyNames": [{"familyName": "伊藤", "familyNameLang": "ja"}], "givenNames": [{"givenName": "恵", "givenNameLang": "ja"}], "nameIdentifiers": [{"nameIdentifier": "13", "nameIdentifierScheme": "WEKO"}, {"nameIdentifier": "30303324", "nameIdentifierScheme": "e-Rad", "nameIdentifierURI": "https://kaken.nii.ac.jp/ja/search/?qm=30303324"}]}]}, "item_files": {"attribute_name": "ファイル情報", "attribute_type": "file", "attribute_value_mlt": [{"accessrole": "open_date", "date": [{"dateType": "Available", "dateValue": "2022-01-28"}], "displaytype": "detail", "download_preview_message": "", "file_order": 0, "filename": "IPSJ-HPC19170029.pdf", "filesize": [{"value": "404.2 kB"}], "format": "application/pdf", "future_date_message": "", "is_thumbnail": false, "licensetype": "license_free", "mimetype": "application/pdf", "size": 404200.0, "url": {"label": "IPSJ-HPC19170029.pdf", "url": "https://fun.repo.nii.ac.jp/record/414/files/IPSJ-HPC19170029.pdf"}, "version_id": "4921c17b-542f-48be-9ff8-6bbc78b77149"}]}, "item_language": {"attribute_name": "言語", "attribute_value_mlt": [{"subitem_language": "jpn"}]}, "item_resource_type": {"attribute_name": "資源タイプ", "attribute_value_mlt": [{"resourcetype": "conference paper", "resourceuri": "http://purl.org/coar/resource_type/c_5794"}]}, "item_title": "オブジェクトストレージに対するクライアント協調型の重複排除方式適応への試み", "item_titles": {"attribute_name": "タイトル", "attribute_value_mlt": [{"subitem_title": "オブジェクトストレージに対するクライアント協調型の重複排除方式適応への試み"}]}, "item_type_id": "9", "owner": "2", "path": ["33", "34"], "permalink_uri": "http://hdl.handle.net/10445/8787", "pubdate": {"attribute_name": "公開日", "attribute_value": "2019-07-29"}, "publish_date": "2019-07-29", "publish_status": "0", "recid": "414", "relation": {}, "relation_version_is_last": true, "title": ["オブジェクトストレージに対するクライアント協調型の重複排除方式適応への試み"], "weko_shared_id": -1}
オブジェクトストレージに対するクライアント協調型の重複排除方式適応への試み
http://hdl.handle.net/10445/8787
http://hdl.handle.net/10445/87871d5eea1a-6f27-4fe0-bd4c-71e98ac32458
名前 / ファイル | ライセンス | アクション |
---|---|---|
IPSJ-HPC19170029.pdf (404.2 kB)
|
|
Item type | 会議発表論文 / Conference Paper(1) | |||||
---|---|---|---|---|---|---|
公開日 | 2019-07-29 | |||||
タイトル | ||||||
タイトル | オブジェクトストレージに対するクライアント協調型の重複排除方式適応への試み | |||||
言語 | ||||||
言語 | jpn | |||||
資源タイプ | ||||||
資源タイプ識別子 | http://purl.org/coar/resource_type/c_5794 | |||||
資源タイプ | conference paper | |||||
著者 |
七海, 龍平
× 七海, 龍平× 伊藤, 恵 |
|||||
抄録 | ||||||
内容記述タイプ | Abstract | |||||
内容記述 | 近年,動画ファイルや画像データを始めとする非構造化データの増大に伴い,従来のファイルストレージのI/O にボトルネックが生じるようになった.こうした,急激に増大するデータに対する課題を解決する手段としてオブジェクトストレージと呼ばれるストレージシステムが注目を集めている.オブジェクトストレージでは,データをオブジェクトという単位でフラットな空間に保存することで安価に大容量なストレージを構築することが可能となった.一方でストレージの容量効率を高める重複排除技術も注目を集めているが,重複排除の処理には大量のメモリと処理のための時間が必要となる.そのため,低コストかつ大容量を特徴とするオブジェクトストレージにおいて通常の重複排除を適応させることは難しい. 本研究では,クライアント協調型の重複排除方式と提案することで重複排除にかかる処理負荷の一部をクライアント側へオフロードし,オブジェクトストレージに対する重複排除の適応を試みる.本稿では,提案方式実現へ向けインライン方式での重複排除機能を搭載した簡易オブジェクトストレージを実装し.重複排除の負荷実験を行った.結果として実験環境下にてデータを固定長サイズ読み込み,そのハッシュを計算する処理が,データをストレージに保存する処理と比較した時に,最大で約130 倍メモリを消費していることが分かった. |
|||||
書誌情報 |
第170回ハイパフォーマンスコンピューティング研究発表会(SWoPP2019) 巻 2019-HPC-170, 号 29, 発行日 2019-07-26 |
|||||
査読有無 | ||||||
値 | なし/no | |||||
研究業績種別 | ||||||
値 | 国内学会/Domestic Conference | |||||
単著共著 | ||||||
値 | 共著/joint | |||||
著者版フラグ | ||||||
出版タイプ | VoR | |||||
出版タイプResource | http://purl.org/coar/version/c_970fb48d4fbd8a85 | |||||
その他の言語のタイトル | ||||||
その他のタイトル | An Attempt to Adapt the Client Cooperation Type Deduplication Method to Object Storage | |||||
出版者 | ||||||
出版者 | 情報処理学会 |