統合スキーマを利用したディジタルライブラリィ検索システムの実装

Size: px

Start display at page:

Download "統合スキーマを利用したディジタルライブラリィ検索システムの実装"

のぶあきふじた
6 years ago
Views:

1 津波ディジタルライブラリ開発平成 19 年 11 月 16 日群馬大学名誉教授金森吉成

2 内容はじめに津波ディジタルライブラリのシステム概要津波ディジタルライブラリの応用例

3 はじめに津波ディジタルライブラリ約 6 年間我々の研究グループで開発し公開しているディジタルライブラリである津波災害に関する新聞記事災害報告書などの書籍ビデオ映像 CG 現地調査写真などのデータからなる

9 津波ディジタルライブラリのシステム概要既存の商用データベースシステム (ORACLE) を利用商品名 MiracleLINUX

10 データベース新聞書籍は XML で構造化して XML データベースシステムを利用して管理それ以外のデータは HTML 文書内に直接リンクを記述

11 XML データベースの例 ( 新聞 XML 文書 ) 掲載面を単位に XML で構造化書誌情報部分と本文部分

12 新聞 XML 文書のツリー構造 newspaper metadata page title subject num article date language format rights title text article creator publisher type source coverage identifier description contributor relation

13 <?xml version="1.0" encoding="euc-jp"?> <newspaper> <metadata> <title> 東奥日報 </title> <creator> 東奥日報社 </creator> <subject> チリ地震津波 </subject> <subject> 昭和 35 年 5 月 24 日 </subject> <subject>1960 年 5 月 24 日 </subject> <publisher> 東奥日報社 </publisher> <date> </date> <type>newspaper</type> <format>text</format> <identifier> </identifier> <language>ja</language> <rights> 津波ディジタルライブラリィ " </metadata> <page> <num>2</num> <article> <title> 一部の工事に手抜き津波にもろかった八戸第二魚市場東洋一は名前だけ皮肉にも鮫市場は無キズ </title> <text> チリ地震津波で八戸市営第二魚市場は水揚げ場の一部が陥没し使用不可能になった昨年八月完成東洋一とまでその偉容をほこる同市自慢の建物だけに関係者に与えたショックは大きいとくに東洋一をそのまま信じてきた市民の間には余りのもろさに工事に不正があったのではないかとかもともと建設地としては不適当だったのではないかという疑惑まで広まっている有様津波災害対策のため開かれた臨時市議会でもこの問題が大きく取り上げられた完成一年足らずの間にあえなく事故を起こした原因はどこにあったのかこれを打診してみよう同魚市場は市議会をはじめ同港の水産港湾関係のトップレベル構成する魚市場建設促進協議会が母体となって計画を進め日建設計の設計監督で戸田組が請け負い一億六千万円の巨費をかけて完成したまた川口港の上に太平洋の荒波がまともにぶつかるところでも大丈夫かという疑問については日本開発会社が最適の太鼓判を押した地質は砂地だが建設地としては泥地帯まさること数倍ということだった二十四日朝の津波の際も関係者は鮫の第一魚市場があぶない長されそうだと心配はしたが第二魚市場には一片の不安も持たなかったところが津波ったあとの第二魚市場は第魚市場がほとんど無傷だったのに比べまさにさんたんたる有様幅七メートル長さ二百メートルのエプロン岸壁 ( 漁港岸壁として県が市場とは別個に施工 ) はめちゃめちゃになり市場水揚げ場は約十五メートルを四十三メートルにわたってぽっかり穴があいた岸壁だけでその損害は約九千万円 ( 八戸港務所調べ ) だという水揚げ場の陥没は直接には一た押し寄せた波が海に逆流する際附近を流れる下水道を通って水揚げ場下に設けた幅四メートル深さ二メートルの排水こうに一時に集まり土台の土を掘ったのが原因で第一の問題はここにあるこの排水側こうは市場の側線にもあるが鉄道側はこの口を厳重にコンクリートで固めているのに対し市場は側こう下わずか五十センチ ( この部分は土 ) のところから常に水が流されていた一番悪いところをやられてしまったと工事関係者はいっているが一番悪いところと知っていたならなぜその部分も床工事を鉄筋にしなかったかまた側線は貨車の重みがかかから鉄道側は厳重に工事したともいうがもっと深く強く固めれなかったかと関係者はこの点を強く指摘している第二の問題は漁港岸壁がくずれたことだが魚市場を建てる前にできていた岸壁がまさかこんなことになるとはと関係者が語るように確かに岸壁あっての魚市場だったところが当初四メートルの水深で計画施工した岸壁はその後六ないし五メートルの水深に変更しゅんせつされていた一部だが設計書通りでない手抜かりがあったし大きな不正はないにしても岸壁工事にも市場の排泄こうの設計工事にも落ち度があったことは関係者が認めている津波の予想はしなかったという地震国日本それも三陸津波の被害経験を持つ三陸海岸の八戸だけにもっともっと慎重な計画がほしかったし恒久的施設である同市場ならばなおさらだとの声が高い岸壁は今後運輸省の災害査定によって予算を獲得早急に復旧に努めるがくずれた岸壁を引き上げ旧に復すには長い期間が必要なことからこの岸壁はつぶしてさらに前方に岸壁を作る計画ともいわれるがこの場合そうでなくても狭いといわれる川幅が約十メートルせばめられる結果なるまた現在が限度といわれる水揚げ場の幅も広がりそれだけ機能が失われることにもなりかねないこののかね合いも関係者にとっては悩みの種となっている早急な復旧とともに今後にこっとう品 ( 旧鮫魚市場 ) が新品より強かったなどとふたたび悪口をいわれないよう慎重万全な策で工してもらいたものだ </text> </article> </page> </newspaper>

14 検索要求の例宮古に関する書籍新聞 CG 現地写真など全てのデータがほしいという検索を行うには別々に存在する検索閲覧システムに対して宮古をキーワードとする検索を繰り返しその都度得られるデータを整理して収集する必要がある

15 本研究の提案津波ディジタルライブラリ内の全データを検索対象として XML データベースシステムで管理されているデータや HTML で記述されているデータを横断的に扱うシステム

16 本研究の提案 XML データベースの統合統合スキーマの設計統合システムの拡張要約文の利用 XML 文書以外のデータ

17 統合スキーマの設計統合スキーマ様々なデータを網羅し検索可能とするための共通の構造

18 統合スキーマのツリー構造 view keyword substance document document title section title section section title text img section title text img section caption link imgtype caption imgtype link title text img

19 統合スキーマによる検索統合スキーマへの検索をそれぞれのデータへの検索に変換して全てのデータを検索データの異種性を意識することなく全てのデータを横断的に検索可能

20 要約文の利用膨大な量の文書を精読するのは困難 XML 文書を要約した要約 XML 文書を利用通常の XML 文書か要約 XML 文書のどちらを検索するかを選択

21 <newspaper> <metadata> <title> 東奥日報 </title> <creator> 東奥日報社 </creator> <subject> チリ地震津波 </subject> <subject> 昭和 35 年 5 月 24 日 </subject> <subject>1960 年 5 月 24 日 </subject> <publisher> 東奥日報社 </publisher> <date> </date> <type>newspaper</type> <format>text</format> <identifier> </identifier> <language>ja</language> <rights> 津波ディジタルライブラリィ " </metadata> <page> <num>2</num> <article> <title> 一部の工事に手抜き津波にもろかった八戸第二魚市場東洋一は名前だけ皮肉にも鮫市場は無キズ </title> <text> チリ地震津波で八戸市営第二魚市場は水揚げ場の一部が陥没し使用不可能になった昨年八月完成東洋一とまでその偉容をほこる同市自慢の建物だけに関係者に与えたショックは大きい津波災害対策のため開かれた臨時市議会でもこの問題が大きく取り上げられた </text> </page> </newspaper>

22 XML 文書以外のデータ HTML 文書のタグを除いた部分を統合スキーマの部分文書とみなす XML 文書同様にデータベースに格納

23 実装

24 後置問合わせ処理部置問合わせ処理部形式のXML 文書前データベース部利用者キーワードの入力閲覧 GUI キーワード統合スキーマ形式の XML 文書検索文の生成データの整形検索文文書ごとの XML スキーマ XMLDBMS (Oracle XML DB) HTML データ検索検索検索 XML データ XML データ検索 XML データ HTMLDB 新聞 XMLDB 論文 XMLDB 要約 XMLDB

25 検索文の生成各々のデータベースでは SQL でデータの操作を行う入力されたキーワードから SQL を作成

26 統合スキーマへの検索部分文書を検索 /view/substance/document//section[/view/keyword=$key]

27 SQL のテンプレート Select $id, extraxt( $xmltype, $section).getclobval() From $table Where contains( $xmltype, $KEY inpath( $sectionchild ) ) order by $id 新聞 XML データベースへの SQL Select id,extraxt(xmldoc, /newspaper/page/article).getclobval() From newspaper Where contains(xmldoc, 宮古 inpath( /newspaper/page//article/title) or contains(xmldoc, 宮古 inpath(/newspaper/page//article/text) order by id

28 デモリンク

29 まとめと今後の課題津波ディジタルライブラリィ内の全てのデータを横断的に検索するシステムを実装データの異種性を意識することなく一度のキーワード入力で横断的に検索可能ユーザの評価による改良

WebAPI 及びデータフォーマット (DC-NDL) の概要国立国会図書館電子情報部電子情報サービス課 1

WebAPI 及びデータフォーマット (DC-NDL) の概要国立国会図書館電子情報部電子情報サービス課 1 内容 I. 国立国会図書館サーチとの連携方式 II. 国立国会図書館サーチへ提供いただくメタデータ方式 2 I. 国立国会図書館サーチとの連携方式 3 国立国会図書館サーチ (NDL サーチ ) とは多彩な検索支援多様なルート多様な検索対象 4 外部提供インタフェース (API)

統合スキーマを利用した ディジタルライブラリィ検索システムの実装

統合スキーマを利用したディジタルライブラリィ検索システムの実装