• 概要

• 利用・申込方法

  • 利用許諾料（有償版）
  • 有償版ご契約の方々へのご案内
  • Ｑ＆Ａ

• BCCWJの設計

  • サンプリング
  • XMLによる文書構造の記述
  • 形態論情報
  • XMLによる形態論情報と文書構造情報の統合

• 有償版公開データ

  • C-XML詳細
  • M-XML詳細
  • TSV詳細
  • 書誌情報
  • バグ修正情報

• 「中納言」版公開データ

  • 語彙表
  • 文字表・表記表
  • 長単位語数表
  • 短単位語数表
  • 「中納言」版データ更新履歴
• ドキュメント

• 研究成果

  • 『現代日本語書き言葉均衡コーパス』(Version 1.0)語彙表(obsolete)
  • 報告書類
  • BCCWJを用いた研究業績一覧

• ホーム
• 現代日本語書き言葉均衡コーパス（BCCWJ）
　　 　　
• XMLによる形態論情報と文書構造情報の統合

XMLによる形態論情報と文書構造情報の統合 M-XML

M-XMLは、文字ベースのC-XMLフォーマットをもとにして、可変長・固定長サンプルを統合し、言語構造を一定程度反映させたXMLフォーマットです。短単位・長単位の形態論情報を、階層構造を維持したまま埋め込み、言語構造に関わる情報を扱いやすくしています。M-XMLは、次のような言語単位の階層構造を持っています。

形態論情報付きXMLフォーマットの階層構造

C-XMLとの違い

C-XMLとM-XMLのタグの主な違いは次の通りです。

1． 可変長サンプルの文書構造への統合

M-XMLでは可変長サンプルの文書構造だけを保持し、可変長部分からはみ出している固定長部分は単純なコンテナで囲み、インライン要素だけを残しました。

2． 文書定義の統一

C-XMLでは若干異なる文書定義（DTD）によっていた知恵袋・ブログ・教科書・韻文のサンプルをM-XMLでは共通の文書定義に合わせました。そのためにサブコーパス独自のタグの一部を変更しています。

3． 文（sentence）タグの修正

C-XMLではsentenceタグが多重の入れ子になることを認めていましたが、M-XMLではこれを修正しました。上位のsentenceはsuperSentenceという文書構造タグとし、下位のsentenceはそのまま残し、superSentence直下のテキストを新たにsentence type= " fragment "としています。

４．交叉するタグの修正

ルビ（ruby）や引用（quote）タグが形態論情報の切れ目と一致しないなどの問題がある場合は、問題が生じないようにタグを修正しています。

５．数字変換（NumTrans）タグの追加

形態素解析用のための数字変換を行った部分に、NumTransや fractionタグが追加されています。

形態論情報の階層構造の例

以下はそのサンプルとして一つの文（sentence要素）を抜き出したものです（見やすさのため一部の属性を省略）。