Wikidataに基づく大規模ジオコーディングデータセット

ジオコーディングは，自然言語で記述された参照表現（メンション）から，現実世界の位置を表す地理座標（主に緯度・経度）に変換する基礎技術である．ジオコーディングの結果は，テキスト内で記述された人間活動や事物・事象の関わる出来事がどこで発生したのかを正確に把握するために有用であり，観光管理，災害管理，疾病監視など，さまざまな応用可能性が秘められている[1]．ジオコーディング手法は，直接推定法と間接推定法に大別される．直接推定法は，メンションから直接地理座標を推測する．間接推定法は，図1のように，メンションを地理データベース(DB)の適切なエントリのIDに紐付け，そのIDに付随する地理座標を出力する．IDを介することで入出力が疎結合となり，用途にあわせて異なる属性を利用したり，IDを他の知識ベースと紐付けることも可能となる[2]．このような利点にも関わらず，日本語の大規模なジオコーディングデータセットは直接推定法のためのもののみであり[3]，間接推定法のためのデータセットは小規模なもののみが存在する[4]．本稿では，現時点で最大規模となる間接推定法のための日本語ジオコーディングデータセットを構地理DBエントリname=十二社熊野神社prefecture=東京都coordinate=(35.6902,139.6883)…予測結果入力文章十二社熊野神社都庁前から徒歩で熊野神社に行きました緯度35.6902経度139.6883ジオコーダWikidataQ185125:浜松市富幕⼭(とんまくやま)は、静岡県浜松市浜名区と愛知県新城市に…Description:静岡県の市Alsoknownas:濱松市,楽器の街coordinatelocation:34.710889,137.726194（浜松市,Q185125）IDの紐付け浜松市場所参照表現(メンション)データセットWikipedia築した．世界各国の国名や市区町村といった粗い粒度レベルのものから，学校や地下鉄といった細かな粒度レベルのものまでを広く含む特徴を持つ．このようなデータセットを，Wikipediaの記事の冒頭に出現するメンションおよびメンションに紐づく，地理情報を持つWikidataエントリから自動構築した．本データセットの構築過程の概要を図2に示す．本データセットで学習したジオコーディングモデルは，別ドメインである新聞記事についても高精度で解析可能であることを示した．本データセットを復元・構築するためのコードは一般に広く公開する1）．1）https://github.com/naist-nlp/wiki-geocoding-dataset.