質問: 乃木坂や豊田市、羽柴秀吉町などの人名と地名を関連させたデータベースを作ってみたいのですが、日本郵政から住所のexcel file、人名は歴史上の人名のデータベースから引っ張ってこようと思うのですが。その後どれだけの人数がいるのかを調べたいのですがどうしたら良いでしょうか?機械学習はkaggleでtitanicの問題は一応解いたことがある程度です。ここまでの内容でも、このフォーラムの趣旨とかけはなれていてたらすみません。 Edit1: コメントで御指摘頂き、関連の定義が不明確という事。歴史上の人物、とりあえず国会図書館に人名が登録されている人を語源とする地名ー人名を関連させるデータを出してみたいです。
回答: 「それぞれの地名が人名に関するものかどうか判定する二値分類問題」は、少なくともこのままだと、統計的機械学習やディープラーニングで扱うよりかは、人手でタグ付けした方が簡単なのではないかと思いました。理由は2つあります。 1. データ数が少なそう。総務省によると、2017年10月現在の市町村数は1718個だそうです。ただし、区)・群の名前や大字・小字の名前まで含めるとなるともっと数は多くなるので、そうなると話は別かもしれません。日本郵便の郵便番号データの数は12万件、国土地理協会の駅名データは9千〜1万件、Wikipedia の「日本の地名」カテゴリに含まれるページ数は1千〜2千件程度のようです。 2. 同じ地名がそれなりの数ある。たとえば Wikipedia によると「豊田町」は13個あります。これらは入力としては(何かしら工夫しない限り)同一となってしまうので、全て同じカテゴリーに分類されてしまうと思われます。これは困るのではないでしょうか。(「同一名称の市区町村一覧」という Wikipedia の記事によると無茶苦茶に多いわけではないので、上手く前処理すればなんとかなるのかもしれません。) 人手でやるなら1700個という数は少し多いので、地名の中から人名と部分一致するものだけフィルターするという作業はコンピュータにやらせても良いかもしれません(地名の表記と人名の表記が一致しているという前提のもとですが......)。 ### 追記 「日本の人名地名一覧」という Wikipedia の記事を見つけました。とっかかりには良いかもしれません。