DBpedia_Spotlight

**DBpedia** （_DB_ 乃是資料庫，database 的意思，也可做資料庫百科全書解） 是一項從維基百科裡萃取結構化內容的專案計畫。這些計畫所得的結構化資訊，也將放在網際網路中公開讓人取閱。DBpedia 允許使用者查詢跟維基百科相關資源之間的關係與性質，甚至也可查詢從維基百科外連到其他資料組的內容。DBpedia 曾被全球資訊網創始人提姆・柏內茲 - 李評論為世界上最有名的幾個去中心化連結資料的專題之一。

## 緣起

此計畫案一開始是由來自柏林自由大學以及萊比錫大學的人士所開啟，並與開放連結軟體（Open Linked Software）同盟合作。第一份公開可取得的資料集在 2007 年時發佈。它是透過自由授權的方式所發佈，允許他人自由利用這些資料集。

維基百科的條目大部分都是沒有固定格式的文字，不過也有部分的資料是屬於結構化的資訊並且被鑲嵌在條目中，像是_資訊框_的表格內容（也就是預設在桌機版維基百科瀏覽格式，出現在條目右上角出現的欄位，或是行動版維基百科的條目一開始就顯示的欄位。）、分類、圖像、地理座標、以及外部網頁連結。這些結構化的資訊會在此計畫案被提取出來並且將其統一的放在一個資料集裡頭以方便查詢。

## 資料組

2013 年 9 月，DBpedia 發佈了第 3.9 版的更新。如同之前版本的加強，這次也新增了維基百科更多資訊框的比對，同時也新增了維基數據的連結。（透過 `owl:sameAs` 的連結）。此版的資料組描述了四百萬筆實體（entities），其中有 322 萬筆實體是在一個連貫的知識本體中進行分類，這些實體包含了 832,000 位人物、639,000 個地景、116,000 份音樂專輯、78,000 部影片、18,500 個電動遊戲、209,000 個組織、226,000 個物種以及 5,600 種疾病。。DBpedia 資料集提供了最多有 119 個不同語言的特色標籤以及資料摘要；現總共有 2460 萬個圖片連結以及 2760 萬筆連到外部網頁的連結資料、4500 萬筆連結到其他 RDF 格式的資料集、6700 萬筆連結到維基百科的分類頁，以及 4120 萬筆 YAGO2 分類的資料。DBpedia 計畫使用資源描述框架（Resource Description Framework，簡稱 RDF）來呈現擷取的資料，目前包含了 24.6 億筆的 RDF triple 資料、4700 萬從英文版本維基百科上擷取的資料、19.8 億則來自其他的語言版本，同時有大約 4,500 萬的資料連往外部的資料集。

從本資料集，多個頁面之間傳播的資訊可以被擷取，例如某書籍的作者資料，能夠被放在關於此書或關於作者的頁面中。

從維基百科擷取資料其中的一個重大挑戰是，相同概念可能會在資訊框以及其他的模版中被用不同的參數表示，例如 `|birthplace=` 以及 `|placeofbirth=` 意義相同。在這樣的情況下，查詢人物出生地點就必須要在這兩個參數下都有查詢才能夠得到完整的結果。於是，DBpedia 的映對語言就被開發了出來，以幫助映對知識本體裡頭這些定義的異同，進而減少同義詞的重疊。有鑑於維基百科中使用資訊框以及其他數值非常的多元，開發以及改善映對語言的機制是以開源的方式徵求大眾參與。

## 範例

DBpedia 摘取維基百科頁面上的事實資訊，讓使用者可以不用在多個維基百科條目之間瀏覽便找到問題的答案。查詢資料的方式是利用 SPARQL（像 SQL 的查詢語言）來對資源描述框架 (RDF) 進行查詢。舉例，假如你對日本少女漫畫系列東京喵喵感興趣，想要找這部漫畫的繪者創作的其他作品。DBpedia 結合了維基百科上東京喵喵、征海未亞這些條目，以及相關作品諸如麗佳公主以及戀きゅー的資訊。因為 DBpedia 把這些資料都標準化到單一的資料庫裡，下列查詢 （頁面存檔備份，存於網際網路檔案館）就能夠在不需具體清楚哪一個條目有包含了哪一部分的片段資訊，就能夠完整的列出相關作品類型：

## 使用 DBpedia 的相關計畫或組織

DBpedia 廣納了人類知識不同領域，十分多元的範疇資料。這使得它自然而然成為連結眾多資料集的樞紐，讓外部資料集能夠連結到相關的概念。DBpedia 的資料集是跟其他許多網路上不同的開放資料資料集在 RDF 的層級互動相連著。透過這些資料集，可以讓應用程式豐富 DBpedia 的資料。截至 2013 年 9 月 (2013-09)，已經有超過 4500 萬筆在 DBpedia 與外部資料集之間的互動連結產生，外部資料集包含：Freebase (database)、OpenCyc、UMBEL、GeoNames、Musicbrainz、CIA World Fact Book、DBLP、Project Gutenberg、DBtune Jamendo、Eurostat、Uniprot、Bio2RDF、以及美國普查等資料。湯森路透公司的前導計畫 OpenCalais、紐約時報的連結開放資料計畫、Zemanta 以及 DBpedia Spotlight 也納入了 DBpedia 的連結。BBC 也使用 DBpedia 來輔助其內容組織。Faviki 使用 DBpedia 進行語意標籤（semantic tagging）。

亞馬遜公司提供一串 DBpedia _公共資料集（Public Data Set）_ ，這可整合進亞馬遜網路服務應用之中。

## DBpedia Spotlight

2010 年 6 月，來自 Web Based Systems Group 以及柏林自由大學的研究人員開始了一個叫做「DBpedia Spotlight」的計畫，開發工具來將文字資料中使用 DBpedia 資源的部份加上註解。這個工具解決了過去透過 DBpedia 連結非結構化資訊來源到開放連結資料雲的問題。DBpedia Spotlight 可展示已命名實體擷取（named entity extraction）、包含實體偵測（entity detection）以及命名衝突化解（name resolution）（也就是消歧義（disambiguation））。此工具也能在其他資訊擷取（information extraction）任務中，用來進行命名實體辨識（named entity recognition）。DBpedia Spotlight 聚焦在多種不同用途的客製應用。不去聚焦於少部分的實體類型，此計畫試圖支援全部 DBpedia 上來自超過 320 個不同分類裡，共約三百五十萬個實體與概念。

DBpedia Spotlight 可公開獲取，是以一個為了測試用途而提供的網路服務，或者也可以從 Apache 授權的 Java/Scala API。DBpedia Spotlight 分配也包含了一 jQuery 外掛程式，此外掛程式允許開發人員在網路上的任何一頁加上註解，只要在他們的頁面上增加一行文字即可使用者端也有 Java 或 PHP 的支援應用。此工具可從其展示頁（demo page）裡，處理多種的英語資料以及網路服務。國際化的支援部分，只要此語言有開維基百科即可支援。

## 參見

* BabelNet
* Freebase
* Semantic MediaWiki
* Wikidata
* Linked Hypernyms Dataset（頁面存檔備份，存於網際網路檔案館）

## 參考來源

## 外部連結

* 官方網站
* 在 TED 大會上，由提姆・柏內茲 - 李所做的關於語意網（semantic web）短講影片（頁面存檔備份，存於網際網路檔案館），參照了 DBpedia 作為範例。
* DBpedia - Extracting structured data from Wikipedia（頁面存檔備份，存於網際網路檔案館） 以及 LinkedGeodata（頁面存檔備份，存於網際網路檔案館），2009 年國際維基年會兩個談到關於 DBpedia 計畫的議程。
* DBpedia: Querying Wikipedia like a Database（頁面存檔備份，存於網際網路檔案館） - Chris Bizer, World Wide Web Conference Developers Track, 11 May 2007
* W3C SWEO Linking Open Data Community Project（頁面存檔備份，存於網際網路檔案館）
* DBpedia Spotlight 的首頁連結（頁面存檔備份，存於網際網路檔案館）