(57)【要約】      （修正有）【課題】電子記録情報の検索が容易な電子記録情報表示装置、電子記録情報表示プログラム及び電子記録情報表示方法を提供すること。【解決手段】電子記録情報表示装置は、表示部１１１と、文書の小口に対応する小口画像１１１３を表示する第１の表示領域１１１２と、小口画像に対して特定位置が指定され、特定位置に対応する第１のページの画像１１１４を表示する第２の表示領域１１１１を、表示部に表示させる制御部とを備える。【選択図】図９
2017167575.tif 000002
【特許請求の範囲】
【請求項１】
表示部と、
文書の小口に対応する小口画像を表示する第１の表示領域と、前記小口画像に対して特定位置が指定され、該特定位置に対応する第１のページの画像を表示する第２の表示領域を、前記表示部に表示させる制御部と
を備える電子記録情報表示装置。
【請求項２】
前記制御部は、前記第１のページの画像と、該第１のページの前後の第２及び第３のページの画像を、前記第１の表示領域において表示させることを特徴とする請求項１記載の電子記録情報表示装置。
【請求項３】
前記制御部は、前記第１のページの画像の大きさを前記第２及び第３のページの画像の大きさよりも大きく表示させることを特徴とする請求項２記載の電子記録情報表示装置。
【請求項４】
前記制御部は、特徴に応じて各ページが識別された前記小口画像を前記第１の表示領域において表示させることを特徴とする請求項１記載の電子記録情報表示装置。
【請求項５】
表示部を備えるコンピュータに実行させる電子記録情報表示プログラムであって、
文書の小口に対応する小口画像を表示する第１の表示領域と、前記小口画像に対して特定位置が指定され、該特定位置に対応する第１のページの画像を表示する第２の表示領域を、前記表示部に表示させる処理
を前記コンピュータに実行させる電子記録情報表示プログラム。
【請求項６】
表示部と制御部を備える電子記録情報表示装置における電子記録情報表示方法であって、
前記制御部により、文書の小口に対応する小口画像を表示する第１の表示領域と、前記小口画像に対して特定位置が指定され、該特定位置に対応する第１のページの画像を表示する第２の表示領域を、前記表示部に表示させる
ことを特徴とする電子記録情報表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、電子記録情報表示装置、電子記録情報表示プログラム、及び電子記録情報表示方法に関する。
【背景技術】
【０００２】
スマートフォンやタブレット端末などは、通話やＷｅｂ閲覧以外にも、様々な用途で利用される。
【０００３】
例えば、スマートフォンやタブレット端末などが手書きノートとして利用される場合がある。例えば、ノートの各ページに記載された情報がＯＣＲ（Optical Character Reader）などでデータとして取得され、取得されたデータを手書きノートとしてスマートフォンなどに記憶させる場合がある。或いは、ユーザがメモなどをスマートフォンなどに入力することで、メモなどの情報を手書きノートとして記憶させたりする場合もある。ユーザは、このような手書きノートを利用して、例えば、文書や電子メールを作成するなど、さまざまな用途に利用することが可能である。
【０００４】
このような技術として、例えば、以下がある。すなわち、文書映像の表示回数の計数値を視覚的に示す計数値映像データを用いて、計数値映像を文書映像と対応させて表示させる電子書籍表示検索装置及び電子書籍表示検索方法がある。この技術によれば、頁の参照回数を視覚的に表すことにより、文書検索を容易にすることができる、とされる。
【０００５】
また、見開き画像の小口や地がポインティングされた場合、ポインティングされたページを含む見開きのプレビュー画像が表示され、プレビュー画像がポインティングされた場合、プレビュー画像に対応する見開き画像が表示されるようにした画像表示方法がある。この技術によれば、見開きページから他のページへジャンプして容易に目当てのページを開くことができる、とされる。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開平６−３３７８９６号公報
【特許文献２】特開２０１０−３９７５７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
しかしながら、ユーザは、例えば、あいまいな記憶を頼りに手書きノートの該当ページや該当ページに記載された情報を検索する場合がある。例えば、ユーザは、「ノートのあの辺に書いたアレ」、「ノートのあのページのちょっと後ろに書いたアレ」など、ノートの“あの辺”の感覚で、あいまいな記憶を頼りに検索する場合などである。
【０００８】
上述した技術は、例えば、表示回数に対応させて小口部分を視覚的に表示させたり、ポインティングしたページを含む見開きのプレビュー画像が表示させたりする技術である。これらの技術が用いられる場合でも、ユーザはノートの“あの辺”の感覚であいまいな記憶を頼りに検索する場合がある。あいまいな記憶で検索したページが該当ページではない場合、ユーザは、再度、あいまいな記憶に頼った検索を行う。このような検索では、ユーザは該当するページを探し出すまでに時間がかかったり、該当するページを探し出すことができなかったりする場合がある。或いは、あいまいな記憶自体が間違っている場合もあり、このような場合、ユーザは該当ページがどのページなのかわからなくなってしまい、検索自体できなくなってしまう場合もある。
【０００９】
そこで、一開示は、電子記録情報の検索が容易な電子記録情報表示装置、電子記録情報表示プログラム、及び電子記録情報表示方法を提供することにある。
【課題を解決するための手段】
【００１０】
一開示は、電子記録情報表示装置であって、表示部と、文書の小口に対応する小口画像を表示する第１の表示領域と、前記小口画像に対して特定位置が指定され、該特定位置に対応する第１のページの画像を表示する第２の表示領域を、前記表示部に表示させる制御部とを備える。
【発明の効果】
【００１１】
一開示によれば、電子記録情報の検索が容易な電子記録情報表示装置、電子記録情報表示プログラム、及び電子記録情報表示方法を提供することができる。
【図面の簡単な説明】
【００１２】
【図１】図１は電子記録情報表示装置の構成例を表す図である。
【図２】図２は電子記録情報表示装置の構成例を表す図である。
【図３】図３（Ａ）は表示画面、図３（Ｂ）は特徴の例をそれぞれ表す図である。
【図４】図４は書籍の例を表す図である。
【図５】図５は手書きノートの例を表す図である。
【図６】図６は小口ＵＩの表示例を表す図である。
【図７】図７は小口ＵＩの表示動作の例を表すフローチャートである。
【図８】図８はユーザ操作に対応した表示動作の例を表すフローチャートである。
【図９】図９（Ａ）と図９（Ｂ）は表示画面の例を表す図である。
【図１０】図１０は電子記録情報表示装置の構成例を表す図である。
【図１１】図１１は電子記録情報表示装置の構成例を表す図である。
【図１２】図１２（Ａ）は表示画面、図１２（Ｂ）は特徴の例をそれぞれ表す図である。
【図１３】図１３（Ａ）は表示画面、図１３（Ｂ）は特徴の例をそれぞれ表す図である。
【発明を実施するための形態】
【００１３】
以下、本発明を実施するための形態について説明する。なお、以下の実施例は開示の技術を限定するものではない。そして、各実施の形態は、処理内容を矛盾させない範囲で適宜組み合わせることが可能である。
【００１４】
［第１の実施の形態］
第１の実施の形態について説明する。図１は第１の実施の形態における電子記録情報表示装置（以下、「表示装置」と称する場合がある）１００の構成例を表している。
【００１５】
表示装置１００は、制御部１５０と表示部１５１を備える。
【００１６】
制御部１５０は、第１の表示領域と第２の表示領域を表示部１５１に表示させるようにする。ここで、第１の表示領域は、例えば、文書の小口に対応する小口画像を表示する領域である。また、第２の表示領域は、小口画像に対して特定位置が指定され、該特定位置に対応する第１のページの画像を表示する領域である。
【００１７】
表示部１５１は、例えば、制御部１５０の制御に従って、表示部１５１の表示画面に小口画像と第１のページの画像を表示する。
【００１８】
このように本第１の実施の形態においては、表示部１５１において小口画像が表示される。例えば、ユーザは、「ノートのあの辺に書いたアレ」など、該当ページを文書の相対位置で記憶している場合がある。ユーザがそのようなあいまいな記憶を頼りに検索する場合でも、表示部１５１に表示された小口画像に基づいて検索することが可能となる。すなわち、小口画像によって、文書の相対位置が表示されるため、「あの辺」について容易に検索することが可能となる。
【００１９】
また、例えば、小口画像について、各ページの特徴に応じて識別表示されてもよい。このような場合、例えば、「図形が多いページの後ろのページ」など、「図形の多いページ」が識別表示された小口画像に対して、ユーザは特定位置を指定することも可能である。よって、この場合でも、容易に検索することが可能となる。
【００２０】
そして、ユーザは、第２の表示領域に表示された画像に含まれる電子記録情報を確認することで、検索を終了させることが可能となる。電子記録情報とは、例えば、文書に記載された情報であって、メモリなどにおいて電子的に記録可能な情報のことである。文書に記載された文字や図形、写真などは、例えば、電子記録情報となり得る。また、第１のページの画像として表示された文字や図形、写真などは、例えば、電子記録情報である。
【００２１】
従って、本表示装置１００は、ユーザが情報などをあいまいに記憶している場合でも、電子記録情報を容易に検索することが可能となる。
【００２２】
［第２の実施の形態］
次に第２の実施の形態について説明する。図２は第２の実施の形態における表示装置１００の構成例を表している。
【００２３】
＜表示装置（電子記録表示装置）の構成例＞
表示装置１００は、例えば、スマートフォン、フィーチャーフォン、タブレット端末、パーソナルコンピュータ、又はゲーム装置などである。表示装置１００は、例えば、手書きノートとして利用される。表示装置１００は、手書きノートの各ページに含まれる電子記録情報を表示することが可能である。
【００２４】
なお、電子記録情報は、例えば、手書きノートの各ページに記載された情報であって、メモリ１０７において電子的に記録（又は記憶）可能な情報のことである。電子記録情報は、例えば、手書きノートの各ページに含まれる文字、図形、画像などである。
【００２５】
表示装置１００は、アンテナ１０１、無線部１０２、プロセッサ１０３、オーディオ入出力部１０４、スピーカ１０５、マイク１０６、メモリ１０７、タッチセンサ１１０、及び表示部１１１を備える。メモリ１０７は、さらに、ＲＯＭ（Read Only Memory）１０８とＲＡＭ（Random Access Memory）１０９を含む。
【００２６】
なお、第１の実施の形態における制御部１５０は、例えば、プロセッサ１０３に対応する。また、第１の実施の形態における表示部１５１は、例えば、表示部１１１に対応する。
【００２７】
アンテナ１０１は、基地局装置やアクセスポイントなどから送信された無線信号を受信し、受信した無線信号を無線部１０２へ出力する。また、アンテナ１０１は、無線部１０２から出力された無線信号を基地局装置やアクセスポイントなどへ送信する。
【００２８】
無線部１０２は、アンテナ１０１から受け取った無線信号をベースバンド信号に変換（ダウンコンバート）し、変換後のベースバンド信号をプロセッサ１０３へ出力する。また、無線部１０２は、プロセッサ１０３から出力されたベースバンド信号を無線信号に変換（アップコンバート）し、変換後の無線信号をアンテナ１０１へ出力する。
【００２９】
プロセッサ１０３は、例えば、無線部１０２、オーディオ入出力部１０４、メモリ１０７、タッチセンサ１１０、及び表示部１１１を制御する。プロセッサ１０３は、ＲＯＭ１０８に記憶されたプログラムを読み出して、ＲＡＭ１０９にロードし、ロードしたプログラムを実行することで、表示装置１００において種々の処理や機能を実行することが可能である。
【００３０】
このような処理の一つとして、例えば、無線に関する処理がある。無線に関する処理としては、例えば、以下がある。すなわち、プロセッサ１０３は、無線部１０２から出力されたベースバンド信号に対して復調処理などを施して、音声データや文字データ、プログラムデータなどを抽出する。プロセッサ１０３は、音声データをオーディオ入出力部１０４、文字データをメモリ１０７や表示部１１１、プログラムデータをメモリ１０７へそれぞれ出力する。また、プロセッサ１０３は、オーディオ入出力部１０４から出力された音声データやメモリ１０７から出力されたデータなどに対して変調処理などを施してベースバンド信号へ変換し、ベースバンド信号を無線部１０２へ出力してもよい。
【００３１】
また、プロセッサ１０３における処理や機能の一つとして、手書きノートの作成処理や手書きノートの各ページに含まれる電子記録情報の表示処理がある。詳細については動作例において説明する。
【００３２】
なお、プログラムは、例えば、メモリ１０７に予め記憶されていてもよいし、アンテナ１０１などを介して、基地局装置やアクセスポイントからダウンロードすることも可能である。
【００３３】
また、プロセッサ１０３は、例えば、コントローラや制御部などであってもよい。例えば、プロセッサ１０３に代えて、ＣＰＵ（Central Processing Unit）、ＭＰＵ（Micro Processing Unit）、ＤＳＰ（Digital Signal Processor）、又はＦＰＧＡ（Field-Programmable Gate Array）などでもよい。
【００３４】
オーディオ入出力部１０４は、プロセッサ１０３から受け取った音声データをスピーカ１０５へ出力する。スピーカ１０５は音声データに基づいて音声を出力する。
【００３５】
マイク１０６は、音声を入力して、入力した音声を音声データに変換し、音声データをオーディオ入出力部１０４へ出力する。オーディオ入出力部１０４は、マイク１０６から受け取った音声データをプロセッサ１０３へ出力する。
【００３６】
メモリ１０７は、例えば、プログラムや各種情報、データなどを記憶する。また、メモリ１０７は、例えば、手書きノートの各ページを画像データとして記憶する。
【００３７】
手書きノートは、例えば、文書の一例である。文書は、例えば、参照されることを前提に記録される情報のことである。文書には、例えば、書籍、新聞、雑誌、電子書籍などが含まれる。なお、本第２の実施の形態においては、手書きノートは、例えば、手書きノートの各ページに含まれる情報が電子記録情報としてメモリ１０７に記憶可能な手書きノートのことを表している。
【００３８】
タッチセンサ１１０は、例えば、人や物の接触によりスイッチをＯＮ又はＯＦＦすることが可能なセンサである。タッチセンサ１１０は、例えば、表示部１１１の画面上に設けられる。タッチセンサ１１０は、例えば、電磁誘導方式や静電容量方式などによって、画面上における操作を検知し、検知結果をプロセッサ１０３へ出力することが可能である。
【００３９】
表示部１１１は、例えば、手書きノートの各ページを表示する。或いは、表示部１１１は、例えば、手書きノートの各ページに含まれる電子記録情報を表示する。このとき、表示部１１１は、手書きノートの小口に対応する小口画像を表示する。
【００４０】
図３（Ａ）は表示部１１１の表示画面１１１０の例を表している。表示画面１１１０は、プレビュー表示部１１１１と小口ＵＩ（User Interface）表示部１１１２の２つの表示領域がある。
【００４１】
小口ＵＩ表示部１１１２は、例えば、手書きノートなどの文書の小口部分に対応する小口画像が表示される領域となっている。小口ＵＩ表示部１１１２に表示された小口画像を、例えば、小口ＵＩ１１１３と称する場合がある。
【００４２】
図４は文書の例として、書籍２００の例を表している。小口は、例えば、書籍２００の裁断面２０１，２０２，２０３のことである。このうち、書籍２００が見開きの状態で、各ページにおいて閉じられた側と反対側の裁断面２０３のことを、例えば、小口と称する場合もある。
【００４３】
図３（Ａ）に戻り、例えば、小口ＵＩ１１１３については、図面上左側から右側に向けて、手書きノートの各ページが増加するように表示されてもよいし、又は、その逆であってもよい。
【００４４】
本第２の実施の形態においては、小口ＵＩ１１１３には、特徴に応じて識別されたページが表示される。図３（Ａ）の例では、「文字が多い」ページは白抜きの枠で表示され、「図が多い」ページは斜線で表示され、「文字も図も少ないページ」は黒で表示される。さらに、「検索の基準として使用されるページ」は、横線で表示される。図３（Ｂ）にはその特徴の例を表している。そして、小口ＵＩ１１１３においてユーザによるタップ操作が行われると、当該操作に応じたページの画像がプレビュー表示部１１１１に表示されるようになっている。詳細は動作例において説明する。
【００４５】
なお、図３（Ａ）に示す小口ＵＩ１１１３における各ページの識別表示は、例えば、図４に示す書籍の小口部分の識別表示に対応している。従って、手書きノートの相対的な位置関係がユーザにおいて記憶されている場合、ユーザは、その位置関係に基づいて小口ＵＩ１１３を利用することが可能となる。
【００４６】
図３（Ａ）と図３（Ｂ）に示すページの特徴は一例である。例えば、小口ＵＩ１１１３には、「画像が多い」、「写真が多い」など、他の特徴が含まれてもよい。或いは、図３（Ｂ）に示す特徴例のうち、その一部が用いられてもよい。また、識別表示についても、各ページの特徴に応じて色表示により色分けされてもよい。
【００４７】
一方、プレビュー表示部１１１１は、例えば、手書きノートの各ページの画像を表示する。この場合、プレビュー表示部１１１１は、小口ＵＩ１１１３においてユーザ操作に応じたページの画像を表示する。詳細は動作例で説明する。
【００４８】
図５はメモリ１０７に記憶される手書きノートの記憶例を表している。例えば、電子記録情報はノート単位で管理され、複数の手書きノートがメモリ１０７において記憶可能となっている。
【００４９】
例えば、各手書きノートのページ数は固定であってもよい。ページ数の固定により、例えば、以下の３つの利点がある。
【００５０】
１番目としては、図３（Ａ）において、小口ＵＩ１１１３のスケールが一定となり、ユーザにおける使い易さによって該当ページの発見も容易となる。ユーザにとって小口ＵＩ１１１３の使い勝手がよくなる。
【００５１】
２番目として、ユーザのあいまいな記憶と小口ＵＩ１１１３のページ位置とを対応させることが可能となる。また、「あの辺」の位置的感覚を固定化させることが可能となる。
【００５２】
３番目として、小口ＵＩ１１１３において可視化された識別表示を利用して、あいまいな記憶を検索の際に有効活用させることが可能となる。
【００５３】
なお、本第２の実施の形態においては、例えば、各手書きノートのページ数は固定でもよいし、手書きノート毎にページ数が異なっていてもよい。
【００５４】
＜動作例＞
次に動作例について説明する。動作例は、最初に手書きノートの作成処理について説明し、次に小口ＵＩ１１１３の表示処理について説明し、最後にユーザ操作に対応した表示処理について説明する。
【００５５】
＜１．手書きノートの作成処理＞
例えば、手書きノートは以下のようにして作成される。すなわち、表示装置１００は、表示画面１１１０の所定の位置がタップされたことを検知すると、手書きノートの編集画面を表示する。ユーザは編集画面において文字や図形、写真などを入力し、手書きノートを作成する。表示装置１００は、作成された手書きノートについてはページ単位で管理し、作成された手書きノートの各ページを画像データに変換する。そして、表示装置１００は画像データをメモリ１０７に記憶する。各ページの画像データには、ユーザによって入力された文字や図形、写真などの情報が含まれる。この文字や図形、写真などが、例えば、電子記録情報となる。このような処理は、例えば、プロセッサ１０３で行われてもよい。
【００５６】
＜２．小口ＵＩの表示処理＞
次に、小口ＵＩの表示処理について説明する。図６は小口ＵＩ１１１３の表示処理の例を表す。また、図７は当該表示処理の動作例を表すフローチャートである。
【００５７】
図６に示すように、表示装置１００は、手書きノートの各ページに対して、文字の多さ、図の多さ、検索の基準ページとして使用された回数などについて、特徴ごとに特徴量の“値”を計算する。そして、表示装置１００は、特徴量の“値”に応じて各ページを識別表示させるようにする。
【００５８】
小口ＵＩ１１１３における識別表示は、例えば、各ページの頻度の多さやデータ量の大小で、その長さや幅が変化するわけではなく、ページごとに等間隔で分割されてもよい。また、図６のページ“Ｘ”に示されるように、図が多く、かつ、検索の基準ページとして使用されるページに対しては、２つの識別表示が同一のページに付されてもよい。このように、１つのページに複数の特徴がある場合、１つのページとして表示される領域を等間隔で分割して識別表示させるようにしてもよい。
【００５９】
なお、図６の例では、表示装置１００は、ページＹの特徴量の値を計算すると、当該特徴量の値は文字として決められた閾値より多いので、ページＹは「文字が多いページ」と判別し、当該ページを「水色」で表示させるようにする。
【００６０】
図７は小口ＵＩ１１１３の表示動作の例を表すフローチャートである。図７に示すフローチャートは、例えば、プロセッサ１０３において行われる処理である。なお、表示装置１００は、ページが更新される毎に、更新されたページに対して、図７に示すフローチャートを実行してもよい。或いは、表示装置１００は、所定時間毎に、手書きノートの全ページについて、ページ毎に図７に示すフローチャートを実行してもよい。
【００６１】
表示装置１００は表示処理を開始すると（Ｓ２０）、ｎに「０」を代入し（Ｓ２１）、ページの特徴量ｎの値を計算する（Ｓ２２）。
【００６２】
ｎは、例えば、「文字の多さ」、「図形の多さ」、「検索回数の多さ」など、特徴量を表す。例えば、ｎ＝０は「文字の多さ」、ｎ＝１は「図形の多さ」、ｎ＝２は「検索回数の多さ」などである。表示装置１００は、例えば、各特徴量ｎの“値”を計算する。
【００６３】
例えば、表示装置１００は、「文字の多さ」（例えば特徴量ｎ＝０）についての特徴量ｎの値を以下のようにして算出する。すなわち、表示装置１００は、処理対象ページの画像データにおいて、各画素の画素値に基づいて、ページ内の文字や図形、画像などのオブジェクトの有無を判別する。表示装置１００は、オブジェクトがあると判別すると、当該オブジェクトに対して、メモリ１０７に記憶された文字データベースの各文字と比較して、一致度を判別する。そして、表示装置１００は、一致度が一致に関する閾値以上のときは、当該オブジェクトは、文字であると判別する。表示装置１００は判別した文字の個数がページ内でいくつあるかをカウントし、そのカウント値を文字に関する特徴量ｎの値とする。
【００６４】
例えば、表示装置１００は、図形（例えばｎ＝１）に関する特徴量ｎの値を以下のようにして算出する。すなわち、表示装置１００は、文字に関する特徴量ｎの値の算出手順において、一致度が一致に関する閾値より小さいとき、オブジェクトは図形であると判別する。そして、表示装置１００は図形として判別した回数がページ内でいくつあるかをカウントし、そのカウント値を図形に関する特徴量ｎの値とする。
【００６５】
例えば、表示装置１００は、基準ページとして検索された回数（例えばｎ＝２）に関する特徴量ｎの値を以下のようにして算出する。すなわち、表示装置１００は、当該ページについて検索された回数をカウントし、そのカウント値を、検索回数に関する特徴量ｎの値とする。
【００６６】
以上のようにして、例えば、表示装置１００は、ページに含まれる文字の量、図形の量、当該ページが検索された回数、画像の量などの特徴量の値を計算する。
【００６７】
上述した特徴量ｎの値の算出方法は一例であり、オブジェクトの判別を含めて、その特徴量ｎの値の算出方法は種々のものが用いられてもよいし、公知の手法が用いられてもよい。
【００６８】
次に、表示装置１００は、特徴量ｎの値が閾値以上であるか否かを判別する（Ｓ２３）。閾値に関して、例えば、特徴量ｎに応じて異なってもよいし、同一であってもよい。例えば、文字に関する閾値と、図形に関する閾値、検索回数に関する閾値は、全て異なってもよいし、全て同一であってもよいし、一部同一であってもよい。例えば、特徴量ｎが「０」のとき、表示装置１００は、文字の特徴量ｎの値が文字に関する閾値以上となっているか否かを判別する。
【００６９】
表示装置１００は、特徴量ｎの値が閾値以上のとき（Ｓ２３でＹＥＳ）、閾値以上である旨をメモリ１０７に記憶する（Ｓ２４）。例えば、表示装置１００は文字についての特徴量ｎの値が文字に関する閾値以上のときは、その旨をメモリ１０７の所定領域に記憶する。
【００７０】
そして、表示装置１００はＳ２５の処理へ移行する。
【００７１】
一方、表示装置１００は、特徴量ｎの値が閾値以上でないとき（Ｓ２３でＮＯ）もＳ２５の処理へ移行する。
【００７２】
Ｓ２５において、表示装置１００は、特徴量ｎについて全特徴量を計算したか否かを判別する。例えば、表示装置１００は、ｎに“１”を加算し、加算後のｎが特徴量の個数を超えたか否かにより判別してもよい。特徴量の個数は、上述した例では、例えば、文字、図形、検索回数の“３”となる。
【００７３】
表示装置１００は全特徴量を計算していないとき（Ｓ２４でＹＥＳ）、ｎに“１”を加算し（Ｓ２６）、Ｓ２２の処理へ移行する。この場合、表示装置１００は、次の特徴量ｎについて、上述した処理を繰り返すことになる。例えば、表示装置１００は、ｎ＝１として図形の特徴量ｎの値についてＳ２２からＳ２５までの処理を行う。表示装置１００は、このような処理を、全ての特徴量ｎに対して繰り返すことで、特徴量ｎのすべての値を計算する。
【００７４】
一方、表示装置１００は、全特徴量を計算したとき（Ｓ２５でＹＥＳ）、閾値以上の特徴に応じて小口ＵＩ１１１３を色付けする処理を行う（Ｓ２７）。
【００７５】
例えば、表示装置１００は以下のような色付け処理を行ってもよい。すなわち、表示装置１００は、Ｓ２４で記憶した閾値以上である旨の情報に基づいて色付け処理を行う。表示装置１００は、文字についての特徴量ｎの値が文字に関する閾値以上のときは「水色」、図形についての特徴量ｎの値が図形に関する閾値以上のときは「緑色」などとすることができる。また、表示装置１００は、例えば、検索回数についての特徴量ｎの値が検索回数に関する閾値以上のときは「茶色」、などとすることができる。そして、表示装置１００は色分けに対応する画像データを生成して、メモリ１０７に記憶する。さらに、表示装置１００は手書きノートの全ページに対してこのような画像データを生成することで、小口画像についての画像データを生成することが可能となる。このように生成された小口画像についての画像データが小口ＵＩ１１１３に対応する。プロセッサ１０３はメモリ１０７に記憶された当該画像データを読み出して表示部１１１に出力することで、小口ＵＩ表示部１１１２において小口ＵＩ１１１３を表示させることが可能となる。
【００７６】
なお、このような色付けの例は一例であって、各ページの特徴が各々識別可能な色であればどのような色付けでもよい。また、色付けに代えて、図３（Ａ）に示すように斜線や白枠など、各ページの特徴が各々識別可能であればよい。さらに、処理対象ページについて、複数の特徴量ｎについて、複数の特徴量ｎの値の全てが閾値以上となっているときは、上述したように、小口ＵＩ１１１３における１ページ分の領域を等分割して色分けしてもよい。例えば、図３（Ａ）に示すように、図が多く、かつ、検索の基準ページとして使用される回数が多いページなどの場合である。或いは、表示装置１００は、処理対象ページについて、ある特徴についての特徴量ｎの値が閾値より小さいときも、当該ページについて色付け処理などを行ってもよい。例えば、表示装置１００は、文字についての特徴量ｎの値が文字に関する閾値より小さいページや、図形についての特徴量ｎの値が図形に関する閾値より小さいページなどに対して、それぞれ他の特徴と識別可能なように色付けなどを行うようにしてもよい。この場合も、例えば、表示装置１００は、文字についての特徴量ｎの値が文字に関する閾値より小さく、かつ、図形についての特徴量ｎの値が図形に関する閾値より小さいとき、他の特徴と識別可能なように色付けを行ってもよい。図３（Ａ）ではこの場合の表示例が示されている。
【００７７】
このように、表示装置１００は、例えば、処理対象のページについて、特徴量ｎの値に応じて当該特徴が他のページと識別可能なように表示すればよい。
【００７８】
＜３．ユーザ操作に対応した表示処理＞
図８はユーザ操作に対応した表示動作の例を表すフローチャートを表し、図９（Ａ）と図９（Ｂ）は表示画面１１１０の例を表している。図８に示すフローチャートは、例えば、表示装置１００のプロセッサ１０３において行われる処理である。
【００７９】
図８に示すように、表示装置１００は処理を開始すると（Ｓ３０）、小口ＵＩ１１１３を表示部１１１の表示画面１１１０に表示させる（Ｓ３１）。例えば、表示装置１００は、図７に示す処理を行うことで小口ＵＩ１１１３を表示させるようにしてもよい。
【００８０】
次に、表示装置１００は、小口ＵＩ１１１３の特定位置がタップされたか否かを判別する（Ｓ３２）。
【００８１】
例えば、表示装置１００は以下のような処理を行う。すなわち、表示画面１１１０における小口ＵＩ表示部１１１２の領域にはタッチセンサ１１０が備えられている。タッチセンサ１１０は、表示画面１１１０上における操作位置、操作方向、接触時間などに基づいて、小口ＵＩ１１１３におけるユーザの操作動作を検知し、検知結果をプロセッサ１０３へ通知する。プロセッサ１０３は検知結果に基づいて小口ＵＩ１１１３がタップされたか否かを判別する。
【００８２】
表示装置１００は、小口ＵＩ１１１３の特定位置がタップされるまで待ち（Ｓ３２でＮＯ）、小口ＵＩ１１１３の特定位置がタップされると（Ｓ３２でＹＥＳ）、該当ページを表示する（Ｓ３３）。
【００８３】
図９（Ａ）は小口ＵＩ１１１３がタップされた後の表示画面１１１０の例を表している。この例では、ユーザは専用ペンを利用してタップしている例を表している。プレビュー表示部１１１１には、専用ペンで小口ＵＩ１１１３をタップしているページのプレビュー画像１１１４が表示される。この場合、プレビュー画像１１１４は、プレビュー表示部１１１１の中央に表示され、図面上その左側に、プレビュー画像１１１４のページの１つ前のページのプレビュー画像１１１５が表示される。また、プレビュー画像１１１４の、図面上その右側に、プレビュー画像１１１４の１つ後ろのページのプレビュー画像１１１６が表示される。中央のプレビュー画像１１１４は、左右のプレビュー画像１１１５，１１６よりも大きく表示される。
【００８４】
例えば、表示装置１００は以下の処理を行う。すなわち、メモリ１０７には各ページの画像データが記憶される。プロセッサ１０３はタッチセンサ１１０からの検知結果に基づいて、該当するページと、該当するページの前後のページの各画像データを読み出し、読み出した各画像データを表示部１１１へ出力する。この場合、プロセッサ１０３は、該当ページの画像データに対応する画像は他のページの画像よりも大きく表示させるように表示部１１１に指示してもよい。これにより、例えば、図９（Ａ）に示すように、該当ページの画像がプレビュー画像１１１４としてプレビュー表示部１１１１の中央に、該当ページの前後のページの画像がプレビュー画像１１１４の左右にプレビュー画像１１１５，１１１６がそれぞれ表示される。
【００８５】
なお、図９（Ａ）に示すように、小口ＵＩ１１１３に対して左右にフリック操作が行われると、当該フリック操作に応じて、対応するページのプレビュー画像１１１４がスクロール表示される。この場合も、例えば、プロセッサ１０３はタッチセンサ１１０からの検知結果に基づいて、検知結果に対応するページの画像データをメモリ１０７から順次読み出して、表示部１１１へ出力することで、スクロール表示が行われてよい。
【００８６】
図８に戻り、次に、表示装置１００は、プレビュー表示部１１１１においてフリック操作が行われたか否かを判別する（Ｓ３４）。そして、表示装置１００は、プレビュー表示部１１１１においてフリック操作が行われたとき（Ｓ３４でＹＥＳ）、該当のページを表示する（Ｓ３５）。
【００８７】
図９（Ｂ）はプレビュー表示部１１１１においてフリック操作が行われている場合の表示画面１１１０の例を表している。表示装置１００においては、プレビュー表示部１１１１についても操作可能であり、その操作に応じて、プレビュー画像１１１４−１１１６がスクロール表示される。
【００８８】
例えば、表示装置１００は以下の処理を行う。すなわち、タッチセンサ１１０はプレビュー表示部１１１１における操作を検知して、検知結果をプロセッサ１０３へ通知する。プロセッサ１０３は、検知結果に基づいて、検知結果に対応する画像データをメモリ１０７から順次読み出して、読み出した画像データを表示部１１１へ出力する。これにより、例えば、フリック操作に対応した画像がプレビュー表示部１１１１においてスクロール表示される。
【００８９】
図８に戻り、表示装置１００は該当ページを表示すると（Ｓ３５）、一連の処理を終了する（Ｓ３６）。
【００９０】
一方、表示装置１００は、プレビュー表示部１１１１においてフリック操作が行われなかったとき（Ｓ３４）も一連の処理を終了する（Ｓ３６）。この場合は、Ｓ３３で表示されたページがそのままプレビュー表示部１１１１に表示された状態となる。
【００９１】
例えば、ユーザが、「ノートのあの辺に書いたアレ」、「ノートのあのページのちょっと後ろに書いたアレ」など、ノートの“あの辺”の感覚で、あいまいな記憶として該当ページや該当ページに記載された情報を記憶する場合がある。例えば、ユーザが、「図が多かったページ」の後ろのページに記載された情報を記憶している場合を考える。
【００９２】
この場合、例えば、図３（Ａ）に示すように、「図が多い」ページが小口ＵＩ１１１３に示されており、図９（Ａ）に示すように、小口ＵＩ１１１３において当該ページ上をタップ操作することで、当該ページのプレビュー画像１１１４の後ろのページのプレビュー画像１１１６がプレビュー表示部１１１１に表示される。そして、ユーザはプレビュー表示部１１１１においてフリック操作を行うことで、プレビュー表示部１１１１の中央に該当するページのプレビュー画像１１１４を表示させることが可能となる。従って、このようなあいまいに情報を記憶しているユーザであっても、本表示装置１００においては該当ページに含まれる電子記録情報の検索を容易に行うことが可能となる。
【００９３】
しかし、ユーザが間違って情報を記憶する場合もある。例えば、「図が多い」ページとしてタップ操作した場合のプレビュー画像１１１６が記憶と異なる場合などである。この場合でも、小口ＵＩ１１１３には複数の「図が多い」ページが識別表示されていると、ユーザは他の「図が多い」ページを検索することが可能である。ユーザは、小口ＵＩ１１１３を操作して、他の「図が多い」ページのプレビュー画像１１１６を確認することで、自身のあいまいな記憶と合致する該当ページ（或いは該当ページに含まれる電子記録情報）を発見することが可能となる。
【００９４】
このように、本第２の実施の形態における小口ＵＩ１１１３は、例えば、ユーザの記憶に強く残っている特徴的なページを一目で簡単に把握可能となっている。そのため、本表示装置１００では、ユーザが手当り次第に検索する場合と比較して、ユーザによる単純な操作によって効率良く検索することも可能である。従って、本表示装置１００は、ユーザがあいまいな記憶を頼りに検索する場合でも、電子記録情報を容易に検索することが可能となる。
【００９５】
なお、図８におけるタップ操作（Ｓ３２）とフリック操作（Ｓ３４）は一例であって、例えば、スクロール操作、スワイプ操作など、他の操作により、各処理（Ｓ２２，Ｓ３４）における操作が行われてもよい。
【００９６】
［その他の実施の形態］
次にその他の実施の形態について説明する。
【００９７】
第２の実施の形態では、例えば、図２に示すように、表示装置１００は無線通信を行うことが可能な場合を例にして説明した。図１０は他の表示装置１００の例を表している。図１０に示す表示装置１００は、更に、ＩＦ（Interface：インタフェース）１２０を備える。ＩＦ１２０は、インターネットなど、有線ネットワークと接続される。ＩＦ１２０は、例えば、プロセッサ１０３の制御により、プロセッサ１０３から受け取ったデータなどに対して、有線ネットワークへ送信可能なフォーマットのパケットデータに変換して送信することが可能となっている。また、ＩＦ１２０は、例えば、プロセッサ１０３の制御により、当該パケットデータを受信すると、当該パケットデータからデータなどを抽出してプロセッサ１０３へ出力することも可能となっている。このような表示装置１００としては、例えば、パーソナルコンピュータなどがある。表示装置１００は、例えば、ＩＦ１２０を介してプログラムをダウンロードすることも可能である。この場合、表示装置１００は、ダウンロードしたプログラムをメモリ１０７などに記憶し、記憶したプログラムを実行することで、第２の実施の形態で説明した処理などを実行することも可能である。
【００９８】
例えば、図１１に示すように、通信機能がない表示装置１００でもよい。この場合でも、プロセッサ１０３がＲＯＭ１０８に記憶されたプログラムを実行することで、第２の実施の形態で説明した処理などを実行することも可能である。
【００９９】
また、上述した第２の実施の形態では、例えば、図３（Ａ）に示すように、小口ＵＩ１１１３は表示画面１１１０の下部に表示される例を説明した。例えば、図１２（Ａ）に示すように、表示画面１１１０の上部に表示されたり、図１３（Ａ）に示すように表示画面１１１０の右側に表示されたりしてもよい。或いは、小口ＵＩ１１１３は表示画面１１１０の左側に表示され、或いは、表示画面１１１０の一部の領域に表示されてもよい。なお、図１２（Ｂ）と図１３（Ｂ）は小口ＵＩ１１１３の特徴の例を表している。
【０１００】
さらに、上述した第２の実施の形態では、文書の例として手書きノートを例にして説明した。例えば、電子書籍や電子雑誌など、手書きノート以外の文書であってもよい。
【０１０１】
以上まとめると付記のようになる。
【０１０２】
（付記１）
表示部と、
文書の小口に対応する小口画像を表示する第１の表示領域と、前記小口画像に対して特定位置が指定され、該特定位置に対応する第１のページの画像を表示する第２の表示領域を、前記表示部に表示させる制御部と
を備える電子記録情報表示装置。
【０１０３】
（付記２）
前記制御部は、前記第１のページの画像と、該第１のページの前後の第２及び第３のページの画像を、前記第１の表示領域において表示させることを特徴とする付記１記載の電子記録情報表示装置。
【０１０４】
（付記３）
前記制御部は、前記第１のページの画像の大きさを前記第２及び第３のページの画像の大きさよりも大きく表示させることを特徴とする付記２記載の電子記録情報表示装置。
【０１０５】
（付記４）
前記第１のページに含まれる第１の電子記録情報は前記第２の表示領域において表示される前記第１のページの画像に含まれることを特徴とする付記１記載の電子記録情報表示装置。
【０１０６】
（付記５）
前記第２及び第３のページにそれぞれ含まれる第２及び第３の電子記録情報は前記第２の表示領域において表示される前記第２及び第３のページの画像にそれぞれ含まれることを特徴とする付記２記載の電子記録情報表示装置。
【０１０７】
（付記６）
前記制御部は、特徴に応じて各ページが識別された前記小口画像を前記第１の表示領域において表示させることを特徴とする付記１記載の電子記録情報表示装置。
【０１０８】
（付記７）
前記制御部は、ページに含まれる文字の量、ページに含まれる図形の量、ページの検索回数、又はページに含まれる画像の量に応じて、各ページが識別された小口画像を前記第１の表示領域において表示させることを特徴とする付記１記載の電子記録情報表示装置。
【０１０９】
（付記８）
表示部を備えるコンピュータに実行させる電子記録情報表示プログラムであって、
文書の小口に対応する小口画像を表示する第１の表示領域と、前記小口画像に対して特定位置が指定され、該特定位置に対応する第１のページの画像を表示する第２の表示領域を、前記表示部に表示させる処理
を前記コンピュータに実行させる電子記録情報表示プログラム。
【０１１０】
（付記９）
表示部と制御部を備える電子記録情報表示装置における電子記録情報表示方法であって、
前記制御部により、文書の小口に対応する小口画像を表示する第１の表示領域と、前記小口画像に対して特定位置が指定され、該特定位置に対応する第１のページの画像を表示する第２の表示領域を、前記表示部に表示させる
ことを特徴とする電子記録情報表示方法。
【符号の説明】
【０１１１】
１００：電子記録情報表示装置（表示装置）
１０３：プロセッサ                    １０７：メモリ
１１０：タッチセンサ                  １１１：表示部
１１１０：表示画面                    １１１１：プレビュー表示部
１１１２：小口ＵＩ表示部              １１１３：小口ＵＩ
１１１４，１１１５，１１１６：プレビュー画像
【図１】
2017167575.tif 000003
【図２】
2017167575.tif 000004
【図３】
2017167575.tif 000005
【図４】
2017167575.tif 000006
【図５】
2017167575.tif 000007
【図６】
2017167575.tif 000008
【図７】
2017167575.tif 000009
【図８】
2017167575.tif 000010
【図９】
2017167575.tif 000011
【図１０】
2017167575.tif 000012
【図１１】
2017167575.tif 000013
【図１２】
2017167575.tif 000014
【図１３】
2017167575.tif 000015