(57)【特許請求の範囲】
【請求項１】
ウェブページにおける各画像のページ属性に基づいて候補メイン画像を選別するステップと、
候補メイン画像の情報テーマに基づいて、候補メイン画像の原画像をトリミングして、対応する画像構図を取得するステップと、
情報テーマが前記ウェブページのテーマにマッチングする候補メイン画像を決定するステップと、
マッチングする候補メイン画像に対応する画像構図を前記ウェブページのメイン画像として認識するステップと、を含み、
前記候補メイン画像の情報テーマに基づいて、候補メイン画像の原画像をトリミングして、対応する画像構図を取得するステップは、
ディープラーニングに基づく第１のモデルツールにより、候補メイン画像の情報テーマを認識するステップと、
前記第１のモデルツールにより、候補メイン画像の原画像をトリミングして、前記情報テーマを強調した画像構図を取得するステップと、を含むことを特徴とするウェブページメイン画像認識方法。
【請求項２】
前記ページ属性は、ページ位置と画面比率とのうちの少なくとも１つを含むことを特徴とする請求項１に記載の認識方法。
【請求項３】
前記ウェブページにおける各画像のページ属性に基づいて候補メイン画像を選別するステップは、
画像のページ位置と所定の中心位置との差が第１の閾値より小さい条件と、
画像の画面比率が第２の閾値を超える条件とのうち、のいずれかを満足するウェブページ内の画像を候補メイン画像として選別するステップを含むことを特徴とする請求項２に記載の認識方法。
【請求項４】
前記ウェブページのテーマは、ウェブページに対してユーザによって設定された落札語に基づいて決定されることを特徴とする請求項１に記載の認識方法。
【請求項５】
前記候補メイン画像を選別するステップの後、
前記候補メイン画像の画像タイプを取得するステップと、
所定の画像タイプの候補メイン画像をフィルタリングするステップと、をさらに含み、前記所定の画像タイプは、テクスチャータイプと二次元コードタイプとのうちの少なくとも１つを含むことを特徴とする請求項１に記載の認識方法。
【請求項６】
前記候補メイン画像の画像タイプを取得するステップは、
ディープラーニングに基づく第２のモデルツールにより、前記候補メイン画像の原画像を分類して、前記候補メイン画像の画像タイプを決定するステップを含むことを特徴とする請求項５に記載の認識方法。
【請求項７】
前記ウェブページメイン画像認識方法は、
クエリテーマを受信した後、情報テーマが前記クエリテーマにマッチングするメイン画像を検索するステップと、
マッチングするメイン画像を表示するステップと、をさらに含むことを特徴とする請求項１〜６のいずれかに記載の認識方法。
【請求項８】
ウェブページにおける各画像のページ属性に基づいて候補メイン画像を選別するように構成される属性選別ユニットと、
候補メイン画像の情報テーマに基づいて、候補メイン画像の原画像をトリミングして、対応する画像構図を取得するように構成される構図トリミングユニットと、
情報テーマが前記ウェブページのテーマにマッチングする候補メイン画像を決定するように構成されるテーママッチングユニットと、
マッチングする候補メイン画像に対応する画像構図を前記ウェブページのメイン画像として認識するように構成されるメイン画像認識ユニットと、を含み、
前記構図トリミングユニットは、ディープラーニングに基づく第１のモデルツールにより、候補メイン画像の情報テーマを認識し、ディープラーニングに基づく第１のモデルツールにより、候補メイン画像の原画像をトリミングして、前記情報テーマを強調した画像構図を取得するように構成されることを特徴とするウェブページメイン画像認識装置。
【請求項９】
前記ページ属性は、ページ位置と、画面比率とのうちの少なくとも１つを含むことを特徴とする請求項８に記載の認識装置。
【請求項１０】
前記属性選別ユニットは、
画像のページ位置と所定の中心位置との差が第１の閾値より小さい条件と、
画像の画面比率が第２の閾値を超える条件とのうち、のいずれかを満足するウェブページ内の画像を候補メイン画像として選別するように構成されることを特徴とする請求項９に記載の認識装置。
【請求項１１】
前記ウェブページのテーマは、当該ウェブページに対してユーザによって設定された落札語に基づいて決定されることを特徴とする請求項８に記載の認識装置。
【請求項１２】
前記ウェブページメイン画像認識装置は、前記候補メイン画像の画像タイプを取得し、所定の画像タイプの候補メイン画像をフィルタリングするように構成される候補フィルタリングユニットをさらに含み、前記所定の画像タイプは、テクスチャータイプと二次元コードタイプとのうちの少なくとも１つを含むことを特徴とする請求項８に記載の認識装置。
【請求項１３】
前記候補フィルタリングユニットは、ディープラーニングに基づく第２のモデルツールにより、前記候補メイン画像の原画像を分類して、前記候補メイン画像の画像タイプを決定するように構成されることを特徴とする請求項１２に記載の認識装置。
【請求項１４】
前記ウェブページメイン画像認識装置は、クエリテーマを受信した後、情報テーマが前記クエリテーマにマッチングするメイン画像を検索し、マッチングするメイン画像を表示するように構成されるメイン画像表示ユニットをさらに含むことを特徴とする請求項９〜１３のいずれかに記載の認識装置。
【請求項１５】
１つまたは複数のプロセッサー及びメモリを含むコンピューティング装置であって、
前記メモリは、前記プロセッサーに請求項１〜７のいずれかに記載の方法を実行させるように、前記プロセッサーによって実行可能な命令を含むことを特徴とするコンピューティング装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示はインターネットの技術分野に関し、具体的には、ウェブページメイン画像認識方法及び装置に関する。
【背景技術】
【０００２】
インターネット技術の発展に伴い、画像とテキストとを同時に含む形態のウェブページは益々多くなってきている。ビジネス宣伝において、ウェブページにおける画像は、含むコンテンツをユーザに直観的に伝えることができ、さらに、テキスト表示に比べて、ウェブページにおける画像表示は、より多くの情報を提供することができ、ネチズンの関心のあるコンテンツを直観的且つ速やかに決定することを有利に行うことができる。特に、画像の品質及び情報が他の画像より明らかに優れるウェブページメイン画像は、ウェブページのテーマを最も表現することができる。そのため、実際の応用において、ビジネス宣伝コンテンツのクリック率を向上させるために、広告主の画像素材を十分に発掘し、ビジネス宣伝ではウェブページのテーマを強調したメイン画像を表示することができる。
【０００３】
現在、従来技術には、ウェブページアドレスに基づいてウェブページのＤＯＭ（Ｄｏｃｕｍｅｎｔ  Ｏｂｊｅｃｔ  Ｍｏｄｅｌ、ドキュメントオブジェクトモデル）構造を取得するステップと、ウェブページのＤＯＭ構造に基づいてウェブページの中心ノードに位置決めし、中心ノード及びそのノード同士における画像を正則マッチングし、正則マッチングされた画像のフォーマットフィルタリング及び属性フィルタリング（所定の高さ及び幅に合致する画像を選出する）を行い、フィルタリング条件に合致する画像を出力し、出力された画像を、取得したウェブページのキー画像とするウェブページにおけるキー画像を取得することができるメイン画像認識方法がある。
【０００４】
しかしながら、本発明の発明者は、従来のウェブページメイン画像認識方法によって取得されたメイン画像は、ウェブページのテーマを正確に表現することができず、ウェブページ情報の伝達効率が低いことを発見した。
【発明の概要】
【発明が解決しようとする課題】
【０００５】
従来技術における上記の不備又は不足に鑑み、ウェブページ情報の伝達効率を向上させ、ユーザの体験を向上させるために、ウェブページのテーマを効果的に強調するメイン画像を掘り出せる方法を提供する。
【課題を解決するための手段】
【０００６】
第１の態様において、本願の実施例は、
ウェブページにおける各画像のページ属性に基づいて候補メイン画像を選別するステップと、
候補メイン画像の情報テーマに基づいて、候補メイン画像の原画像をトリミングして、対応する画像構図を取得するステップと、
情報テーマが前記ウェブページのテーマにマッチングする候補メイン画像を決定するステップと、
マッチングする候補メイン画像に対応する画像構図を前記ウェブページのメイン画像として認識するステップと、を含むウェブページメイン画像認識方法を提供する。
【０００７】
第２の態様において、本願実施例は、
ウェブページにおける各画像のページ属性に基づいて候補メイン画像を選別するように構成される属性選別ユニットと、
候補メイン画像の情報テーマに基づいて、候補メイン画像の原画像をトリミングして、対応する画像構図を取得するように構成される構図トリミングユニットと、
情報テーマが前記ウェブページのテーマにマッチングする候補メイン画像を決定するように構成されるテーママッチングユニットと、
マッチングする候補メイン画像に対応する画像構図を前記ウェブページのメイン画像として認識するように構成されるメイン画像認識ユニットと、を含むウェブページメイン画像認識装置をさらに提供する。
【０００８】
第３の態様において、本願実施例は、１つまたは複数のプロセッサー及びメモリを含むコンピューティング装置を提供し、前記メモリは、前記プロセッサーに本願実施例によって提供されるウェブページメイン画像認識方法を実行させるように、前記プロセッサーによって実行可能な命令を含む。
【発明の効果】
【０００９】
本願実施例によって提供されるウェブページメイン画像認識方法は、ページ属性に基づいて候補メイン画像を選別した後、候補メイン画像の原画像をトリミングすることにより、情報テーマをさらに強調することができる画像構図を取得し、情報テーマがウェブページのテーマにマッチングする画像構図をウェブページのメイン画像とすることができる。これにより、ウェブページのテーマを表現することができるだけではなく、ウェブページのテーマも効果的に強調することができ、ウェブページ情報の伝達効率が向上する。さらに、画像タイプにより候補メイン画像をフィルタリングすることにより、最終的に決定されたウェブページメイン画像に対する高品質の需要を保障することができる。
【図面の簡単な説明】
【００１０】
非限定的な実施例について図面を参照しながら下記詳細に説明することにより、本願の他の特徴、目的及び利点は、さらに明らかになる。
【００１１】
【図１】本願実施例を応用可能な例示的なシステム構成を示す。
【図２】本願実施例に係るウェブページメイン画像認識方法の例示的なフローチャートを示す。
【図３】本願の他の実施例に係るウェブページメイン画像認識方法の例示的なフローチャートを示す。
【図４】本願の一実施例に係るウェブページメイン画像認識装置の例示的な構成ブロック図を示す
【図５】本願の他の実施例に係るウェブページメイン画像認識装置の例示的な構成ブロック図を示す。
【図６】本願実施例を実現するコンピュータシステムの概略構成図を示す。
【発明を実施するための形態】
【００１２】
以下、図面と実施例とを合わせて本願をさらに詳細に説明する。なお、ここで記載された具体的な実施例はこの発明を限定するものではなく、単に関連する発明を解釈するためのものである。なお、説明の便宜上、図面に発明に関連する部分のみが示される。
【００１３】
なお、矛盾しない場合、本願における実施例及び実施例における特徴を互いに組合せることができる。以下、図面を参照して実施例を組み合わせて本願を詳細に説明する。
【００１４】
本願の実施例を応用可能な例示的なシステム構成１００を示す図１を参照する。
【００１５】
図１に示すように、システム構成１００は、端末装置１０１、１０２と、ネットワーク１０３と、サーバー１０４、１０５、１０６、１０７と、を含んでよい。ネットワーク１０３は、端末装置１０１、１０２と、サーバー１０４、１０５、１０６、１０７との通信リンクを提供するための媒介である。ネットワーク１０３は、例えば、有線、無線通信リンク又は光ファイバーなどの各種の接続タイプを含んでもよい。
【００１６】
ユーザ１１０は、端末装置１０１、１０２によってネットワーク１０３を介してサーバー１０４、１０５、１０６、１０７とインタラクティブすることにより、例えば、ウェブページの閲覧やデータのダウンロードなどの各種のサービスにアクセスすることができる。
【００１７】
端末装置１０１、１０２は、各種の電子装置であってもよく、パーソナルコンピューター、スマートフォン、スマートテレビ、タブレット、パーソナルデジタルアシスタンス、電子ブックリーダーなどを含むが、これらに限らない。
【００１８】
サーバー１０４、１０５、１０６、１０７は、各種のサービスを提供するサーバーであってよい。サーバーは、ユーザのサービス要求に応答してサービスを提供できる。なお、１つのサーバーは、１つ又は複数のサービスを提供することができ、同じサービスは、複数のサーバーによって提供することもできる。
【００１９】
なお、図１における端末装置、ネットワーク及びサーバーの数はただ概略的なものである。実際の需要に応じて、任意数の端末装置、ネットワーク及びサーバーを有してよい。
【００２０】
背景技術に説明したように、従来技術で提供されたウェブページメイン画像認識方法には、ウェブページのテーマを正確に表現することができない問題が存在する。このため、広告主のウェブページ情報の伝達効率が低減されるだけではなく、ユーザがウェブページに正確且つ速やかにアクセスすることができず、ユーザの体験が悪くなる。
【００２１】
従来技術における上記の不備に鑑み、本願の実施例は、ページ属性に基づいて候補メイン画像を選別した後、候補メイン画像の原画像をトリミングして、情報テーマをさらに強調できる画像構図を取得し、情報テーマがウェブページのテーマにマッチングする画像構図をウェブページのメイン画像とすることにより、ウェブページのテーマを効果的に強調することができ、ウェブページ情報の伝達効率が向上し、ユーザの体験が向上するウェブページメイン画像認識方法を提供する。以下、フローチャートを参照しながら本願実施例の方法を説明する。
【００２２】
本願の一実施例に係るウェブページメイン画像認識方法の例示的なフローチャートを示す図２を参照する。図２に示す方法は、図１における端末装置で実行可能であり、或いはサーバーで実行可能である。
【００２３】
図２に示すように、ステップ２１０において、ウェブページにおける各画像のページ属性に基づいて候補メイン画像を選別する。
【００２４】
本発明の発明者は、ウェブページのページ構造を分析することにより、以下のことを見出した。ウェブページメイン画像を最も表現することができる最も主要な画像（即ちメイン画像）のウェブページでの位置は、一般的に前置きで特別であるとともに、他の画像に比べて、メイン画像の面積が比較的に大きく、鮮明度が比較的に高い。
【００２５】
そのため、本願実施例において、先ず、ウェブページのページ情報を取得し、ウェブページに含まれたすべての画像を認識し、ウェブページに含まれたそれぞれの画像に対して、当該画像のページ属性を取得する。画像のページ属性は、ページ位置と画面比率とのうちの少なくとも１つを含んでもよい。
【００２６】
ページ位置とは、ウェブページ内の画像の位置であり、画面比率とは、画像の面積がウェブページ画面の全体の面積を占める比率である。ウェブページ内の画像の位置は、ブラウザのレンダリングにより、ウェブページ内の画像の実際の座標情報を算出することができる。
【００２７】
ウェブページにおける各画像のページ属性を取得した後、ページ属性に基づいて、ウェブページにおける候補メイン画像を選別することができ、選別された候補メイン画像は１つまたは複数である。
【００２８】
具体的には、画像のページ位置と所定の中心位置と差が第１の閾値より小さい条件と、画像の画面比率が第２の閾値を超えた条件とのうち、のいずれか１つを満足するウェブページ内の画像を候補メイン画像として選別することができる。第１の閾値及び第２の閾値は、いずれも当業者によって設定された経験値である。
【００２９】
あるいは、最終的に認識されたメイン画像の正確率を向上させるために、候補メイン画像を選別する過程において上記の２つの条件を同時に満足する画像を候補メイン画像とし、そのうちのいずれか１つの条件を満足するか、又は上記の２つの条件を満足しない画像を非候補メイン画像とすることができる。
【００３０】
選択可能に、ページ属性は、画像面積、画像鮮明度などをさらに含んでよい。
【００３１】
このようにすることで、候補メイン画像を選別する過程において、先ず、画像鮮明度と画像面積とにより、初歩的なフィルタリングを行い、即ち、画像鮮明度が第３の閾値より低い画像、及び画像面積が第４の閾値より低い画像を取り除き、次に、フィルタリングによって残された画像に対してページ位置と所定の中心位置との比較、及び画像の画面比率の計算を行い、ページ位置と画面比率とに基づいて候補メイン画像を選別してもよい。第３の閾値や第４の閾値は、当業者が経験に基づいて設定することができる。
【００３２】
次に、ステップ２２０において、候補メイン画像の情報テーマに基づいて、候補メイン画像の原画像をトリミングし、対応する画像構図を取得する。
【００３３】
本願実施例において、ステップ２１０で選別によって取得されたそれぞれの候補メイン画像に対し、対応する原画像を取得し、次に、ディープラーニングに基づく第１のモデルツールにより、候補メイン画像の情報テーマを認識し、第１のモデルツールにより、候補メイン画像の原画像をトリミングして、情報テーマを強調した画像構図を取得する。
【００３４】
第１のモデルツールは、ディープラーニングに基づいた予めトレーニングされた機械学習モデルである。例えば、予めサンプル画像を収集し、サンプル画像の情報テーマを人工的に決定し、サンプル画像内の、当該情報テーマを強調した画像構図をトリミングし、次に、機械学習モデルにより、サンプル画像と情報テーマとの対応関係、情報テーマと画像構図との対応関係、及びサンプル画像と画像構図との対応関係を学習して、第１のモデルツールを取得する。実際の応用において、第１のモデルツールをトレーニングするには、本分野における慣用する他の技術手段を用いてもよく、ここでは、贅言しない。
【００３５】
次に、ステップ２３０において、情報テーマがウェブページのテーマにマッチングする候補メイン画像を決定する。
【００３６】
ウェブページのテーマを強調したメイン画像を選別するために、各候補メイン画像の情報テーマとウェブページのテーマとを比較して、ウェブページのテーマにマッチングする候補メイン画像を決定する。
【００３７】
候補メイン画像の情報テーマは、当業者が慣用する画像テーマ抽出技術手段により抽出することもできるし、あるいは第１のモデルツールによって認識された候補メイン画像の情報テーマを直接的に取得することもできる。
【００３８】
実際の応用において、広告主は、通常ウェブページに落札語を設定し、これらの落札語はある１つのテーマに集中するのが一般的である。そのため、ウェブページのテーマは、当該ウェブページに対してユーザによって予め設定された落札語に基づいて決定される。
【００３９】
最後に、ステップ２４０において、マッチングする候補メイン画像に対応する画像構図をウェブページのメイン画像として認識する。
【００４０】
さらに、本願実施例は、検索結果コンテンツの生成に応用することができる。例えば、ユーザが検索キーワードを入力した後、ユーザによって入力された検索キーワードをクエリテーマとすることができ、クエリテーマを受信した後、情報テーマが当該クエリテーマにマッチングするメイン画像を検索することができ、次に、検索されたマッチングする画像を検索結果コンテンツとして表示する。
【００４１】
上記の記載から分かるように、本願の一部の実施例において、従来のウェブページのテーマが強調されてない問題に対して、候補メイン画像の情報テーマに基づいて、候補メイン画像をトリミングする技術案が提案される。このようにすることで、候補メイン画像のテーマを強調した合理的な構図を取得することができ、さらにウェブページのテーマにマッチングした後、ウェブページのテーマを効果的に強調するメイン画像を取得することができ、ウェブページ情報の伝達効率が向上し、ユーザの体験が向上する。さらに、実際の応用において、認識されたウェブページメイン画像が宣伝され表示されると、その宣伝のクリック率は大きく向上する。
【００４２】
なお、図面において、特定の順番に従って本発明方法の操作が記載されたが、当該特定の順番に従ってこれらの操作を実行しなければならず、又は示された操作を全部実行しなければ、所望の結果が実現されないということを開示又は暗示的に開示されることではない。むしろ、フローチャートに記載されたステップは、その順番の一部を変えることができる。例えば、ステップ２１０を実行した後、先ずはステップ２３０を実行し、情報テーマがウェブページのテーマにマッチングする候補メイン画像を決定し、その後、ステップ２２０を実行し、ウェブページのテーマにマッチングする候補メイン画像に対し、当該候補メイン画像の情報テーマに基づいて候補メイン画像の原画像をトリミングして、対応する画像構図を取得し、さらに、ステップ２４０で、マッチングする候補メイン画像に対応する画像構図をウェブページのメイン画像として認識することができる。
【００４３】
図３は、本願の他の実施例に係るウェブページメイン画像認識方法の例示的なフローチャートを示す。図３に示す方法は、図１における端末装置又はサーバーで実行される。
【００４４】
図３に示すように、ステップ３１０において、ウェブページにおける各画像のページ属性に基づいて候補メイン画像を選別する。
【００４５】
ステップ３１０はステップ２１０に類似しているため、ここでは贅言しない。
【００４６】
ステップ３２０において、候補メイン画像の情報テーマに基づいて候補メイン画像の原画像をトリミングして、対応する画像構図を取得する。
【００４７】
ステップ３２０はステップ２２０に類似しているため、ここでは贅言しない。
【００４８】
ステップ３３０において、候補メイン画像の画像タイプを取得し、所定の画像タイプの候補メイン画像をフィルタリングする。
【００４９】
図３に示す実施例において、品質の低い画像をフィルタリングするために、ディープラーニングに基づく第２のモデルツールにより、候補メイン画像の原画像を分類し、候補メイン画像の画像タイプを決定することができる。次に、ステップ２１０で選別された候補メイン画像を所定のフィルタリング条件によってフィルタリングする。例えば、所定の画像タイプの候補メイン画像をフィルタリングする。所定の画像タイプは、テクスチャータイプと、二次元コードタイプとのうちの少なくとも１つを含む。実際の応用において、実際の需要に応じて、フィルタリングする必要のある所定の画像タイプを設定してもよい。
【００５０】
第２のモデルツールは、ディープラーニングに基づく予めトレーニングされた分類モデルである。例えば、サンプル画像を予め収集し、サンプル画像のタイプ説明を人工的に決定し、次に、収集されたサンプル画像と対応するタイプ説明とをトレーニングサンプルとし、分類モデルをトレーニングして、第２のモデルツールを取得してもよい。実際の応用において、第２のモデルツールのトレーニングは、本分野の慣用する他の技術手段を用いてもよく、ここでは贅言しない。
【００５１】
次に、ステップ３４０において、情報テーマがウェブページのテーマにマッチングする候補メイン画像を決定する。
【００５２】
最後に、ステップ３５０において、マッチングする候補メイン画像に対応する画像構図をウェブページのメイン画像として認識する。
【００５３】
さらに、ユーザによって入力された検索キーワードをクエリテーマとすることができ、クエリテーマを受信した後、情報テーマが当該クエリテーマにマッチングするメイン画像を検索することができ、次に、検索されたマッチングするメイン画像を検索結果コンテンツとして表示する。
【００５４】
上記の記載から分かるように、本願の一部の実施例において、従来のウェブページテーマが強調されてない問題について、候補メイン画像の情報テーマに基づいて候補メイン画像をトリミングする技術案が提案される。このようにすることで、候補メイン画像のテーマを強調した合理的な構図を取得することができ、さらにウェブページのテーマにマッチングした後、ウェブページのテーマを効果的に強調するメイン画像を取得することができ、ウェブページ情報の伝達効率が向上し、ユーザの体験が向上する。
【００５５】
また、図３の実施例は、図２の実施例に比べ、画像タイプにより候補メイン画像をフィルタリングする技術案を追加し、品質の低い画像をフィルタリングすることにより、最終的に決定されたウェブページメイン画像に対する高品質の需要を保障することができ、ユーザ体験が向上する。
【００５６】
なお、図面において、特定の順番に従って本発明方法の操作が記載されているが、当該特定の順番に従ってこれらの操作を実行しなければならず、又は示された操作を全部実行しなければ、所望の結果が実現されないということを開示又は暗示的に示しているわけではない。むしろ、フローチャートに記載されたステップは、その順番を変えることができる。例えば、実施例３におけるステップ３２０とステップ３３０とはその順番を交換したり、同時に行ったりすることができる。付加的に又は候補的に、一部のステップを省略することができ、複数のステップを１つのステップにマージして実行し、及び／又は１つのステップを複数のステップに分解して実行してもよい。
【００５７】
さらに、本願の一実施例に係るウェブページメイン画像認識装置４００の例示的な構成ブロック図を示す図４を参照する。
【００５８】
図４に示すように、ウェブページメイン画像認識装置４００は、属性選別ユニット４０１と、構図トリミングユニット４０２と、テーママッチングユニット４０３と、メイン画像決定ユニット４０４と、を含んでもよい。
【００５９】
属性選別ユニット４０１は、ウェブページにおける各画像のページ属性に基づいて候補メイン画像を選別するように構成される。
【００６０】
ページ属性は、ページ位置と画面比率とのうちの少なくとも１つを含む。
【００６１】
具体的には、属性選別ユニット４０１は、画像のページ位置と所定の中心位置との差が第１の閾値より小さい条件と、画像の画面比率が第２の閾値を超える条件とのうちのいずれか１つを満足するウェブページ内の画像を候補メイン画像として選別するように構成される。
【００６２】
構図トリミングユニット４０２は、候補メイン画像の情報テーマに基づいて、候補メイン画像の原画像をトリミングして、対応する画像構図を取得するように構成される。
【００６３】
具体的には、構図トリミングユニット４０２は、ディープラーニングに基づく第１のモデルツールにより、候補メイン画像の情報テーマを認識し、ディープラーニングに基づく第１のモデルツールにより、候補メイン画像の原画像をトリミングして、情報テーマを強調した画像構図を取得するように構成される。
【００６４】
テーママッチングユニット４０３は、情報テーマがウェブページのテーマにマッチングする候補メイン画像を決定するように構成される。
【００６５】
ウェブページのテーマは、当該ウェブページに対してユーザによって設定された落札語に基づいて決定される。
【００６６】
メイン画像認識ユニット４０４は、マッチングする候補メイン画像に対応する画像構図をウェブページのメイン画像として認識するように構成される。
【００６７】
選択可能に、ウェブページメイン画像認識装置４００は、メイン画像表示ユニットをさらに含んでもよい。
【００６８】
メイン画像表示ユニットは、クエリテーマを受信した後、情報テーマがクエリテーマにマッチングするメイン画像を検索し、マッチングするメイン画像を表示するように構成される。
【００６９】
なお、ウェブページメイン画像認識装置４００に記載された諸ユニットは、図２に説明された方法における各ステップに対応するものである。これにより、方法に対して説明された上記の操作及び特徴は、ウェブページメイン画像認識装置４００及びそれに含まれたユニットにも適用され、ここでは贅言しない。
【００７０】
さらに、本願の他の実施例に係るウェブページメイン画像認識装置５００の例示的な構成ブロック図を示す図５を参照する。
【００７１】
図５に示すように、ウェブページメイン画像認識装置５００は、属性選別ユニット５０１と、構図トリミングユニット５０２と、候補フィルタリングユニット５０３と、テーママッチングユニット５０４と、テーマ決定ユニット５０５と、を含んでもよい。
【００７２】
属性選別ユニット５０１は、ウェブページにおける各画像のページ属性に基づいて、候補メイン画像を選別するように構成される。ページ属性は、ページ位置と画面比率とのうちの少なくとも１つを含む。
【００７３】
具体的には、属性選別ユニット５０１は、画像のページ位置と所定の中心位置との差が第１の閾値より小さい条件と、画像の画面比率が第２の閾値を超える条件とのうちのいずれか１つを満足するウェブページ内の画像を候補メイン画像として選別するように構成される。
【００７４】
構図トリミングユニット５０２は、候補メイン画像の情報テーマに基づいて、候補メイン画像の原画像をトリミングして、対応する画像構図を取得するように構成される。
【００７５】
具体的には、構図トリミングユニット５０２は、ディープラーニングに基づく第１のモデルツールにより、候補メイン画像の情報テーマを認識し、ディープラーニングに基づく第１のモデルツールにより、候補メイン画像の原画像をトリミングして、情報テーマを強調した画像構図を取得するように構成される。
【００７６】
候補フィルタリングユニット５０３は、候補メイン画像の画像タイプを取得し、所定の画像タイプの候補メイン画像をフィルタリングするように構成される。所定の画像タイプは、テクスチャータイプと二次元コードタイプとのうちの少なくとも１つを含む。
【００７７】
具体的には、候補フィルタリングユニット５０３は、ディープラーニングに基づく第２のモデルツールにより、候補メイン画像の原画像を分類して、候補メイン画像の画像タイプを決定するように構成される。
【００７８】
テーママッチングユニット５０４は、情報テーマがウェブページのテーマにマッチングする候補メイン画像を決定するように構成される。ウェブページのテーマは、当該ウェブページに対してユーザによって設定された落札語に基づいて決定される。
【００７９】
メイン画像認識ユニット５０５は、マッチングする候補メイン画像に対応する画像構図をウェブページのメイン画像として認識するように構成される。
【００８０】
選択可能に、ウェブページメイン画像認識装置５００は、メイン画像表示ユニットをさらに含んでもよい。
【００８１】
メイン画像表示ユニットは、クエリテーマを受信した後、情報テーマがクエリテーマにマッチングするメイン画像を検索し、マッチングするメイン画像を表示するように構成される。
【００８２】
なお、ウェブページメイン画像認識装置５００に記載された各ユニットは、図２に説明された方法における各ステップに対応するものである。これにより、上記の方法に対して説明された操作及び特徴は、ウェブページメイン画像認識装置５００及びそれに含まれたユニットにも適用され、ここでは贅言しない。
【００８３】
さらに、本願実施例は、１つまたは複数のプロセッサー及びメモリを含むコンピューティング装置をさらに提供し、メモリは、プロセッサーに本願実施例によって提供されるウェブページメイン画像認識方法を実行させるように、プロセッサーによって実行可能な命令を含む。
【００８４】
本願実施例を実現するコンピューティング装置６００の概略構成図を示す図６を参照する。
【００８５】
図６に示すように、コンピュータシステム６００は、リードオンリーメモリ（ＲＯＭ）６０２に記憶されているプログラム或いはメモリ部６０８からランダムアクセスメモリ（ＲＡＭ）６０３にロードされたプログラムに従って各種の適切な動作及び処理を実行することができる中央処理装置（ＣＰＵ）６０１を含む。ＲＡＭ６０３にはシステム６００の操作に必要な各種のプログラムとデータとも記憶されている。ＣＰＵ６０１、ＲＯＭ６０２及びＲＡＭ６０３は、バス６０４を介して互いに接続される。入力／出力（Ｉ／Ｏ）インターフェイス６０５もバス６０４に接続される。
【００８６】
キーボードやマウスなどを含む入力部６０６と、ブラウン管（ＣＲＴ）、液晶ディスプレイ（ＬＣＤ）など及びスピーカなどを含む出力部６０７と、ハードディスクなどを含むメモリ部６０８と、ＬＡＮカード、モデムなどのネットワークインターフェイスカードなどを含む通信部分６０９と、がＩ／Ｏインターフェイス６０５に接続される。通信部６０９は、インターネットのようなネットワークを介して通信処理を実行する。ドライバ６１０も需要に応じてＩ／Ｏインターフェイス６０５に接続される。ドライバ６１０には、需要に応じて磁気ディスク、光ディスク、磁気光ディスク、半導体メモリなどのようなリムーバブル媒介６１１が取り付けられ、そこから読み出されたコンピュータプログラムが需要に応じてメモリ部６０８にインストールされる。
【００８７】
特に、本開示の実施例によれば、上記の図２〜図３を参照して説明されたプロセスは、コンピュータソフトウェアプログラムとして実現されてもよい。例えば、本開示の実施例は、機械読み取り可能な媒介に有形に具体化されたコンピュータプログラムを含むコンピュータプログラム製品を含み、前記コンピュータプログラムは、図２〜図３の方法を実行するプログラムコードを含む。このような実施例において、当該コンピュータプログラムは、通信部６０９によりネットワークからダウンロードされインストールされてもよいし、及び又はリムーバブル媒介６１１によりインストールされてもよい。
【００８８】
図面におけるフローチャートとブロック図は、本発明における各種の実施例のシステム、方法及びコンピュータプログラム製品によって実現可能な体系構成、機能及び操作を示す。この点について、フローチャート或いはブロック図におけるそれぞれのブロックは、１つのモジュール又はユニット、プログラムセグメント或いはコードの一部を表すことが可能であり、前記モジュール或いはユニット、プログラムセグメント、コードの一部は、１つまたは複数の所定のロジック機能を実現する実行可能な命令を含む。なお、いくつかの代替実施形態において、ブロックに示された機能は、図面に記載された順番に従わずに発生してもよい。例えば、連続して表示された２つのブロックは、実際にほぼ並行に実行されてもよく、またそれらは含まれる機能に応じて逆の順序で実行されてもよい。なお、ブロック図及び/又はフローチャートにおけるそれぞれのブロック及びブロック図及び／又はフローチャートにおけるブロックの組み合せは、所定の機能及び操作を実行する専門のハードウェアに基づくシステムにより実現され、又は専門のハードウェアとコンピュータ命令との組み合せにより実現される。
【００８９】
本願実施例に言及されたユニット或いはモジュールは、ソフトウェアの形で実現されてよいし、ハードウェアの形で実現されてもよい。説明されたユニット或いはモジュールは、プロセッサーに設置してもよい。これらのユニット或いはモジュールの名称は、当該ユニット又はモジュール自身に対する限定にはならない場合がある。
【００９０】
一方、本願は，コンピュータプログラムが記憶されているコンピュータ読み取り可能な記憶媒体も提供し、当該コンピュータ読み取り可能な記憶媒体は、上記の実施例における前記コンピューティング装置に含まれたコンピュータ読み取り可能な記憶媒体であってよいし、別体に存在して、装置に取り付けられていないコンピュータ読み取り可能な記憶媒体であってもよい。コンピュータ読み取り可能な記憶媒体は、本願に記載の式の入力方法を実行するために１つまたは複数のプロセッサによって使用される１つまたは複数のプログラムを記憶する。
【００９１】
以上の記載は、本願の好ましい実施例及び運用された技術原理の説明に過ぎない。当業者であれば、本願に係る発明範囲が、上記の技術特徴の特定の組み合せにより構成された技術案に限らず、前記発明の思想を逸脱しない限り、上記の技術特徴又は同等な特徴を任意に組み合せて形成した他の技術案も含むべきである。例えば、上記の特徴を本願に開示された（限らず）類似機能を有する技術特徴と互いに交換して形成された技術案も含むべきである。
【図１】
0006838167.tif 000002
【図２】
0006838167.tif 000003
【図３】
0006838167.tif 000004
【図４】
0006838167.tif 000005
【図５】
0006838167.tif 000006
【図６】
0006838167.tif 000007