DirectShow

DirectShowに対するものとしてAppleのQuickTime、Linux向けにGStreamerやXineなどのマルチメディアフレームワークが存在する。

Windows Vistaからは、Media Foundationを後継とすることが計画されているMigrating from DirectShow to Media Foundation | Microsoft Docs。

 歴史 
DirectShowの直接の前身はActiveMovie (コードネームQuartz) であり、当初はWindowsをMPEG-1ファイル再生に対応させるために作られた。そこから、Bフレーム未対応のVideo for Windowsや、完全32ビット化やCOM化されなかった (MCI) の後継たるマルチメディアフレームワークとして拡張されることとなった。

ActiveMovieは1996年3月に公表され、同年5月ベータ版のInternet Explorer 3.0で初公開となった。1997年3月、ActiveMovieはDirectX 5の一部となることが公表され、直接的にハードウェアを扱う技術に共通の命名を行う方針を受けて7月にはDirectShowと呼ばれ始めたDirectX Then and Now (Part 1)。そして、Windows 98からすべてのWindowsに標準搭載されるようになったMicrosoft Releases DirectShow SDK - Universal Playback for DVD, Digital Video and Audio, and the Internet。DirectX 8.0から他のDirectX APIと同様に重要なコンポーネントとして扱われるようになっているFrequently Asked Questions About the DirectShow and Windows Media SDKs | Microsoft Docs。

2004年10月、DirectShowはDirectX SDKから外されDirectX SDK Extrasに含まれるようになり、さらには2005年4月、DirectShowはDirectX SDKから完全に取り除かれ、当時Windows Server 2003 SP1版だったPlatform SDKに移管された。ただし、でもDirectShowのサンプルプログラムのビルドには依然としてDirectX SDKが必要であるDirectShow Samples | Microsoft DocsDirectShow Samples - Windows applications | Microsoft Docs。

 アーキテクチャ 
DirectShowは大きなマルチメディアタスク（映像・音声再生など）をフィルターの並びへ小さく分割して取り扱うIntroduction to DirectShow Application Programming | Microsoft DocsDirectShow System Overview | Microsoft Docs。各々のフィルターはデータ加工の1段階を表す。フィルターには、さらに入出力を意味し他のフィルターとの接点となる「ピン」があり、ピンの接続の仕方によって様々な機能を実現できるようになっているAbout DirectShow Filters | Microsoft Docs。DirectShowを使用するプログラムでは、フィルターインスタンスの作成と接続を行なってを構築するOverview of Graph Building | Microsoft Docs。

フィルターは主に3種類ある。
ソースフィルター
ファイルから読み込むなど、データストリームを提供する。
変換フィルター
他のフィルターの出力を受け取り、変換を行う。例えば、非圧縮ビデオにテキストを付加するなど。
レンダーフィルター
レンダリングを行う。サウンドカードに音声を送ったり、画面にビデオを描画したり、ファイルに書き出したりするものなど。

を視覚的に構築して試すことができるツールとしてが存在するOverview of GraphEdit (Windows) | Microsoft Docs。GraphEditでは、レジストリから登録されているフィルターを探し、接続して、実行（再生、一時停止など）を行える。再生にあたって、フィルターグラフは再生（再生1つ取ってもファイルパース、音声と映像の分離、圧縮解除、レンダリングと細分される）・録画・録音・編集・圧縮・変換・ネットワーク転送など幅広く使用されており、それだけでなくDirectShowではDVD操作などインタラクティブな操作も可能となっている。

大半のフィルターはDirectShow基底クラス (Base Classes) と呼ばれるDirectShow SDK収録のC++クラスを使用して作られているDirectShow Base Classes | Microsoft DocsDirectShow Base Classes - Windows applications | Microsoft DocsDirectShow Base ClassesはかつてDirectX SDK/Windows SDKにサンプルのひとつとして収録されていたが、Windows SDK 8.0以降は取り除かれており、代替としてGitHub上で公開されている。Windows-classic-samples/Samples/Win7Samples/multimedia/directshow/baseclasses at master · microsoft/Windows-classic-samples。DirectShow基底クラスは、フィルターの作成・接続や、フィルターグラフがフィルターを自動的に使用できるよう必要なレジストリへの登録を扱ってくれる。自動的に使わせたくないフィルターでは、登録させないことも可能である。
実行中のグラフへの修正は困難である。大抵はグラフを停止させ、新たに作り直すほうが簡単である。これに対処するため、DirectShow 8.0では動的なグラフの作成・再接続、フィルターの連鎖の機能が追加されたDynamic Graph Building | Microsoft Docs。しかし、ほとんどのフィルター製作者がこの機能を無視しているため、実行中のグラフの作成が問題なく行えるとは言い難い状況である。

 特徴 
標準では一般的なメディア形式のフィルターしか導入されない。例えば、コーデックとしてMPEG-1, MP3, Windows Media Audio, Windows Media Video, MIDI、コンテナフォーマットではAVI, ASF, WAV、それ以外には分離・多重化・入力元・出力先（シンク）・静的な画像のフィルターなどである。これらの特許はWindowsにライセンスされており、別途ライセンスを受ける必要はない。現在、評判が良く標準が制定された現代的なMPEG-4 ASP, AAC, H.264, VorbisのコーデックやOgg, MOV, MP4などのコンテナなどが含まれていないことに注意が必要である。使用には、別途コーデックを得る必要がある。

しかし、DirectShowは、市販品やオープンソースのソースフィルターを使って拡張でき、様々なコンテナ形式や音声・映像のコーデックがある。例えば、Ogg Vorbis, Musepack, AC3 AC3Filter などが挙げられる。さらに、VLCのように、他のマルチメディアAPIの機能を提供するブリッジフィルターというものも存在する。

フィルターグラフの構築には、様々な方法が考えられる。もっとも単純なのは、ファイルやURLなどからDirectShowに自動でフィルターグラフを構築させる方法であるDirectShow For Media Playback In Windows: Customizing Graphs。それが不可能なら、ソースフィルターなどと必要に応じて既存のカスタムフィルターを手動で追加する方法が考えられる。その場合、接続はDirectShowに任せたり必要に応じて手動で行ったりする。また、適当なフィルターがなければ、カスタムフィルターの作成から行うことになる。

再生時、MoviesTaskを呼び続けないといけないQuickTimeのC APIと違い、DirectShowは透過的に扱う。つまりバックグラウンドスレッドを作って、プログラマーに余計な負担を強いることなくスムーズな再生を実現している。もう1つ、QuickTimeとの違いとして、URLからの読み込みとコンピュータ内のローカルファイルとの読み込みの手順で特に違いが存在しないということが挙げられる。これは、DirectShowのフィルターグラフが差異を吸収するためであり、QuickTime (ActiveXコントロール) でもはこの点が改善されている。

 DirectShow編集サービス 
DirectShow編集サービス (DirectShow Editing Services, DES) は、Windowsムービーメーカーのため、DirectX 8.0 / Windows XPで導入されたDirectShowのアーキテクチャ上で構築された映像編集を行うAPIである。これには、タイムライン、トラック、サイズ変更、クロップ、映像・音声へのエフェクト、トランジション、キーイング、自動フレームレート、サンプリング周波数変換やその他ノンリニア編集で用いられる無数の機能が搭載されている。さらに、高水準の実行時合成、シーク対応、グラフ管理は低水準のDirectShowの機能を使用中でも利用できる。

DirectShow編集サービスはVisual C++向けにインターフェイスが用意されているが、ではC#やVB.NETなどといった.NET言語で利用できるようにするサードパーティのライブラリとしてDirectShow Libが存在するDirectShow.NET。

ほかには、DirectShow編集サービスも含めたDirectShowのAPIをDelphi 5, 6, 7およびC++ Builder 6などで利用可能にするサードパーティのライブラリとしてDSPackが存在するDSPack。

 ビデオレンダラーフィルター 
当初、DirectShowが映像を再生する手段としてビデオレンダラーフィルターが用いられた。これは、まずDirectDraw、それが駄目ならGDIを用いて描画するレンダラーである DirectShow Video Renderer Filter | Microsoft Docs。ビデオレンダラーでは、ビデオウィンドウへのアクセスが制限される。Video for Windowsでは、映像再生用ウィンドウのハンドルに対して、アプリケーションが適切な扱いをしないことに起因するデッドロックに苦慮したため、初期のDirectShowでは、再生するためのウィンドウへのハンドルがアプリケーションから隠蔽されていたこともあった。そのため、画面の映像上に字幕の文字や絵を描画する確実な方法は当時存在しなかった。

DirectShow 6.0では、DirectX Mediaの一部として、オーバーレイミキサーをリリースした。これは、字幕を付けてのDVDやストリーミング放送の再生のために作られ、DirectDrawをレンダリングに用いる。なお、オーバーレイミキサーの使用の際には、ウィンドウ管理のためフィルター接続の下流に「ビデオレンダラー」フィルターが必要である。オーバーレイミキサーは（PCIを通さず直接ビデオカードへ映像信号を送る）オーバーレイ対応のアナログTVチューナーカードと協調するためのVideo Port Extensions (VPE) もサポートしている。また、DXVA接続にも対応している。

Windows XPではVideo Mixing Renderer 7 (VMR-7、単にVMRと表記されることも) が導入された。この7は、GDIを全く使用せずDirectDrawバージョン7を描画に用いることに由来する。VMR-7の特徴は、複数のストリームやグラフィックスの混合が可能になったことである。例えば、アプリケーションが映像上に文字や絵を乗せることが可能になったのである。また、VMR-7にはウィンドウハンドルの扱いに関する問題を改善した「ウィンドウレスモード」が存在する。公式には、VMR-7はWindows XP以降にしか用意されていない。

DirectX 9ではVMR-9が搭載されている。これはDirectDrawではなく、Direct3D 9を描画に用いる 。こちらは、DirectX 9が使用可能なすべてのWindowsで利用可能である。

Windows Vistaでは、Media FoundationとEnhanced Video Renderer (EVR)と呼ばれる新しいレンダラーが用意されている。EVRはDXVA 2.0に対応しているが、Windows Vistaには搭載されていないMedia Foundation forum。

 関連項目 
 Microsoft DirectX

  – オープンソースのGraphEdit相当を制作するプロジェクト

 Media Foundation

 DirectX Video Acceleration

 参考 

 (Sample Chapter)

 脚注 

 外部リンク 

DirectShow - Windows applications | Microsoft Docs – 公式ドキュメント
Good Overview of Video Renderer versions
Search results - Microsoft Download Center – DirectShow関連の検索結果
Radlight Ogg Theora DirectShow filter
J. River DirectShow Playback Guide – 'A tutorial on DirectShow focused on J. River's Media Center, but contains good general-purpose information as well.'

Show
Category:マルチメディアソフトウェア