iOSの動画処理について学べる日本語書籍のまとめ

昨日『AV Foundationで120fpsスローモーション動画撮影を実装する』という記事を書いたのですが、動画まわりの処理もオーディオと同様、基本的なところから一歩踏み込もうとすると途端に難しく、web上の情報も少ないと感じました。

この辺りはこれから勉強していきたいので、まずは情報収集、ということで、関連する技術情報が載っている書籍を列挙してみました。

動画処理といっても、撮影、編集、エフェクト、エンコード／デコード（書き出し／読み出し）etc...と多岐にわたりますが、とにかくそのあたりに関するものは何でもOK、ただしMPMoviePlayerControllerを使った動画再生と、UIImagePickerControllerを使った動画撮影については対象外 *1 としました。

ちなみに動画処理の観点からのオススメ順にならんでおります。

なお、いずれも自分が購入済みのものです。今後購入したら追記するかもしれません。

iPhoneアプリ開発エキスパートガイド iOS 6対応

加藤寛人藤川宏之高丘知央西方夏子吉田悠一関川雄介
インプレスジャパン
売り上げランキング: 68,347

Amazon.co.jpで詳細を見る

『7-1 AVFoundationを使った撮影』で、15ページにわたってAVFoundationを用いた動画撮影まわりの機能についての解説があります。

冒頭でまず、AVFoundationのキャプチャセッションについての図解入りのわかりやすい説明があり、これがかなり勉強になります。

以降はiOS6で強化された機能についての解説なのですが、動画まわりに関連する事項が多く、他の書籍にはないレア情報満載です。

暗い場所での撮影
- センサー感度のブースト（発刊当時はiPhone5のみ対応）
- トーチの光量調整
AVFoundationによるリアルタイム顔認識
Core Imageによる顔のトラッキング
手振れ補正

リアルタイム顔認識は、単にCoreImageでの顔認識処理が内部的に高速化されたので毎フレーム顔認識かけても大丈夫、という話かなと思ったのですが、そうではなくて、AVFoundationでの動画撮影処理において、AVCaptureMetadataOutputオブジェクトをセッションに追加しておくことで、顔検出の結果がメタデータとしてリアルタイムに得られる、というものでした。知らなかった！

iOS4プログラミングブック

畑圭輔加藤寛人坂本一樹藤川宏之高橋啓治郎沖田知彦柳澤昇
インプレスジャパン
売り上げランキング: 32117

Amazon.co.jp で詳細を見る

『3-3 ビデオの編集とエクスポート』で、AV Foundationを用いたビデオの編集とエクスポートの方法について31ページにわたって解説されています。

さっと挙げると、以下のような事項が解説されています。

動画の結合
動画のエクスポート
動画に演出効果（フェードイン／フェードアウト／クロスフェード）を加える
- ビデオトラックの半透明合成
- オーディオトラックの音量調整
ビデオに画像や文字を合成する
- CALayerとビデオを合成し、CoreAnimationから文字や画像を制御する、という話
- Core Animationとの同期再生
- 合成されたビデオのエクスポート