エッジ検出フィルタ sobel, prewitt

Posted on (Updated on ) in FFmpeg

ffmpeg 3.2でリリースしたビデオフィルタ。エッジ検出フィルタに単体ではedgedetectとfrei0rのsobelがあり、カーネルを指定するconvolutionでもエッジ検出ができるが、今回のこれらのフィルタはedgedetectよりもエッジ部分の線が太くconvolutionよりも手軽なのでマスクするのにも便利。sobelとprewitt、robertsはカーネルが少し異なるがオプションは同じである。

基本コマンド

ffmpeg -i input -vf sobel=planes=15:scale=1:delta=0 output
ffmpeg -i input -vf sobel=15:1:0 output
ffplay -i input -vf sobel=15:1:0

Continue reading “エッジ検出フィルタ sobel, prewitt”

2つの連続したフィールドを1つのフレームで出力する weave

Posted on (Updated on ) in FFmpeg

ffmpeg 3.2でリリースしたビデオフィルタ。フィールドを合わせてフレームにするweaveフィルタの使い方。縦解像度が2倍になり、フレームレートとフレーム数は2分の1になる。3.4の追加フィルタでdoubleweaveフィルタもある。こちらは縦解像度が2倍になるが、フレームレートとフレーム数は変わらない。

各フィールドをフレームに変換する separatefields

基本コマンド

separatefieldsでフィールド分解したのをフレームに戻す。つまり何も変わらない
ffmpeg -i input -vf separatefields,weave output
ffplay -i input -vf separatefields,weave

tinterlaceフィルタのtinterlace=0と同じことができる

2フレームに1フレーム、フィールドがずれたフレームが追加される。解像度はそのままにフレーム数とフレームレートは元映像の倍になる
ffmpeg -i input -vf separatefields,doubleweave output
ffplay -i input -vf separatefields,doubleweave

公式ドキュメント：FFmpeg Filters Documentation : weave, doubleweave

Continue reading “2つの連続したフィールドを1つのフレームで出力する weave”

複数の映像を1つの映像に合わせるinterleave

Posted on (Updated on ) in FFmpeg

2以上の映像をPTSに即して連続した映像で出力するinterleaveフィルタの使い方。フィルタを使ってエンコードするときは出力オプションに-rで動画のフレームレートを指定する。selectフィルタを併用するとシーンチェンジやフレームタイプ別にフィルタを使い分けられる。

関連フィルタ：
フィールドを足したり引いたりする tinterlace
ピクチャーをインターリーブ、デインターリーブするil

Continue reading “複数の映像を1つの映像に合わせるinterleave”

ウェーブレットデノイザ vaguedenoiser

Posted on (Updated on ) in FFmpeg

ffmpeg 3.2 でリリースのビデオフィルタ。Cohen-Daubechies-Feauveau(CDF) 9/7 のウェーブレットデノイザ。フィルタを当てるチャンネルを指定できる。

基本コマンド

ffmpeg -i input -vf vaguedenoiser=threshold=2:method=2:nsteps=6:percent=85:planes=15 output
ffmpeg -i input -vf vaguedenoiser=2:2:6:85:15 output
ffplay -i input -vf vaguedenoiser=2:2:6:85:15

公式ドキュメント：FFmpeg Filters Documentation : vaguedenoiser

Continue reading “ウェーブレットデノイザ vaguedenoiser”

ffmpeg でフレーム補間する minterpolate

Posted on (Updated on ) in FFmpeg

ffmpeg 3.2 でリリースしたビデオフィルタ。前後フレームから中間フレームを作り出すminterpolateフィルタの使い方。無料でフレーム補間する方法には AviSynth+MvTools が一般的だが、もっと手軽に1コマンドでフレーム補間した動画を作ることができる。

基本コマンド

かなり負荷が高く、シングルスレッドしか働かないので出力解像度を小さくしないと ffplay ではプレビューがまともに動かない。

30fps の動画を 60fps にフレーム補間する
ffmpeg -i input -vf minterpolate=fps=60:mi_mode=mci:mc_mode=obmc:me_mode=bilat:me=epzs:mb_size=16:search_param=32:vsbmc=0:scd=fdiff:scd_threshold=5 output
ffmpeg -i input -vf minterpolate=60:2:0:1:8:16:32:0:1:5 output

2つの映像から映像補間した効果を作る例。
Motion Interpolation for Glitch Aesthetics using FFmpeg part 1 | Antonio Roberts

公式ドキュメント：FFmpeg Filters Documentation : minterpolate

Continue reading “ffmpeg でフレーム補間する minterpolate”

2016年8月のニコ生統計

Posted on in niconico, ニコニコ生放送

集計期間は週間のニコ生統計の1ヶ月分である。2015年の1月の2週目から取得漏れの R-18 放送を含めて Vita API で取得し始めたのでそれ以前と比べて取得放送数が増えている。

Continue reading “2016年8月のニコ生統計”

LUTを手軽に入れ替えられるlut2、tlut2、swapuv

Posted on (Updated on ) in FFmpeg

ffmpeg 3.2でリリースしたビデオフィルタ。映像のYUVやRGBを別の映像と入れ換えるときに今まではextractplanesフィルタで対象チャンネルを取り出して、mergeplanesフィルタで合わせていたのがlut2フィルタだけで入れ換えるられる。ただし複数入力するビデオフィルタでは同じ解像度とSARでないとエラーが出る。1入力目がYUVAで2入力目がRGBAの場合、YUVAにRGBAのAと入れ換えることもできる。

ffmpeg 3.4でリリースした同じオプションでtlut2フィルタも追加された。こちらは1入力1出力になり、前後フレームのLUTを入れ換える。いわゆるtblendフィルタのLUT版になる。また1入力で各チャンネルを入れ換えるにはshuffleplanesや、swapuvフィルタがある。

lut2、tlut2

基本コマンド

1入力の Y（または R）をそのままに、1入力の UV（またはGB）を2入力の UV（またはGB）と入れ換える。
ffmpeg -i input1 -i input2 -filter_complex lut2=c0=x:c1=y:c2=y output
ffmpeg -i input1 -i input2 -filter_complex lut2=x:y:y output
ffmpeg -i input1 -i input2 -filter_complex lut2=x:y:y,realtime -f sdl -

公式ドキュメント：FFmpeg Filters Documentation : lut2, tlut2

Continue reading “LUTを手軽に入れ替えられるlut2、tlut2、swapuv”

映像の差分を加算する maskedclamp

Posted on (Updated on ) in FFmpeg

ffmpeg 3.2 でリリースしたビデオフィルタ。映像を3入力し、1入力目を基本の映像として、1入力目と比較して2入力目は差分の値がプラスのときに、1入力と比較して3入力目は差分の値がマイナスのときに、その差分だけ1入力と入れ換えるmaskedclampフィルタの使い方。同じようなことがblendフィルタでもできるが、こちらは3入力できるところが特徴である。4.2.2 以降のバージョンで変更があり挙動がよくわからなくなっている。

基本コマンド

同じ映像を3入力しても出力映像は変わらない。
ffmpeg -i input -vf split=3[0][1][2];[0][1][2]maskedclamp=undershoot=0:overshoot=0:planes=15 output
ffplay -i input -vf split=3,maskedclamp=0:0:15

公式ドキュメント：FFmpeg Filters Documentation : maskedclamp

Continue reading “映像の差分を加算する maskedclamp”

映像フィルタを当てる前後のデータを見える化する

Posted on (Updated on ) in FFmpeg

ffmpeg には多くの映像フィルタと音声フィルタがあるが、その効果を調べるのに主観的な判断だけではなく、客観的な判断ができるように数値を映像に表示したり、ヒストグラムを表示したりすることで映像の差違を見える化する。nullフィルタを別のフィルタに変更することでフィルタを当てた同士で比較できる。

Continue reading “映像フィルタを当てる前後のデータを見える化する”

一定間隔で映像に線を引く drawgrid

Posted on (Updated on ) in FFmpeg

映像に縦線や横線、または格子状に直線を引くdrawgridフィルタの使い方。

基本コマンド

10×20の位置に交差し、100×50毎に太さ2ピクセルで赤の半分透過した格子状の線を引く

ffmpeg -i input -vf drawgrid=x=10:y=20:width=100:height=50:thickness=2:color=red@0.5 output
ffmpeg -i input -vf drawgrid=10:20:100:50:red@.5:2 output
ffplay -i input -vf drawgrid=10:20:100:50:red@.5:2

公式ドキュメント：FFmpeg Filters Documentation : drawgrid

Continue reading “一定間隔で映像に線を引く drawgrid”