同時録画が暗い場所でノイズっぽくなるのはなぜか

まず、暗所はどんなスマホカメラにも厳しい

カメラはセンサーに届いた光の量を数えて像を作ります。スマホのレンズは小さいので、暗い部屋では専用カメラよりずっと少ない光しか取り込めず、センサーは各画素の信号を増幅することで補おうとします。この増幅は本物のディテールと背景ノイズを区別せずまとめて持ち上げるので、ある程度を超えるとノイズのほうが画面の主役になります。粒状感、まだらな影、フレームごとにわずかに揺れる色。これは単眼撮影でも起きることで、暗所でのスマホの小さな光学系そのものの性質であり、2系統同時に録っていることとは関係ありません。

ハードウェア予算を分け合うことが、その上に何を加えるか

マルチカメラセッションは2つのライブ映像パイプラインを1つの合計ハードウェア予算の中で動かします。同じ iPhone の単眼カメラなら届く 4K ではなく同時録画が 1080p で頭打ちになるのも、「最高品質」のような簡易プリセットがマルチカメラセッションではそもそも使えないのも、これが理由です。明るい場面では、この上限は主にシャープさを犠牲にします。暗い場面ではもっと響きます。解像度が低いほど、そこから細部を平均して取り出せる実画素が少なく、解像度の低い画像はディテールとノイズを区別する余地が、解像度の高い画像よりもともと少ないからです。

エンコード後にノイズがブロック状に見える理由

DualCam は合成した映像をおよそ 10 Mbps の固定ビットレートで書き出します。明るい場面でも暗い場面でも、この数字は変わりません。動画圧縮は前のフレームから今のフレームを予測し、その差分だけを保存する仕組みで、細かいランダムなノイズはフレームの中で最も予測しにくい成分です。本物のディテールのようにフレーム間で一貫して現れないからです。ビットレートが固定されている以上、ノイズの多い暗所フレームはエンコーダの限られた予算をそのノイズの記述により多く使わせることになり、これが粒状感の上にさらにブロック状・にじんだような見た目が重なる理由です。同じビットレートでも、明るくきれいなフレームはエンコーダにとって楽な仕事で、その分シャープに見えます。

実際に効くこと

設定をいじる前に光を足す

暗所でのスマホ映像のほとんどの問題を直すのと同じレバーで、理由も同じです。光が多いほど増幅の倍率が小さくて済み、増幅が小さいほど最初からノイズも少なくなります。被写体に向けたランプ、日中の窓、そばに立てかけたスマホの画面でさえ、はっきり効果があります。DualCam のトーチは背面レンズが向いている先だけを照らすので、苦しいのが背面カメラ側のときにしか役立ちません。前面カメラ側では、自分に向けた光源が別途必要です。

すでに苦しいレンズでズームを重ねない

レンズの光学範囲を超えてピンチすると、センサー画像をデジタルに切り出して拡大することになり、これはどんな場面でもディテールを失います。もともとディテールが乏しくノイズの多い暗所フレームでこれをやると、最後に目立って残るのはたいていノイズです。すでに暗い場面なら、1倍のままにするか、ズームを控えめにするほうが、乏しいディテールをより多く残せます。

苦しいほうのカメラは大きい枠ではなく小さい枠に置く

合成器は各ストリームを、あなたが配置した場所に合わせて拡大縮小します。ノイズの多い映像は、キャンバス全体を端から端まで埋めるより、小さな窓に縮小されたときのほうが総じてきれいに見えます。片側の部屋がもう片側よりかなり暗いなら、暗いカメラをワイプの小窓側に置くピクチャ・イン・ピクチャのほうが、それを全画面の主役にするよりノイズを隠しやすい傾向があります。

本当は光の問題ではないとき

ノイズと、片方の顔だけ暗くムラがあることは、原因の違う別の問題です。片方の映像は適正露出に見えて、もう片方が粒状ではなく単に暗いのだとしたら、それはたいてい前面と背面のカメラが露出で食い違っているだけです。それぞれが自分の映像だけを見て測光しているためです。その具体的な直し方は「なぜ同時録画で自分の顔だけ暗くなるのか」のページにまとめてあります。あちらは光の置き方とタップ露出の話であって、ノイズの話ではありません。