Selected Research Papers from ICCP 2020

Hi everyone! I am Chamin, a boffin researcher from Morpho's CTO Office. As members of Morpho's main R&D division, we regularly attend conferences on Computer Vision and Machine Learning. This helps us to keep in touch with the state of the art, and also gain insights to new research topics. So, one (sometimes a few) of us would attend a conference, summarize the interesting stuff, and share them with the colleagues.

ICIP 2020 - The 2020 International Conference on Computational Photography - was supposed to be held in St. Louis, USA. However, due to COVID-19 concerns, it was conducted as an online event. In this post, I will summarize a few interesting papers from this conference.

In Computational Photography, we investigate digital processing techniques that can replace or supplement optical processes that are used in taking pictures. Admittedly, that sounds more like rocket science than photography, so let me give you an example. Suppose you want to have a good bokeh effect in photos that you take with your smartphone. If you rely solely on optics to do this, you will end up with a thick phone that has a HUGE lens (expensive, hard to carry and maintain, etc.). Instead, the present-day smartphones use a couple of tiny cameras, other sensors, and computational photography techniques to provide a similar effect. Figure 0 is an example for such a photo, taken with an iPhone 11 Pro.

Figure 0

OK, so much for the introduction. The following are four of about a dozen ICCP 2020 papers that I summarized and shared with my colleagues. I hope you'll find them interesting.


COVID-19 Project 第2回: 自動ミュート



  1. 手で顔を触ったことを判定し、教えてくれる機能
  2. オンライン会議中に、しゃべっていないときは自動でマイクをミュートする機能

のうち、2つめのアイデアについて紹介します。なお前回の記事は こちら です。


CVPR 2020 参加報告 前編


モルフォでは最先端の画像処理・機械学習に関する研究のキャッチアップのため、国内外問わず毎年各種学会に技術系の社員を派遣しています。 今回は画像処理の国際学会である「CVPR 2020」に芳賀とCTO室の齋木で参加してきました。 今回は学会の概要、および私が注目した研究について紹介をしたいと思います。

記事は2回に分けて書いております。 前編として学会の概要と論文3本の紹介をします。 後編として論文4本の紹介と全体の感想を書く予定です。


ffmpeg コマンドラインツール入門 第3回

こんにちは、シニアリサーチャーの佐藤です。ffmpeg の記事はこれが最終回です。1回目の記事はこちら、2回目の記事はこちらです。



ffmpeg コマンドラインツール入門 第2回


今回と次回は、ffmpeg のフィルタ処理についての話です。これを使えば、コマンドラインから様々な画像処理を動画に施すことができ、とても便利です。ただ、フィルタの記述方法は分かりにくいので、まずはどうやって使うのか、今回はその概要を伝えたいと思います。



ffmpeg コマンドラインツール入門 第1回

はじめまして、株式会社モルフォのシニアリサーチャーの佐藤真希です。いつもと趣向を変えて、今回から3回にわたり ffmpeg というツールの使い方を紹介したいと思います。

ffmpeg というのは、動画ファイルの形式を変換したり、動画に画像処理を施したりすることができる高性能なフリーソフトです。動画処理技術の開発を行う上でなくてはならないもので、弊社でも広く使われています。(もちろん製品内部には使われていません。)とても高性能なのですが、使い方にクセがあって、検索してもまとまった情報を見つけるのがなかなか難しいのが現状です。

「ちょっと ffmpeg を使ってみたいけど、どうすればいいのか分からない」という人の役に立てばと思い、社内向けの資料の一部を公開します。なお、話を簡単にするために、以下のように限定された場合についてのみ考えます。

  • 1つのファイルに動画ストリームが1つだけ含まれている
  • 入力は YUV データで、色空間の変換は行わない
  • 音声や字幕は考えない