なにをやっているのか
XpressionはWBSのトレたまでも紹介されました
Infinity Venture Summit 台北で準優勝。日本の企業では唯一入賞しました。(http://thebridge.jp/?p=287839)
ディープラーニングを用いた次世代のコンピュータグラフィックスで、IT、映画、ゲームなどコンテンツ産業全体に変革を起こすのが会社のミッションです。
そうしたミッションを実現するためのファーストステップがXpressionです。
Xpressionは、ディープラーニングを用いて本物と区別がつかないフェイクビデオを簡単に作れるスマホアプリです。
動画の中の人の表情を自分の表情で乗っ取り、リアルタイムで動かせます。
アプリデモ動画を是非ご覧ください。
http://xpression.jp/video
ワールドビジネスサテライトのトレたまに、アプリとしては番組史上初めて取り上げられました。
また、一枚の顔写真から自分そっくりそのままの3Dモデルを自動で生成し、VR上でコミュニケーションができる「EmbodyMe」というアプリをリリースしています。
https://www.youtube.com/watch?v=4H-xdW5C-aw
海外のFobesやテレビニュースなどでも取り上げられています。
<受賞歴>
・Infinity Venture Summit@台北で準優勝(日本企業では唯一の入賞)
・Xpressionの論文がSIGGRAPH Asia Emerging Technologiesに採択
・NVIDIA Inception Award受賞
・Facebookのスタートアップ支援プログラム、FB Start Accelerate採択
・NVIDIAのスタートアップ支援プログラム、NVIDIA Inception Program採択
なぜやるのか
社内に構築している3Dフェイシャルスキャン設備
3Dフェイシャルスキャン設備で撮影した高精細な3Dモデル
「AIを用いた次世代のコンピュータグラフィックスを実現する」
コンピュータグラフィックスは映画やゲームなどの業界とともに発展してきましたが、近年、Deep LearningのGANなどの生成モデルの発展で従来のコンピュータグラフィックスとはまったく別の手法が生まれようとしています。
今はまだ初期段階ですが、イノベーションのジレンマで言うところの破壊的技術で、従来のコンピュータグラフィックスはいずれ置き換わるはずです。
そうなると、映画、ゲーム、テレビなどの制作手法がまったく変わるだけでなく、新しいイノベーションが多く生まれます。
例えば、何十年も前に死んだタレントがテレビ番組に出演したり、生きているタレントに関しても実際にその人が出演する必要はなくなるので、アニメキャラクターのようなIPと同じ扱いになるでしょう。
そもそもどんな美男、美女でもあらゆる人間が作り出せるようになるので、現実のタレントは必要なくなる世界になるのかもしれません。
そういった大きな変革の中心となり、技術で世界をリードすることが会社のミッションです。
そのミッションに対する最初の出発点がXpressionです。
今は表情だけしか動かせませんが、頭や体全体を自由に動かしたり、あらゆる美女や美男を作り出したり、どんな場所の背景でも作り出せるように技術を進歩させていきます。
どうやっているのか
開発合宿でパシャリ
VTuberが流行る3年前になりきろいどアプリをリリース
SIGGRAPHなどのトップカンファレンスの論文採択、未踏ソフトウェア創造事業採択や、技術書の執筆、各種大規模イベントでの登壇、個人開発したアプリがAppStoreランキング総合1位を1週間近く維持するなど、様々なバックグラウンドや実績を持った専門性の高いチームです。
創業メンバーはコンピュータビジョン、機械学習、AR/VRの技術を世界に先駆けてスマートフォンに応用したサービスを立ち上げていました。
怪人百面相という顔の表情をリアルタイムで読み取り、別の顔に変身できるARスマホアプリをリリースしました。
SnapchatやSNOWでフェイスエフェクトが流行る3年前にリリースし、36カ国でストアランキング1位を獲得しています。
https://www.youtube.com/watch?v=ie2Sep9WWiM
また、なりきろいどという、表情に合わせて動くアバターになりきって通話、チャットや動画投稿ができるVRコミュニケーションスマホアプリをリリースしました。
バーチャルYoutuberが流行る3年前にリリースし、経済産業省が先端技術を表彰するInnovative Technologies 2015を受賞しました。
https://www.youtube.com/watch?v=4jixLGLjXF8
(※ Wantedly運営から指摘があったので、怪人百面相のランキングデータ参考資料を記載します。 https://bit.ly/2jSfx5k http://xpression.jp/files/facestealer_ranking.png)