パスワードを忘れた? アカウント作成
14268676 story
アニメ・マンガ

武漢大学ら、写真や動画を新海誠や宮崎駿っぽく変換する技術を開発 42

ストーリー by nagazou
動画は不自然さが目立つかな 部門より
写真をイラスト風にする技術は昔からあるが、この「AnimeGAN: A Novel Lightweight GAN for Photo Animation」は、深層学習を用いることで宮崎駿風、新海誠風といった作風を再現できるソフトだそうだ(ITmedia)。

このソフトでは変換される先をアニメ風に特化していることから、パラメーターが少なく、処理が軽いのが特徴だという。Tachibana Yoshino氏がこのAnimeGANのオープンソース版を元に、TensorFlowを使用して実装したものをGitHubで公開しているとのこと。また変換したものを動画にしたものもアップされている
  • by asanagi (22217) on 2020年08月17日 13時15分 (#3871445) 日記

    いまいち
    とりあえずフレームを賢く間引く技術がいるのでは?
    そこがディズニーとかと日本のアニメの大きく分ける特徴ですし

    ここに返信
    • by nnnhhh (47970) on 2020年08月17日 13時41分 (#3871470) 日記

      間引くのはコスト削減のためだから、できるならフルアニメにするに決まってる
      って前提があるんじゃないですかね

    • by Anonymous Coward

      上から目線でケチつけてるうちに、気がついたら大差つけられてるいつものパターンが見える。

      • by Anonymous Coward

        中国文学の発展がもうとっくに止まってるのは中国人ですら認めてるのに、何を怖がってんの?

        • by Takahiro_Chou (21972) on 2020年08月17日 13時26分 (#3871456) 日記

          一方、日本では中国SFの「三体」シリーズが爆売れしていた

        • by Anonymous Coward

          5年くらい前まで、日本の過去のパクリは学ぶためだったが、
          中国人はパクるだけで学ばないので脅威にならないとか
          言ってた人たちがいましたけど、いまはどうしてるんでしょうね。

          • by Anonymous Coward

            今でも変わってないよ。他国依存のTikTokやHuaweiを見てごらん。

            • by Anonymous Coward

              「中国人はパクるだけで学ばないので脅威にならないとか言ってた人たち」
              の行動は今でも変わってないようだな

            • by Anonymous Coward

              Huaweiって遂には世界一位の出荷台数叩きだしたよな。

            • by Anonymous Coward

              Huaweiは本当に凄い企業になった。
              アメリカが中国の一企業の力に危機感を抱いて反発するようになるなんて、誰が想像できただろうか。

            • by Anonymous Coward

              Huaweiはパクリどころか、世界最大規模の研究開発費を投じる企業でしょ。

          • by Anonymous Coward

            今でも「日本は半導体や家電で世界をリード」とか言ってるんじゃない?

      • by Anonymous Coward

        まあ消費者と創作者は違うカテゴリの人間だからしょうがない。

      • by Anonymous Coward

        いまいちなものすら作れない奴が言ってるだけだからな

      • by Anonymous Coward

        感想を言うだけで「上から目線」とか「ケチつける」とかどんだけ自分を卑下してるんだろう

        • by Anonymous Coward

          あなたの世界では「上から目線」と言うと自分を卑下したことになるんだねえ。

  • by Technobose (6861) on 2020年08月17日 15時01分 (#3871532) 日記

     漫画版のナウシカっぽい感じにするのかと思った。

    /*
     どんな風景でも腐海風にしてしまう、というのが出てきたら嫌だな。
    */

    ここに返信
  • by Anonymous Coward on 2020年08月17日 13時21分 (#3871448)

    数年前に中国のアプリメーカーが写真を新海誠の絵柄っぽくするアプリを出してたよね。
    いろいろあって消えたけど。

    動画とか宮崎駿ってところが新しいの?

    ここに返信
    • by Anonymous Coward

      あれは「っぽく」じゃなく、実際のアニメから背景を抜き出して合成してたことが発覚してる。
      技術的にも別物し、権利的にもアウト

  • by Anonymous Coward on 2020年08月17日 13時38分 (#3871467)

    前からありませんでしたっけ。ゴッホ風にするのとか。

    わたせせいぞうフィルタを作って久米田康治が使う、ってのはどうだろう。
    杉浦茂フィルタもいいかも。

    ここに返信
    • by nim (10479) on 2020年08月17日 14時40分 (#3871517)

      前から思ってたんだけど、写真をクロード・モネ風に変換するフィルタを
      開発したら一山あてられるぞ。

      これが本当のマネタイズ。

      • by Anonymous Coward

        エドゥアール・マネ「なんでモネ…」

        #AnimeGUNだとへっぽこ作画風に変換してくれるのだろうか

    • by Anonymous Coward

      ですよね
      既存のフィルタを組み合わせて**風にするってだけに感じます

      • by Anonymous Coward

        まあ、話の本筋としては

        今回の手法では、実写からアニメ画像に変換するGAN(Generative Adversarial Network)を用いた新しいフレームワークを提案している。画像から画像へスタイル変換する従来のGANベースの手法と比べ、アニメに特化しているため、ネットワークパラメーターが少なくて済み、軽量であることが特徴だ。

        とか、

        学習したモデルの出力結果を、最先端のアニメスタイル転写方式であるCartoonGANとComixGANと比較したが、今回の手法の方がパラメーター数と計算コストを大幅に削減でき、処理速度が向上したという結果が出た。アーティファクト(生成に失敗した不自然な部分)が部分的に発生するのを抑え、写真の内容と対応する色を効果的に保持できたとしている。

        とかでしょうから「(作者)風」ってのはおまけでしょうね(深層学習で作風をいろいろ変えられますよ、的な)。

  • by Anonymous Coward on 2020年08月17日 13時39分 (#3871468)

    可能性は感じるが美術スタッフからこれが上がってきたらリテイク。

    https://twitter.com/shinkaimakoto/status/1293130397312643072 [twitter.com]

    ここに返信
    • by Anonymous Coward

      入ってほしくないものが映ってるので、まず元写真のほうを吟味する必要があるなあ。
      写真撮影を頑張るか、塗りを頑張るかの違いになってくる。

  • by Anonymous Coward on 2020年08月17日 13時55分 (#3871488)

    もっと赤い [srad.jp]じゃないの?

    ここに返信
  • by Anonymous Coward on 2020年08月17日 14時54分 (#3871528)

    これは技術というより、単なるフィルターじゃんか

    ここに返信
    • by Anonymous Coward on 2020年08月17日 17時47分 (#3871643)

      フィルターの実装を深層学習でやらせてみたよ、って話だろ?
      これが進むとテキトーな映画とかで学習すれば大した苦労無く思ったようなフィルターが得られるって事だよな。

    • by Anonymous Coward

      ?ん フィルターも技術のうちだと思うが
      ま、素人目には裏でどんな事が行われているか解らないもんな
      # 未開人には技術は魔法と区別が付かない

    • by Anonymous Coward

      つーか今のAIの基本部分は要するに適応フィルターだと思うが。

      しかしこれを単なるフィルターじゃんというのは、
      人間の知能の源泉はただの化学反応じゃんというのと変わらんのでは?

  • by Seth (1176) on 2020年08月17日 16時20分 (#3871582) 日記

     いっそ、
    「北条司のドラゴンボール」
    か、
    「ぼのぼのドラゴンボール」
    へ変換する方が(走召糸色木亥火暴)

    --
    ------------------------------ "castigat ridendo mores"
    ここに返信
    • by Anonymous Coward

      AIの学習でそれっぽいフィルタのパラメータを作成出来たってのがお話のキモだろ。
      だから同じシステムでシティハンターなりぼのぼのなりで学習すればそれっぽいパラメータが得られるのじゃないかな。

  • by Anonymous Coward on 2020年08月17日 18時38分 (#3871683)

    もしかして今敏風ってことか。なんだろうすごくうれしくて悲しい。

    ここに返信
    • by Anonymous Coward

      なあw
      他のフィルター名が「Shinkai」「Hayao」なら、「Kon」フィルターにしてやれや。

  • by Anonymous Coward on 2020年08月18日 7時57分 (#3871900)

    ジブリなりから許諾を得たものなのだろうか?それともジブリ映画などのデータは不要なのだろうか?

    ここに返信
    • by Anonymous Coward

      深層学習で出力されたパラメータに元データのパテントが影響するとかなると相当に大変な事になると思うんだが。
      ジブリを見てジブリ風を理解して、それを持って表現したとしても、それは表現した人間に権利は有るのだと思うのだが。
      漫画だと、「影響受けた漫画家」なんて質問に答えたが最後、自分で書いた漫画から延々と権利使用料を払わなければいけない、なんて事は無い訳でして。

      結局はフィルタは道具でしかなくて、作品としては別物だから問題ない。
      学習に依って作風を写真から再現できるって事で、実はこの手の技術で一番使いでが有るのは本家の皆さまでは。
      映画とか作るのに宣伝用のトレーラー映像作ったら、それを学習させれば本編作る時には映像を作り込む手間を省けるって事だよな。

typodupeerror

計算機科学者とは、壊れていないものを修理する人々のことである

読み込み中...