パスワードを忘れた? アカウント作成
この議論は賞味期限が切れたので、アーカイブ化されています。 新たにコメントを付けることはできません。

Google、機械学習に特化した独自LSIチップを開発」記事へのコメント

  • by Anonymous Coward

    リンクされてる TechCrunchの記事 [techcrunch.com]の表題に『~なんと、8ビット機だ』とあるけど本当かしら?
    原文 [techcrunch.com]見ても

    Google also manages to speed up the machine learning algorithms with the TPUs because it doesn’t need the high-precision of standard CPUs and GPUs. Instead of 32-bit precision, the algorithms happily run with a reduced precision of 8 bits, so every transaction needs fewer transistors.

    とあるのみで 8ビット機である、みたいな説明は見当たらんのだけど。

    • by Anonymous Coward on 2016年05月20日 17時10分 (#3016020)

      http://www.eetimes.com/document.asp?doc_id=1329715 [eetimes.com]
      では
      “The TPUs are “likely optimized for a specific math precision possibly 16-bit floating point or even lower precision integer math,” Krewell said.

      意訳:
      TPUは、どうやら16ビット浮動小数点の精度あるいはさらに低い精度の整数演算用に特別に最適化されているようだ。と、Krewellは語った。

      ってことで訳は正しいですかね
      8bitっていう意味ではないですね。

      親コメント
      • by Anonymous Coward

        8ビット機の定義が曖昧なのが根本的な問題だと思うんですけど

        • by Anonymous Coward

          cpu処理能力のビット数と、
          数学的な演算精度とをごっちゃにしているんだよ

          • by Anonymous Coward

            8bitでの計算に特化して最適かしてるんだから、8bit機と呼んでも差し支えはあるまい

      • by Anonymous Coward

        機械学習用ですらないと推測されている
        Krewellさんは外部のアナリスト

        “It seems the TPU is focused on the inference part of CNN and not the training side,” Krewell said. “Inference only requires less complex math and it appears Google has optimized that part of the equation.

        “On the training side, the requirements include very larger data sets which the TPU may not be optimized for. In this regard, Nvidia's Pascal/P100 may still be an appealing product for Google,” he added.

      • by Anonymous Coward

        DeepLearningの用途では、16bitでも十分という用途はたくさんあるそうです。
        先日発表されたNVIDIAの新しいGPUも、16bitの演算を高速に実行できることを売りにしています。

        研究の分野では、IEEE 754の16bit浮動小数点は使いにくいって話もあります。
        指数5bit+仮数10bitなのですが、指数はもっと増やして(ダイナミックレンジを大きく)、仮数はもっと減らして(精度は不要)ほしいそうです。
        学習後の利用時には、8bitでも過剰という話も。
        Googleの物が8bitかどうかは分かりませんが、精度はもっとばっさりと切ってるかもしれません。

日本発のオープンソースソフトウェアは42件 -- ある官僚

処理中...