Futuremark、NIVIDIAのベンチマーク不正は「最適化」と主張を一転 40
ストーリー by Oliver
陰謀という言葉も使いたくなる 部門より
陰謀という言葉も使いたくなる 部門より
Anonymous Coward曰く、"Futuremark 3DMark03 Patch330のリリース時の騒ぎをご存知の方も多いはず。[NVIDIAの]DetonatorFX 44.03及び43.51 WHQLには3DMark03の実行を検出し不正なスコアを出す仕組みがあるという主旨のPDFとともにPatch330はリリースされた。
ところが、Impress PC Watchの記事によると、Futuremarkは従来の(pdfでの)主張を一転して、それらの仕組みは『不正』ではなく『最適化』であるとの声明を発表したらしい。
あれだけ激しい調子で非難していたにも関わらず、ただの話し合いの後に態度を一変させるというのは裏で何があったのだろうなどと考えてしまう｡もしpdfの内容のような行為が『最適化』として許されるなら、実環境とベンチのスコアの乖離が酷くてとても参考にならないのではないかと不安になってしまう。
ドライバが最適化されていないベンチマークとなると…これからのベンチの主役はまさかコレなんてことには…"
親愛なるビルへ (スコア:4, おもしろおかしい)
ところでみんなってベンチマークの良い商品を選んで買うの？俺はどっちかというとメーカー重視なのよね。メーカーのベンチマーク（ドライバのアップデート頻度とかサポートＯＳの多さとか）を作ると意外と今の市場が逆転するかもしれないよね。
あと、原因ってのもあると思うんだが。
うちの自作メイン機はセレロンだったんだけど、DVDドライブ買ってPCでスタートレックやアリーマイラブ見ながら作業する事が多くなると、処理の重さに負けてカクカク動画になっちゃうのよね。P3に替えたらそれが無くなった。なんでP3買ったかというと雑誌かWebにDVDの再生時に処理はセレロンとP3では段違いにP3の方がＰＣの応答性がよいと書いてあったから。ちなみにビデオはG400MAXと今ではとてもとても古いものだ。
「DVD再生がカクカクする」→「CPUのパワーアップ」みたいに、ベンチマークから原因を調査できるソフトがあればおもろいのにね。
職業としてのプログラマ
人間だと (スコア:2, おもしろおかしい)
Re:人間だと (スコア:0)
サミー・ソーサも言っていました。
最適化するなとは言わない (スコア:2, 参考になる)
そこらへんの調整機能をユーザーに解放してくれてもいいとおもうんだけどなぁ
そのほうがユーザーにとってもプラスになるし、どーせチェックしてるなら処理的にもそんなに複雑にはならないでしょ
それに ユーザー側で調整できればベンチの結果もまともな奴にできるし
Re:最適化するなとは言わない (スコア:2, すばらしい洞察)
メジャーなゲームに最適化して、それを公表した方が、この手のハイエンドなビデオカードの購入対象者であるコアゲーマーにはウケが良いと思うのだけど。
レンダリング品質を保ちつつ、フレームレートを確保してくれるんなら、消費者としては最適化大歓迎なわけで、「メーカーさん、どんどん競争してください」って感じ。
そのためには、ベンチマークソフトの方には、リファレンス画像との比較を数値化して評価できるような仕組みが必要かと。
単に表示できるできないとかいうレベルではなく、どれだけリファレンスに近い画像が得られるか、という風に。
そういうベンチじゃないと、今回みたいに「品質を落としてる」「いや、そうじゃない」という不毛な議論に落ちいるので、今回の件はドライバメーカーだけでなく、（正しい市場競争を生み出すためにも）Futuremarkをはじめとするベンチマークを作る側にも、もう少しがんばってほしいものです。
実際問題として (スコア:1)
本物のFF-XIで遅かったりテクスチャが抜けるとかになると
怒っていいですよね？
Re:最適化するなとは言わない (スコア:0)
ドライバがやってくれてるっていう建前なんだろうけど、
それなら大半のソフトを最適化しろと。
絶対ソフトメーカーから「どうやっても意図した絵が出てこない」って苦情が出てくると思うんだけど。
ベンチ最適化のような本来の目的を乱すようなことしかしないのがいただけない。
ATIはすでにやっている (スコア:2, 参考になる)
前の3DMark2001なんて、ATIがRADEON8500のドライバで
最適化を行っていたじゃないですか。
現に3DMarkのスコアはGeForce3より上なのに、ほかのベンチでは
惨敗だったし．．．。
要するに今回は (スコア:0)
こういう結果(Futuremarkに公表されたか否か)になったわけでしょ？(以前のことは知らない)
どっかにそういうの書いてあった気がするんだが…
まー、どっちにしろ茶番だな
NVidia以外でも (スコア:1, 参考になる)
Re:NVidia以外でも (スコア:1)
Re:NVidia以外でも (スコア:1, すばらしい洞察)
新しいアーキテクチャを設計するような気愾のあるベンチャーの出現は、一層期待できなくなってしまいますね。
#好きだったんだけどなぁ... PowerVR
Re:NVidia以外でも (スコア:1)
ここの5月30日付けの記事 [septor.net]
>PowerVRでは以前、Series 5アーキテクチャについて、タイルレンダリングによる
>ユニークな特徴だけでなく先進的な機能も備えたものになると言っていた。その
>PowerVRの開発者がPixel Shader 3.0やVertex Shader 3.0によるシェーダモデルに
>ついて言及していることから、PowerVR Series 5ではPixel Shader及びVertex Shader
>3.0をサポートしているのではないかと見られている。また、PowerVRではSeries 5
>チップが2003年中に登場する見込みであると言っており、PS/VS 3.0をサポートした
>PowerVR Series 5ベースの製品が年内に登場する可能性もありそうだ。
糞VRは退場してくれ (スコア:0)
元々こけて正解。
情報としてもノイズ以下の価値しかないね。
お前が退場してくれ (スコア:1)
お前の自己完結した頭の中では要らないだけだろ？
実際ＧＰＵの使用用途はＰＣやＷＳなどだけでは
ないから問題ないと思うぞ。
ＤＣみたいに組み込みＣＰＵと組み合わせた用途は多いし
つーかさ、何でもかんでもＰＣ関連で考える厨房多すぎ
Re:お前が退場してくれ (スコア:0)
>ＤＣみたいに組み込みＣＰＵと組み合わせた用途は多いし
>
そうなんだけど、このトピはPC上でのベンチマークの話なんだから、
PC関連で考えていいとおもうYO!
普通、計測といえば (スコア:1)
ベンチマークにも乱数要素を入れ、数度実行した平均値を出すようにすれば
少しはマシな値になるかもしれません。
新機能を使用した画像や計算が多くなりそうな画像のデモを作っても、毎回同じものが
流れるから穴を突かれるわけでしょう。(セキュリティホール? ベンチホール?)
もっとも、最初の値が出るまで1時間、丸一日やっても24サンプルとかなったら、
それはそれでテスターの方が大変ですが(汗
今のBuildは330？320? (スコア:1)
Re:今のBuildは330？320? (スコア:1)
Re:今のBuildは330？320?（自己レス） (スコア:1)
同じページで330がパッチで提供されていますね。
不正でもなさげ (スコア:1)
ってことで、"セコい"でファイナルアンサー。
というか、ベンチの総合点なんて飾りです。
一般大衆にはそれが解からんのです。
実際はビデオカード毎に特性があって、ビデオカードがもつ
それぞれの機能を使ってどのくらいパフォーマンスを維持できるか
ってのが違ってくるし、その方が重要なんです。
てなわけで、自分がベンチマークテストとして使っているのは
DirectX SDKのサンプルだったりする。
# ACなのでAC
ゲームだと (スコア:1)
今後はどうなるか不明だけど。
RADEON8500と9700かって両方とも後悔してます(´･ω･`)
いくら性能が良くてもやりたいことが快適に出来ないと意味ないですね。
ATIのドライバは× (スコア:0)
以前、TV-Wonder使ってたことがあったけれど
これがまぁひどいこと…
結局それ以来、周囲の評判と合わせて個人的に「ATIは使うな」となっています。
逆に言えばドライバさえ
Re:ATIのドライバは× (スコア:1)
実に。私もRADEON 8500のデュアルディスプレイ対応のビデオカード使ってましたが、愛想が尽きてしまいました。
Windowsのドライバは本当にアレな品質です。デスクトップ管理ユーティリティのHydraVisionは設定変更して適用したら固まるし、セカンダリディスプレイは突如色化けするし、DVD再生も挙動が怪しいし、結局まともに動くのはゲームだけでしたね。
＞CanopusがATIのチップを使うかもという噂もあるので、
海の向こうのNeue ELSA GmbH [elsa.com]もNVidiaと縁を切ってATIのRADEONを採用してます。ELSAがチューンしたドライバが付いてくるなら使ってみたいところです。
Re:ATIのドライバは× (スコア:0)
こんな噂が [gdm.or.jp]。
ELSAジャパンの最近のgeforceカードは青ペンのOEMだって聞いたなぁ・・
なんかもう魅力感じなくなっちゃった。
Re:ATIのドライバは× (スコア:0)
Re:ATIのドライバは× (スコア:0)
Re:ATIのドライバは× (スコア:0)
ATIのドライバーも、Catalystを名乗って統合ドライバーに
移行してからは、以前とは比べられないほど安定しましたよ。
逆にnVIDIA、GeForceFX + DetonatorFXの組み合わせは、
nVIDIAが“
Re:ATIのドライバは× (スコア:0)
nVidia=full support
Matrox=good support
ATI=poor support
S3=no support
って言われてましたね。
今は私的には１位nVidia、２位ATIってかんじです。
今まで、nVidiaを使ってきましたがＦＸ５８００以降ファンの音が凄そうなのでＡＴＩへの乗り換えを考えています。
現在はGeForce3を使用中。
ベンチは参考にしますが３ＤＭａｒｋだけでなく、実ゲームの結果も参考にしてます。
いつもこちら辺り
Re:ATIのドライバは× (スコア:0)
最近（窓の手等を使って）レジストリで
「アプリケーション起動用メモリをLargeサイズにする」を
有効にしたのが原因でビデオカードまわりにて
各種トラブルが発生しているのをよくみかけます。
RADEONに限らず、ビデオカード全般で起こりうる問題と
認識してもいいと思うのだけど。
#自分が確認してるのはRadeon全般とメモリを1
Re:ATIのドライバは× (スコア:0)
×→アプリケーション起動用メモリをLargeサイズにする
○→アプリケーション起動用メモリをLargeモデルにする
古い話だが (スコア:0)
あそこでやった言語のベンチマーク。
G(自粛)とか言うプログラミング言語がなかなかスコアがいいわけ。
後で開発者の(自粛)くんから聞いた話ですと、ベンチマークに最適化しておいたとか。
前からこういうのって、あったよね。結構沢山。
ん？ (スコア:0)
ASCIIって廃刊になったんですか？
それとも月刊じゃなくなった？
Re:ん？ (スコア:0)
参考 (スコア:0)
ベンチマーク市場の存在 (スコア:0)
最近ではGeForce5600あたりを、3DMarkのデモが全部見られないという理由だけで買う人間もいます。
一枚数万円のカードを数ヶ月おきに買い換えるわけですから、メーカーにとっては良いお客さんでしょう。
ベンチの結果の改竄はお金になるんです。
天国と地獄＠VGA (スコア:0)
ドライバ：nVIDIA
アーキテクチャ：PowerVR
スクラッチ：ATI
RAMDAC＆基板：Matrox
地獄：
ドライバ：ATI
アーキテクチャ：Matrox
スクラッチ：PowerVR
RAMDAC＆基板：nVIDIA
＃異論ツッコミ色々ありそうなのは覚悟の上よ、
というか自分で相当苦しいと思うし。
でもフレームだけは勘弁。
なぜ騒ぐのかわからん (スコア:0)
なんでもありだろうよ。
Re:なぜ騒ぐのかわからん (スコア:0)
お仕事でどれを使うか決めるとき、この種のベンチだけで、ってことはないよね？そゆこと。
Re:なぜ騒ぐのかわからん (スコア:1)
＃といいつつ、全然騒いでないよなこのスレ（って言うんだっけここでは？）
職業としてのプログラマ