ITmedia: NVIDIA、シングルGPUの最強モデル「GeForce GTX TITAN」発表 ~ どんどんコア数が増えるなぁ。

ITmedia: [ITmedia PC USER] NVIDIA、シングルGPUの最強モデル「GeForce GTX TITAN」発表.

曰く

シングルチップのGPUに2688基のCUDAコアを内蔵し4.5ギガフロップスの処理性能を実現する

2688並列かよ~~。

この辺になると、単純なデータ並列でも依存性なしにこれだけを達成するのは結構大変かもしれない。画像だって1024x768などとケチなことを言っていると、1024×768÷2688=292.6だから、全ピクセルを同時にしてよい操作だって、1つのコアは300ピクセル分しか処理しなくて済む。つまりピクセル当たりの処理が簡単なもので300ピクセルまとめても短い時間で終わるような場合、並列に分けてGPUのメモリに転送してといったオーバーヘッド処理の比率が大きくなってしまうと、いくら2688並列に分割しても2688倍早くはならないどころか、下手すりゃ数10倍に終わる、ということになり兼ねない。ましてや、単純でない並列を考えると、恐ろしい。

むずかしい時代になったと思う。