【GPGPU】くだすれCUDAスレ pert2【NVIDIA】at TECH【GPGPU】くだすれCUDAスレ pert2【NVIDIA】 - 暇つぶし2ch162:158 09/11/22 15:50:57 >>159,160 ありがとうございます。 なんとなく理由が理解できた気がします。 が、こちらでも計算しましたが buffer[3.141592653589]=7.924777960767 となって件のサイトの値7.921875とは合わないですね・・・ buffer[9.80665]=27.91995となって27.925781ではないですね・・・ 低精度の線形補間というのは有効数字3桁って事なんですかね? 次ページ続きを表示1を表示最新レス表示レスジャンプ類似スレ一覧スレッドの検索話題のニュースおまかせリストオプションしおりを挟むスレッドに書込スレッドの一覧暇つぶし2ch