A: 「NVIDIAは奇妙な数値演算処理をすることで知られています。例えば、結果がfp32のように見えても、実際には22ビットで計算されていたのを覚えていますか？多くの人がそのことで腹を立てましたね。」 B: 「ああ、実は秘密に fp23 である tf32 dtype のことですか?」 C: 「いいえ、私が言っているのは、ホッパーwgmmaのfloat8の累算についてです。これはfp22で秘密裏に行われていました。tf32は全く別のケースです。」 今日交わした会話
スレッドを読み込み中
X から元のツイートを取得し、読みやすいビューを準備しています。
通常は数秒で完了しますので、お待ちください。