GTC 2023: Nvidia は、Rapids が Apache Spark の将来を保証する方法を共有します from venturebeat.com
![](https://itsokuho.tokyo/wp-content/themes/cocoon-master/screenshot.jpg)
GPU で高速化された Apache Spark
Raheja 氏は、Spark で将来のデータ需要を処理するために、フレームワークを Nvidia GPU で実行することを提案しました。
彼によると、Rapids Accelerator for Apache Spark のようなプラグイン jar を使用すると、コードを変更することなく、Spark バッチ処理を GPU 上で実行できます。
これにより、チームは大規模なデータ ジョブを CPU よりも低コストで高速に実行できるようになるだけでなく、電力の節約にもつながると同氏は述べています。
Nvidia 意思決定サポート ベンチマーク (業界標準の TPC-DS ベンチマークを 100 の変更されたクエリで適応させたもの) を使用して、同社は Rapids ベースの GPU で高速化された Google クラウド データプロセス Spark ディストリビューションを CPU ベースのものと比較しました。
コメント