Apache Arrow Flight – ビッグデータ用高速データ転送フレームワーク
ビッグデータは現実的な時間で処理できてこそ活きます。処理時間はデータ処理アルゴリズムの計算量だけで決まり…ません！適切なノードにデータを配置しないとそもそもデータ処理できませんが、大量ノードが協調するビッグデータ処理ではデータ移動コストを無視できません。Apache Arrow Flightを使えばネットワーク帯域限界まで高速にデータ転送できます。
このセッションではApache Arrow Flightの仕組みおよび利用例として分散計算プラットフォームApache Arrow Ballistaを紹介します。
ライセンス
スライド
CC BY-SA 4.0
原著作者：須藤功平
株式会社クリアコードのロゴ
CC BY-SA 4.0
原著作者：株式会社クリアコード
ページヘッダーで使っています。
Apache Arrow Flightの図
Apache License 2.0
原著作者：The Apache Software Foundation
Apache Arrow Ballistaのロゴ
Apache License 2.0
原著作者：The Apache Software Foundation
作者向け
表示
rake
公開
rake publish
閲覧者向け
インストール
gem install rabbit--kou-db-tech-showcase-2021
表示
rabbit rabbit--kou-db-tech-showcase-2021.gem