PySparkとSparkコンピューティングクラスター

PlaidCloudでPySparkを使用します。プロジェクトテーブルに接続し、データをSpark DataFrameに読み込み、データパイプラインの他の処理と並行して分散変換を実行できます。