以下の内容はhttps://yohei-a.hatenablog.jp/entry/20201217/1608210420より取得しました。

AWS Glue の Spark ジョブで spark.conf.set() する方法

AWS
  • [ジョブの編集]-[セキュリティ設定、スクリプトライブラリおよびジョブパラメータ (任意)]-[ジョブパラメータ] で以下のように設定する。
    • キー: --conf
    • 値: spark.sql.parquet.enableVectorizedReader=false

f:id:yohei-a:20201217220104p:plain

関連



以上の内容はhttps://yohei-a.hatenablog.jp/entry/20201217/1608210420より取得しました。
このページはhttp://font.textar.tv/のウェブフォントを使用してます
不具合報告/要望等はこちらへお願いします。
モバイルやる夫Viewer Ver0.14