はじめに 半年ぐらいの業務でAWS Glueを使ったETLをやっていました。 しかし、Sparkの知識が足りず「Pysparkの関数ってどうやって使うの？」ということが多々あったため Pysparkをローカルで動作できる環境を作ってみました。 環境 macOS Monterey 前提条件 …