PySparkは、Apache SparkのPython APIです。大規模なデータ処理や分析をPython言語で行うためのツールであり、分散コンピューティング環境で高速な処理を可能にします。データの変換、分析、機械学習などに広く利用されています。
2025-06-27 00:00:00
～ 900,000 円/人月
フルリモート
1 応募者
【募集案件】AWS Glueエンジニア｜VisualETL経験者歓迎｜大手電機メーカー｜基本フルリモート｜最大90万円 案件概要 大手電機メーカーの社内システム開発案件です。 AWS Glueを用いて、需要予測システムから出力されたデータの抽出・変換処理を担当。 既存のPython ShellによるETLが性能要件を満たさなかったため、VisualETLとPySparkを活用した再構築を進めています。 DWHおよびデータマートはAmazon Redshiftで管理され、BIツールによるレポート作成に利用されます。 業務内容 AWS GlueでのVisualETLを用いたETL処理の設計・開発 PySparkによるETL再構築（性能改善） RedshiftのDWH・データマートへのデータ登録設計 BIツール連携に向けたデータ整備（スコープ外） 勤務条件 勤務地：基本フルリモート（地方在住エンジニア歓迎） 期間：2024年7月開始〜中期 単価：最大90万円程度 精算幅：140〜180時間 面談：1回 募集人数：2名 必須スキル AWS GlueでのVisualETL経験 RDBMS利用経験 歓迎スキル（尚可） PySpark使用経験 Amazon S3やPower BI使用経験 AWS GlueのVisualETL経験を活かし、大手電機メーカーの需要予測システムのETL再構築に携わりたい方に最適なフルリモート案件です。 地方在住の方も歓迎。ご応募お待ちしております。