データエンジニアリング 2026年6月9日 06:02 Spark 3.5→4.0移行で本当にハマった話｜AQEが勝手に最適化してくる罠 Spark3.5から4.0への移行で半年苦労した実体験。ネットに書いてないAQEの落とし穴、パーティション自動マージの問題、本番チューニングの現実を本音で解説します。