ToDo #892
Redshift空き容量問題
開始日:
2025/03/25
期日:
2025/04/30 (期日まで 28日)
進捗率:
0%
予定工数:
説明
先日容量を追加していただいたのですが、新プロダクトミックス用のデータマート生成時にレコードを作ろうとすると、大量の一時データが生成され(完了時には削除されます)以下のエラーが出てしまいます(ディスクがいっぱいですと言ってます)。
ERROR: Insufficient system resources to support data size: consider increasing compute size. (Disk Full) Detail: ----------------------------------------------- error: Insufficient system resources to support data size: consider increasing compute size. (Disk Full) code: 1016 context: node: 2 query: 26864724 location: fdisk_api.cpp:442 process: query2_107_26864724 [pid=14897] ----------------------------------------------- [ErrorId: 1-67e1fe2a-636f1aa1172d1dc330fd6d03]
とりあえず今は処理期間を直近だけに狭めて処理を行い、レコードの正誤確認等を進めておりますが、実運用時には(いつの分からレコードを作成するかにもよりますが)容量の問題を再検討する必要があるかもしれませんので、忘備録としてここに残しておきます。
村上
ファイル