プロジェクト

全般

プロフィール

ToDo #892

Redshift空き容量問題

村上 達也 さんが8日前に追加. 7日前に更新.

ステータス:
進行中
優先度:
通常
担当者:
開始日:
2025/03/25
期日:
2025/04/30 (期日まで 28日)
進捗率:

0%

予定工数:

説明

先日容量を追加していただいたのですが、新プロダクトミックス用のデータマート生成時にレコードを作ろうとすると、大量の一時データが生成され(完了時には削除されます)以下のエラーが出てしまいます(ディスクがいっぱいですと言ってます)。

ERROR: Insufficient system resources to support data size: consider increasing compute size. (Disk Full) Detail: ----------------------------------------------- error: Insufficient system resources to support data size: consider increasing compute size. (Disk Full) code: 1016 context: node: 2 query: 26864724 location: fdisk_api.cpp:442 process: query2_107_26864724 [pid=14897] ----------------------------------------------- [ErrorId: 1-67e1fe2a-636f1aa1172d1dc330fd6d03]

とりあえず今は処理期間を直近だけに狭めて処理を行い、レコードの正誤確認等を進めておりますが、実運用時には(いつの分からレコードを作成するかにもよりますが)容量の問題を再検討する必要があるかもしれませんので、忘備録としてここに残しておきます。

村上


ファイル

redshift_info.xlsx (15.5 KB) redshift_info.xlsx 村上 達也, 2025/03/26 15:13

他の形式にエクスポート: Atom PDF