Kubernetes ノードが The node was low on resource: ephemeral-storage. になったら

Posted by: ytyng 3 months, 3 weeks ago

(Comments)

  • ポッドが The node was low on resource: ephemeral-storage. というエラーを出して終了する
  • ノードのストレージ使用量が 85% になってる
  • kubernetes の中でやたらと重い処理があり、ロードアベレージが異常に高い(100とか)

この場合、ストレージ不足です。

85%という数字は、kubernetes の image-gc-high-threshold のデフォルト値で、ストレージ使用量がこれを超えるとイメージGCが走り出します。

ただし、ストレージ肥大の原因が kubernetes と直接関係無い箇所だったため、処理できず不具合になってました。

今回は、docker コンテナのゴミがたまっていたので、docker prune  で削除しました。

docker container prune

もしくは

docker system prune

Currently unrated

Comments

Recent Tweets

  • ytyng

    ytyng @ytyng

    apple developer の、テスト用デバイスのUDIDを1年ごとにチェックして、古い端末を消しちゃうやつ チェックボックスを入れたのを残すのか、消すのかの判断まちがって、全部のUDID消えたわ
    8 months ago

  • ytyng

    ytyng @ytyng

    うちの会社 TORICO の 代表が今TV出てます #漫画全巻ドットコム #激レアさんを連れてきた
    8 months ago

  • ytyng

    ytyng @ytyng

    Proofpoint にブロックされているIPアドレスからでも icloud など Apple メールアドレスにメール送信されてもブロックされてない…?
    8 months, 4 weeks ago

Recent Posts

Archive

2021
2020
2019
2018
2017
2016
2015
2014
2013
2012
2011

Categories

Authors

Feeds

RSS / Atom