Linux で nohup ログ出力が大きすぎる問題の解決方法の詳細な説明

Linux で nohup ログ出力が大きすぎる問題の解決方法の詳細な説明

最近、hadoop テスト クラスターで spark ストリーミング プログラムを実行し、その後、nohup ./execute.sh & を使用してプログラムをバックグラウンドで実行しました。わずか数日で、ログ ファイルが G を超えました。問題が発生してログ ファイルを表示したい場合、ファイルを開くのは明らかに面倒なことですので、次の方法でファイル サイズを縮小しようとしました。

1. nohupコマンドの説明:

a. 構文: nohup [コマンド] [引数] [&]

b. 説明: nohup コマンドは、Command パラメータと関連する Arg パラメータで指定されたコマンドを実行し、すべてのハングアップ信号を無視します。ログアウト後にプログラムをバックグラウンドで実行するには、nohup コマンドを使用します。 nohup コマンドをバックグラウンドで実行するには、コマンドの末尾に & (「and」の記号) を追加します。リダイレクトを指定しない場合、ログはデフォルトで現在のディレクトリの nohup.out ファイルに出力されます。

一般的には次のように送信します: nohup ./execute.sh & ログまたは出力が現在実行中のディレクトリにあるようにします。nohup.out

リダイレクト: nohup ./execute.sh > /home/xxx/log.log 2>&1 & : この方法では、ログは指定されたディレクトリにリダイレクトされます。

2. nohup.outを分割して無制限に大きくなるのを防ぐ

ここで使用する一般的な送信コマンドは、nohup ./execute.sh & です。これにより、現在のディレクトリに nohup.out ファイルが作成されます。この時点で、nohup.out を定期的に複数の小さなファイルに分割する方法を見つけることができますが、同時に nohup.out が無制限に大きくならないようにしてください (通常、プログラムを中断することはできません)。

a. 毎日(必要に応じて時間を設定)、前日のログを定期的に分割します(たとえば、1日あたり約1gの場合、1回あたり約100mに分割できます)。

b. 分割後、新しい出力ログが引き続きnohup.outに出力されるように、nohup.outファイルが保存されます。

上記はシェル内

current_date=`日付 -d "-1 日" "+%Y%m%d"`

split -b 65535000 -d -a 4 nohup.out ./log/log_${current_date}_ ここで、split コマンドは、nouhup ファイルを指定されたサイズ (65535000b は約 60 MB で、サイズはカスタマイズできます) に従って分割し、指定された形式 (0000 から始まる 4 桁のサフィックスを持つ -d -a 4、詳細については、Baidu の split コマンドの使用方法を参照してください) に分割するために使用され、最終的な出力形式は log_20160610_0001 です。

cat /dev/null > nohup.out (このコマンドはnohup.outファイルを即座にクリアし、後でファイルに書き込みを続けます)、ログを/dev/nullに送信します。

リダイレクトされた出力を使用しても同じことができますが、代わりにリダイレクトされたファイル名が使用されます。

これらのコマンドをシェル ファイルで定義し、毎日定期的に実行します。こうすることで、毎日のログが複数の部分に分割され、トラブルシューティングやログ バックログが大きすぎる場合に便利です。履歴ログを定期的に削除し、過去数日分のログのみを保持することができます。

全体的なコードは次のとおりです。

this_path=$(cd `dirname $0`;pwd)
 
$this_path を cd
$this_path をエコーする
current_date=`日付 -d "-1 日" "+%Y%m%d"`
$current_date をエコーする
分割 -b 65535000 -d -a 4 /home/.../nohup.out /home/.../log/log_${current_date}_
 
cat /dev/null > nohup.out

以上がこの記事の全内容です。皆様の勉強のお役に立てれば幸いです。また、123WORDPRESS.COM を応援していただければ幸いです。

以下もご興味があるかもしれません:
  • Linux nohup はプログラムをバックグラウンドで実行し、表示します (nohup と &)
  • Python Nohup Linux バックグラウンド実行出力の問題を解決する
  • PHP デーモン プロセスと Linux コマンド nohup を組み合わせて、1 秒に 1 回のタスク実行を実装します。
  • Linux のバックグラウンドで & と nohup を使用する方法
  • Linux nohup と tail-f の使い方
  • Linux での Nohup とバックグラウンド実行プロセスの表示と終了

<<:  画像のシームレスなスクロールを実現する JavaScript タイマー

>>:  Mysql は非集計列を選択できません

推薦する

Centos7 で NIS を構成する詳細な手順

目次原理ネットワーク環境の準備インストール前の準備NIS サーバー操作NIS クライアント操作原理N...

Vueのフィルターとディレクティブの詳細な説明

目次vueカスタムディレクティブグローバル指令ローカル指示使用フック関数(両方ともオプション)使用方...

HTML の POST リクエストにおける a タグの 2 つの使用法の分析

HTML POST リクエストで a タグを使用する 2 つの例を次に示します。 1. ajaxを使...

Centos7.x での Nginx のインストール、SSL 設定、一般的なコマンドの詳細な説明

1. インストールyumを使用してインストールする ##yum nginx を自動的にインストールす...

docker CMD/ENTRYPOINT が sh スクリプトを実行する問題の解決策: not found/run.sh:

Dockerfile の設定に問題はありませんが、ENTRYPOINT コマンドを実行するとエラー...

MySQL InnoDB MRR 最適化ガイド

序文MRR は Multi-Range Read の略で、ランダム ディスク アクセスを削減し、ラン...

Vueコンポーネントの基本のまとめ

コンポーネントの基本1 コンポーネントの再利用コンポーネントは再利用可能な Vue インスタンスです...

Dockerコンテナでyumを呼び出すときのエラーの解決方法

dockerfile またはコンテナ内で yum を実行すると、エラーが報告され、ソースが見つかりま...

Elementのメッセージポップアップウィンドウが繰り返しポップアップする問題の解決

目次1. 使用2. メッセージポップアップウィンドウが繰り返し表示される問題を解決する1. 使用Vu...

HTML ウェブページの基本コンポーネントの概要

<br />Web ページ上の情報は主にテキストベースです。 Web ページでは、フォン...

mini-vueレンダリングのシンプルな実装

目次序文ターゲット最初のステップ:ステップ2:ステップ3:ステップ4:要約する序文現在主流のフレーム...

JTAを実装するためにAtomikosと組み合わせたTomcatについて

最近、プロジェクトは環境を切り替え、WebLogic を Tomcat に置き換えました。途中で発生...

MySQL killコマンドの実行原理の詳細な説明

目次キル命令実行原理命令実行特性クエリ実行の強制終了の原則接続終了の実装原則中断される可能性はありま...

Tomcatのサーバーオプションの詳細な説明

1. 構成デフォルトでは、最初の 2 つはチェックされていないので、チェックする必要があります。 (...