シェルを使用してMySQLデータバックアップスクリプトを作成する

シェルを使用してMySQLデータバックアップスクリプトを作成する

アイデア

それは実はとても簡単です

シェル スクリプトを記述して、mysql の mysqldump を介してデータを対応する sql ファイルにエクスポートします。Linux の crontab を使用して、対応するスクリプトを定期的に実行し、sql ファイルを対応するディレクトリに保存します。データ量とバックアップ頻度の増加に伴い、バックアップ サーバーのハード ディスク リソースの使用率も急激に上昇することが考えられます。この問題を解決するには、バックアップ コンテンツを定期的にクリーンアップする必要があります。私は単にシェル スクリプトを使用して、crontab を介して定期的にクリーンアップします。注

ここで注意すべき問題がいくつかあります。

mysqldump を介して対応するライブラリ テーブルの SQL をエクスポートすると、mysql サーバーのリソース消費 (cup、memory、io など) が必然的に発生します。mysqldump のデフォルトの方法ではテーブル ロックが発生し、これはひどいことであり、オンライン サービスの中断を引き起こします。一時的なものかもしれませんが、致命的です。(構成によってトランザクション モードに変更でき、テーブルをロックする必要はありません) データ量が増えると、mysqldump が SQL をエクスポートするのにかかる時間も長くなります。

もちろん、データのバックアップでは、対応する期間を選択し、対応する業務状況に応じてバックアップ サイクルを定義することができます。または、MySQL サーバーに多数のデータベースがある場合は、さまざまな業務に応じて異なる期間にバックアップすることもできます。 。 。具体的なビジネス状況によって異なります。

開発とテストのみで使用しているため、データ量はそれほど大きくなく、影響は無視できます。全員が退社した後にバックアップすれば問題ありません(そのため、毎晩12時にバックアップし、1か月後に先月のデータをクリーンアップするように設定しています)

1.mysqldumpの権限

mysqldump に必要な権限の説明:

mysqldump には少なくともテーブルに対する選択権限が必要です。ビューの場合、mysqldump には show view 権限が必要です。トリガーの場合、mysqldump にはトリガー権限が必要です。一貫性のあるバックアップを作成するには、mysqldump に lock tables 権限が必要です。

以下はユーザー作成数の推定値です(わからない場合は別途 Google で検索してください。詳細は説明しません)。

ユーザー dumper@'127.0.0.1' を作成します。
tempdb.* に対する選択権限を dumper@'127.0.0.1' に付与します。
dumper@'127.0.0.1' に tempdb.* の show view 権限を付与します。
dumper@'127.0.0.1' に tempdb.* のテーブルロックを許可します。
tempdb.* のトリガーを dumper@'127.0.0.1' に付与します。

2. シェルスクリプト(データエクスポートSQL)

#!/bin/sh

# データベース情報
DB_USER="ダンパー"
DB_PASS="..."
DB_HOST="..."
# データベース配列
DB_NAME=("ホテル" "食品" "フードウェブ")
# その他の変数
BIN_DIR="/usr/bin" #mysql bin パス
BCK_DIR="/home/mysql-backups" #バックアップファイルのディレクトリ
DATE=`日付 +%F`
# ファイルを作成
mkdir $BCK_DIR/$DATE
# やるべきこと
# /usr/bin/mysqldump --opt -ubatsing -pbatsingpw -hlocalhost timepusher > /mnt/mysqlBackup/db_`date +%F`.sql
${DB_NAME[@]}内のvarの場合;
する
  $BIN_DIR/mysqldump --opt --single-transaction --master-data=2 -u$DB_USER -p$DB_PASS -h$DB_HOST $DB_NAME > $BCK_DIR/$DATE/db_$var.sql
終わり

パラメータの説明:

--マスターデータ[=#]

バイナリ binlog ファイルの場所と名前をバックアップ エクスポート ファイルに追加します。値が 1 の場合、CHANGE MASTER ステートメントが追加されます。値が 2 の場合、CHANGE MASTER ステートメントの前にコメントが追加されます (機能しません~)
このパラメータは、--single-transactionを指定しない限り、テーブル--lock-all-tablesをロックします。
この場合、テーブル ロックはダンプの開始時に短時間のみ持続します。理論的には、ダンプ中のすべてのアクションは binlog ファイルに影響します。ダンプが完了すると、オプションによってテーブル ロック機能が自動的にオフになります。

--単一トランザクション

トランザクションとして実行

3. シェル スクリプト (スケジュールに従って N 日前のスクリプトを一括でクリアする)

#!/bin/sh
/home/mysql-backups -mtime +30 -name "*.*" -exec rm -Rf {} \; を見つけます。

例:

/home/lifeccp/dicom/studies: クリーンアップするディレクトリを準備します-mtime: 標準ステートメントの記述 +10: 10 日前のファイルを検索します。数字は日数を表します。+30 は 30 日前のファイルを検索することを意味します" . ": 検索するデータのタイプ。" .jpg" は拡張子 jpg のすべてのファイルを検索することを意味します。" " はすべてのファイルを検索することを意味します-exec: 固定の記述 rm -rf: ディレクトリを含むファイルを強制的に削除します{};: 検索の結果を it4.crontab スケジュールされた開始スクリプトに格納します

crontab -e
0 0 * * * /home/sh/mysql-backups/dump.sh
0 0 1 * * /home/sh/mysql-backups/del.sh
以下もご興味があるかもしれません:
  • HBASE でよく使用されるシェル コマンド、追加、削除、変更、クエリ メソッド
  • MySQL のスケジュールされたバックアップ、削除、および回復機能を実装するシェル スクリプト
  • MySQLクエリ結果をシェルで簡単に処理する方法
  • シェルでパスワードなしでMySQLデータベースに素早くログインする方法
  • シェルスクリプトを使用したMySQLデータベースの自動バックアップ
  • シェルスクリプトを使用して、mysql を追加、削除、変更、チェックし、my.cnf を構成します。

<<:  Win10 DVWA のダウンロード、インストール、構成のグラフィック チュートリアルの詳細な説明 (初心者向け学習侵入)

>>:  現在のブラウザが JavaScript でヘッドレス ブラウザであるかどうかを検出する方法

推薦する

JavaScript でオブジェクトのプロパティを削除する方法

1. 削除delete は、オブジェクトのプロパティを残さずに削除する唯一の方法ですが、その「代替」...

CSS3のwebkit-box-reflectを巧みに使用して、さまざまな動的効果を実現します。

かなり前の記事で、 -webkit-box-reflectプロパティについて説明しました。リフレクシ...

VUE のコンパイル スコープとスロット スコープのスロットの問題について

スロットとは何ですか?スロット ディレクティブは v-slot であり、現在 slot と slot...

Dockerにelasticsearchとkibanaをインストールする方法

Elasticsearchは現在非常に人気があり、多くの企業が利用しているため、esを知らないと軽蔑...

mysql インストーラ コミュニティ 8.0.12.0 インストール グラフィック チュートリアル

このチュートリアルでは、参考のためにmysqlインストーラコミュニティ8.0.12.0のインストール...

MySQL データベース 8 - データベース内の関数の適用の詳細な説明

データベースの組み込み関数の使用この記事では、主に日付関数、文字列関数、数学関数など、データベースの...

Linux で推奨される 9 つの優れたコード比較ツールの概要

コードを書くとき、2 つのファイル間の違い、または同じファイルの異なるバージョン間の違いを知る必要が...

MySQL DML ステートメントの概要

DML 操作とは、データベース内のテーブル レコードに対する操作を指し、主にテーブル レコードの挿入...

MySQL Installer 8.0.21 インストール チュートリアル (画像とテキスト付き)

1. 理由新しいシステムに MySQL を再インストールする必要があったので、将来詳細を忘れた場合...

1 つ以上のフィールドに基づいて重複データを検索する MySQL SQL ステートメント

SQLはテーブル内の重複レコードをすべて見つけます1. テーブルには id と name の 2 つ...

DockerでMySQLマスタースレーブ環境を構築する方法の詳しい説明

序文この記事では、docker-compose と dockerfile を使用して、binlog ...

nginx を使用して wgcloud へのアクセスを構成する方法

nginx の設定は次のとおりです。 http://172.17.188.27/wgcloud など...

Flinkのフォールトトレラントメカニズムに関する簡単な説明:ジョブ実行とデーモン

目次1. ジョブ実行のフォールトトレランス1.1 タスクフェイルオーバー戦略1.2 ジョブ再開戦略2...

プロフェッショナルおよび非プロフェッショナルのウェブデザイン

まず、Web ページのスタイルの形成は、主に Web ページのレイアウト設計、ページの色処理、画像と...

2019 年に最も役立ち重要なオープンソース ツール トップ 10

Black Duck の 2017 年のオープンソース調査では、回答者の 77% がオープンソース...