MySQL の遅いクエリとクエリ再構築方法の記録

MySQL の遅いクエリとクエリ再構築方法の記録

序文

スロークエリとは何か、またスロークエリを最適化するにはどうすればよいか。以下では、これら 2 つの知識ポイントに関連する知識を紹介します。

スロークエリの基礎: データアクセスの最適化

データベースから不要なデータが要求されていますか?

不要なレコードをクエリする: 解決策: クエリの後に Limit を追加する

複数のテーブルが関連付けられている場合はすべての列を返す: 解決策: 必要な列のみを取得する

常にすべての列を取得する: select * 解決策: アプリケーションが列データをキャッシュしない限り、部分的な列を取得する方がよい

同じデータの繰り返しクエリ: 解決策: 必要なときにキャッシュから取得する

MySQL は追加のレコードをスキャンしていますか?

クエリ コストは、応答時間、スキャンされた行数、返された行数に基づいて測定できます。

スキャンされる行数を減らすには、必要なレコードをカバーするインデックスを使用できます。ただし、インデックスを追加しても、合計やカウントなどの集計関数のように、スキャンされる行数が返される行数と等しくなるわけではありません。

クエリを再構築する方法

1つの複雑なクエリまたは複数の単純なクエリ

これまでは、ネットワーク通信を介したクエリの解析と最適化はコストのかかる作業であったため、データベース層で可能な限り多くの作業を行うことに重点が置かれていました。

しかし、この考え方は、接続と切断が軽量で、小さなクエリ結果を効率的に返すように設計されている MySQL には当てはまりません。現代のネットワークは、帯域幅と遅延の両方の点で以前よりもはるかに高速です。 MySQL の一部のバージョンでは、汎用サーバーでも 1 秒あたり 100,000 件を超えるクエリを実行でき、ギガビット ネットワーク カードでも 1 秒あたり 2,000 件を超えるクエリを簡単に処理できます。したがって、複数の小さなクエリを実行することは、今のところ大きな問題ではありません。

もちろん、内部スキャンと比較すると、クライアントへのデータへの応答には時間がかかるため、同じ条件では、クエリをできるだけ少なくする方がよいでしょう。

分割クエリ

SQL を使用してクエリを実行する場合、データベースへの影響を減らすために、大きなクエリを小さなクエリに分割することに注意する必要があります。一度に大きなステートメントが完了すると、大量のデータが一度にロックされ、トランザクション ログ全体がいっぱいになり、システム リソースが枯渇し、他のクエリがブロックされる可能性があります。

たとえば、データ統計を行うときに、大量の注文番号の情報を照会する必要があります。IN クエリを 1 回使用するか、パラメータ リストをカットして複数回クエリするべきでしょうか。答えは、パラメータ リストをカットして複数回クエリすることです。IN にパラメータが多すぎると、MySQL はインデックスを使用できなくなったと判断し、テーブル全体のクエリを実行する可能性があるためです。このとき、データ テーブルのデータ量が多すぎると、クエリがタイムアウトする可能性があります。

// リストを長さ L の非ビュー サブリストに分割します
静的 <T> List<List<T>> 切り詰められた(List<T> リスト、最終的な int L) {
    List<List<T>> パーツ = 新しい ArrayList<List<T>>();
    最終的な int N = list.size();
    (int i = 0; i < N; i += L) の場合 {
        パーツを追加します(新しいArrayList<T>(
            リスト.subList(i, Math.min(N, i + L)))
        );
    }
    部品を返品する。
}
リスト<Integer> 数値 = Collections.unmodifiableList(
    配列.asList(5,3,1,2,9,5,0,7)
);
List<List<Integer>> parts = chunked(numbers, 3);
System.out.println(parts); // "[[5, 3, 1], [2, 9, 5], [0, 7]]" と出力します
パーツを取得します(0).追加します(-1);
System.out.println(parts); // "[[5, 3, 1, -1], [2, 9, 5], [0, 7]]" と出力します
System.out.println(numbers); // "[5, 3, 1, 2, 9, 5, 0, 7]" を出力します (変更なし!)

クエリがテーブル全体のスキャンではなくインデックスを使用できるように、プログラムによってリストを切り捨てます。

Alibaba 開発マニュアルでは、 in 以降のコレクション要素の数を慎重に評価し、1,000 以内に抑えることを推奨しています。

リレーショナルクエリの分解

複数のテーブルの内部結合を小さなクエリに分解します。結合が 3 つのテーブルを超える場合は、禁止する必要があります。

利点は次のとおりです:

  1. キャッシュがより効率的になります。
  2. クエリを分解するとロック競合が軽減される
  3. アプリケーション層はクエリ データをキャッシュして、データベースへの負荷を軽減できます。
  4. 特に大きなテーブルの場合、主キーなどを使用したクエリは条件範囲に基づくクエリよりも効率的である可能性があるため、クエリの効率が向上します。
  5. 冗長なレコードのクエリを削減できる
  6. さらに、これは MySQL のネストされたループ結合を使用するのではなく、アプリケーションでハッシュ結合を実装することと同じです。シナリオによっては、ハッシュ関連付けの方がはるかに効率的です。

要約する

これで、MySQL のスロー クエリとクエリ再構築に関するこの記事は終了です。MySQL のスロー クエリとクエリ再構築に関するより関連性の高いコンテンツについては、123WORDPRESS.COM で以前の記事を検索するか、次の関連記事を引き続き参照してください。今後とも 123WORDPRESS.COM をよろしくお願いいたします。

以下もご興味があるかもしれません:
  • MySQLのスロークエリ設定の詳細な説明
  • MySql のスロークエリ分析とスロークエリログの開き方の詳細説明
  • mysql のスロークエリを有効にする方法 mysql のスロークエリのログを有効にする方法
  • MySQL の遅いクエリ検索とチューニングテスト
  • MySQL でスロークエリログを有効にする方法
  • MySQL スロークエリログの分析に関する基本チュートリアル
  • MySQL スロークエリログの設定と使用方法のチュートリアル
  • MySQLの遅いクエリが失敗の原因となった

<<:  Vue プロジェクトに Electron を追加するための詳細なコード

>>:  CSS XTHML の記述標準とよくある問題の概要 (ページ最適化)

推薦する

Docker で SVN サーバーを構築するチュートリアル

SVN は Subversion の略称で、ブランチ管理システムを使用して効率的に管理するオープンソ...

MySQL mysqldump の使い方の詳しい説明

1. mysqldump の紹介mysqldump は、MySQL に付属する論理バックアップ ツー...

プレーンな JS オブジェクトの代わりに Map を使用する場合

目次1. マップは任意のタイプのキーを受け入れます2. マップにはキー名に関する制限はありません3....

JS 正規マッチングの落とし穴の記録

最近、JS の正規表現マッチングの落とし穴を発見したのですが、その時はあまりにも奇妙だったので、何か...

CSS3の3D効果を使って立方体を作成する

CSS3 の 3D 効果を使用して立方体を作成する方法を学ぶと、3D シーンの回転と変位のプロパティ...

MySQL関数の簡単な紹介

目次1. 数学関数2. 文字列関数3. 日付関数4. 暗号化機能主な MySQL 関数は次のように紹...

JS のあらゆる場所で絶対等価演算子の使用をやめる

目次概要1. NULL値のテスト2. ユーザー入力を読み取る導入事実の根源はどこにあるのでしょうか?...

DockerはElasticsearch7.6クラスタをインストールし、パスワードを設定します

Elasticsearch 6.8 以降、無料ユーザーは X-Pack のセキュリティ機能を使用でき...

Node はあいまい検索用の検索ボックスを実装します

この記事の例では、検索ボックスでファジークエリを実装するためのNodeの具体的なコードを参考までに共...

Dockerでイメージを削除する方法

dockerでイメージを削除するコマンドはdocker rmiですが、このコマンドを実行してもイメー...

HTML の左右レイアウトのサンプルコード

CS: ...コードをコピーコードは次のとおりです。 html,body{ margin:0px; ...

Dockerコンテナの紹介

1. 概要1.1 基本概念: Docker は、Go 言語をベースにしたオープンソースのアプリケーシ...

Linux での Nginx 監視の問題

nginxのインストール仮想マシンがインターネットにアクセスできることを確認します。 1. ルートユ...

Linux コマンドラインで他のユーザーと通信する方法

Linux のコマンドラインで他のユーザーにメッセージを送信するのは簡単です。これを行うコマンドは多...

Vue2.x における双方向バインディングの原理と実装

目次1. 実施プロセス2. オブザーバーを表示する3. ウォッチャーを実装する4. コンパイルを実装...