js を使用してファイルが UTF-8 でエンコードされているかどうかを判断する方法

js を使用してファイルが UTF-8 でエンコードされているかどうかを判断する方法

従来の解決策

FileReader を使用して UTF-8 形式のファイルを読み取り、ファイルの内容に文字化けした文字が含まれているかどうかに基づいて、ファイルが UTF-8 かどうかを判断します。

� が存在する場合、ファイルのエンコーディングは utf-8 ではありません。それ以外の場合は utf-8 です。

コードは次のとおりです。

const isUtf8 = async (ファイル: ファイル) => {
  戻り、新しい Promise((resolve, reject) => { を待ちます。
    const リーダー = 新しい FileReader();
    reader.readAsText(ファイル);

    reader.onloadend = (e: 任意): void => {
      定数コンテンツ = e.target.result;
      const encodingRight = content.indexOf("") === -1;

      if (encodingRight) {
        解決(エンコーディング右);
      } それ以外 {
        拒否(新しいエラー("エンコード形式エラーです。UTF-8形式のファイルをアップロードしてください"));
      }
    };
    
    リーダー.onerror = () => {
      拒否(新しいエラー("ファイルの内容の読み取りに失敗しました。ファイルが破損していないか確認してください"));
    };
  });
};

この方法の問題点は、ファイルが数 GB など非常に大きい場合、ブラウザが読み取ったコンテンツが直接メモリに配置され、fileReader インスタンスが直接 onerror をトリガーしてエラーをスローし、場合によってはブラウザが直接クラッシュすることです。

大容量ファイルソリューション

大きなファイルの場合は、ファイルの内容をサンプリングしてファイルをスライスすることができます。ここでは、100 個のスライスが使用されています。切り取ったファイルごとに、最初の 1kb セグメントを切り取り、文字列モードで読み取ります。 1024B が中国語文字エンコードの真ん中でカットされると、文字列として読み取るときにエラーが発生する可能性があります。つまり、� が先頭と末尾に出現し、非 UTF-8 セグメントとみなされる可能性があります。このとき、1kb に対応する文字列の前半部分を取得して、それが存在するかどうかを判断できます。

上記の定数は要件に応じて調整できます。

コードは次のとおりです。

const getSamples = (ファイル: ファイル) => {
  定数ファイルサイズ = ファイル.サイズ;
  定数パーツ: Blob[] = [];
  ファイルサイズが 50 * 1024 * 1024 未満の場合
    parts.push(ファイル);
  } それ以外 {
    合計を 100 とします。
    定数サンプルサイズ = 1024 * 1024;
    const chunkSize = Math.floor(ファイルサイズ / 合計);
    開始 = 0 とします。
    end = sampleSize; とします。
    (合計>1)の間{
      parts.push(file.slice(start, end));
      開始 += チャンクサイズ;
      終了 += チャンクサイズ;
      合計 - ;
    }
  }
  部品を返品する。
};

const isUtf8 = (ファイルパート: Blob) => {
  新しい Promise を返します ((resolve, reject) => {
    新しいFileReader()を作成します。

    fileReader.readAsText(ファイルパート);

    ファイルリーダー.onload = (e) => {
      const str = e.target?.result を文字列として返します。
      // およそ半分を取る const sampleStr = str?.slice(4, 4 + str?.length / 2);
      (sampleStr.indexOf("�") === -1)の場合{
        解決(void 0);
      } それ以外 {
        拒否(新しいエラー(エンコード形式エラー、UTF-8形式のファイルをアップロードしてください"));
      }
    };

    ファイルリーダー.onerror = () => {
      拒否(新しいエラー(ファイルの内容の読み取りに失敗しました。ファイルが破損していないか確認してください"));
    };
  });
};

デフォルトの非同期関数をエクスポートします(ファイル:File){
  const サンプル = getSamples(ファイル);
  res = true とします。

  for (const サンプルのファイル部分) {
    試す {
      isUtf8(filePart) を待機します。
    } キャッチ(エラー){
      戻り値:
      壊す;
    }
  }
  res を返します。
}

ファイルが utf-8 でエンコードされているかどうかを js がどのように判断するかについてのこの記事はこれで終わりです。より関連性の高い js 判断 utf-8 コンテンツについては、123WORDPRESS.COM の以前の記事を検索するか、以下の関連記事を引き続き参照してください。今後とも 123WORDPRESS.COM をよろしくお願いいたします。

以下もご興味があるかもしれません:
  • PHP は文字列のエンコーディングが utf-8 か gb2312 かを判定します。例
  • 中国語UTF-8かGBKかを判断するPHP正規表現とその具体的な実装

<<:  mysql5.6.zip形式の圧縮版インストールグラフィックチュートリアル

>>:  Centos Docker ブリッジ モードでホスト Redis サービスにアクセスできないというトラブルシューティングの経験

推薦する

Promise カプセル化 wx.request メソッド

前回の記事では、Promise を使用して小さなプログラム wx.request をカプセル化する実...

セマンティックタグを使用して、IE6、7、8と互換性のあるHTMLを記述します。

HTML5 では、ヘッダー、フッター、ナビゲーションなどのセマンティック タグが追加されているため...

実行中のDockerコンテナのポートマッピングを変更する方法

序文docker run がコンテナを作成して実行するときに、-p を使用してポート マッピング ル...

Dockerコンテナとホストマシン間の8時間の差の問題を解決する

デプロイに docker-compose を使用すると、出力ログと関連イベントが検証されて出力される...

MySQL 接続失敗の一般的な障害と原因

==================================================...

Centos8 の Django プロジェクトに nginx+uwsgi をデプロイするチュートリアル

1. 仮想環境virtualenvのインストール1. virtualenvをインストールするpip3...

進捗バーのネイティブ JavaScript 実装

進捗バーを実装するためのJavaScriptの具体的なコードは参考までに。具体的な内容は次のとおりで...

Java を Mysql バージョン 8.0.18 に接続する方法の詳細な説明

JavaとMysql 8.0.18バージョンの接続方法については、参考までに具体的な内容は以下のとお...

CSS 疑似クラス: 空っぽだと光る (サンプルコード)

最近私の記事を読んだ人なら誰でも、私が現在WeChatミニプログラムプロジェクトを担当しており、その...

Linux クラウド サーバーに JDK と Tomcat をインストールするための詳細な手順 (推奨)

JDKをダウンロードしてインストールするステップ 1: まず、公式 Web サイト http://...

CSSカスケーディングメカニズムについての簡単な説明

CSS にカスケード メカニズムがあるのはなぜですか? CSS では、同じ要素の特定のプロパティに同...

Dockerfile における ENTRYPOINT と CMD の違い

Docker システムの学習チュートリアルでは、Dockerfile を使用して Docker イメ...

MySQLの実行プロセスとシーケンスについての簡単な説明

目次1:mysql実行プロセス1.1: コネクタ1.2: キャッシュ1.3: アナライザー1.4: ...

Centos での Python のアップグレードと Mongodb ドライバーのインストールに関する問題

Python バージョンを確認します (python -V)。2.7 未満の場合は、アップグレードす...

最新の超詳細な VMware 仮想マシンのダウンロードとインストールのグラフィック チュートリアル

目次1. 仮想マシンをダウンロードする2. 仮想マシンのインストールVMware のダウンロードとイ...