js を使用してファイルが UTF-8 でエンコードされているかどうかを判断する方法

js を使用してファイルが UTF-8 でエンコードされているかどうかを判断する方法

従来の解決策

FileReader を使用して UTF-8 形式のファイルを読み取り、ファイルの内容に文字化けした文字が含まれているかどうかに基づいて、ファイルが UTF-8 かどうかを判断します。

� が存在する場合、ファイルのエンコーディングは utf-8 ではありません。それ以外の場合は utf-8 です。

コードは次のとおりです。

const isUtf8 = async (ファイル: ファイル) => {
  戻り、新しい Promise((resolve, reject) => { を待ちます。
    const リーダー = 新しい FileReader();
    reader.readAsText(ファイル);

    reader.onloadend = (e: 任意): void => {
      定数コンテンツ = e.target.result;
      const encodingRight = content.indexOf("") === -1;

      if (encodingRight) {
        解決(エンコーディング右);
      } それ以外 {
        拒否(新しいエラー("エンコード形式エラーです。UTF-8形式のファイルをアップロードしてください"));
      }
    };
    
    リーダー.onerror = () => {
      拒否(新しいエラー("ファイルの内容の読み取りに失敗しました。ファイルが破損していないか確認してください"));
    };
  });
};

この方法の問題点は、ファイルが数 GB など非常に大きい場合、ブラウザが読み取ったコンテンツが直接メモリに配置され、fileReader インスタンスが直接 onerror をトリガーしてエラーをスローし、場合によってはブラウザが直接クラッシュすることです。

大容量ファイルソリューション

大きなファイルの場合は、ファイルの内容をサンプリングしてファイルをスライスすることができます。ここでは、100 個のスライスが使用されています。切り取ったファイルごとに、最初の 1kb セグメントを切り取り、文字列モードで読み取ります。 1024B が中国語文字エンコードの真ん中でカットされると、文字列として読み取るときにエラーが発生する可能性があります。つまり、� が先頭と末尾に出現し、非 UTF-8 セグメントとみなされる可能性があります。このとき、1kb に対応する文字列の前半部分を取得して、それが存在するかどうかを判断できます。

上記の定数は要件に応じて調整できます。

コードは次のとおりです。

const getSamples = (ファイル: ファイル) => {
  定数ファイルサイズ = ファイル.サイズ;
  定数パーツ: Blob[] = [];
  ファイルサイズが 50 * 1024 * 1024 未満の場合
    parts.push(ファイル);
  } それ以外 {
    合計を 100 とします。
    定数サンプルサイズ = 1024 * 1024;
    const chunkSize = Math.floor(ファイルサイズ / 合計);
    開始 = 0 とします。
    end = sampleSize; とします。
    (合計>1)の間{
      parts.push(file.slice(start, end));
      開始 += チャンクサイズ;
      終了 += チャンクサイズ;
      合計 - ;
    }
  }
  部品を返品する。
};

const isUtf8 = (ファイルパート: Blob) => {
  新しい Promise を返します ((resolve, reject) => {
    新しいFileReader()を作成します。

    fileReader.readAsText(ファイルパート);

    ファイルリーダー.onload = (e) => {
      const str = e.target?.result を文字列として返します。
      // およそ半分を取る const sampleStr = str?.slice(4, 4 + str?.length / 2);
      (sampleStr.indexOf("�") === -1)の場合{
        解決(void 0);
      } それ以外 {
        拒否(新しいエラー(エンコード形式エラー、UTF-8形式のファイルをアップロードしてください"));
      }
    };

    ファイルリーダー.onerror = () => {
      拒否(新しいエラー(ファイルの内容の読み取りに失敗しました。ファイルが破損していないか確認してください"));
    };
  });
};

デフォルトの非同期関数をエクスポートします(ファイル:File){
  const サンプル = getSamples(ファイル);
  res = true とします。

  for (const サンプルのファイル部分) {
    試す {
      isUtf8(filePart) を待機します。
    } キャッチ(エラー){
      戻り値:
      壊す;
    }
  }
  res を返します。
}

ファイルが utf-8 でエンコードされているかどうかを js がどのように判断するかについてのこの記事はこれで終わりです。より関連性の高い js 判断 utf-8 コンテンツについては、123WORDPRESS.COM の以前の記事を検索するか、以下の関連記事を引き続き参照してください。今後とも 123WORDPRESS.COM をよろしくお願いいたします。

以下もご興味があるかもしれません:
  • PHP は文字列のエンコーディングが utf-8 か gb2312 かを判定します。例
  • 中国語UTF-8かGBKかを判断するPHP正規表現とその具体的な実装

<<:  mysql5.6.zip形式の圧縮版インストールグラフィックチュートリアル

>>:  Centos Docker ブリッジ モードでホスト Redis サービスにアクセスできないというトラブルシューティングの経験

推薦する

HTML インライン要素と HTML ブロックレベル要素の概要と違い

ブロックレベル要素の機能: • 常に新しい行から始まり、それ自体で 1 行を占め、後続の要素も新しい...

CentOS8 - bash: 文字化けとその解決方法

この状況は通常、中国語言語パックがインストールされていないか、デフォルトの言語設定に問題があるために...

MySQLはPartition関数を使用して水平分割戦略を実装します。

目次1件のレビュー2 水平分割の5つの戦略2.1 ハッシュ2.2 範囲2.3. キー2.4. リスト...

display または visibility を通じて HTML 要素を表示または非表示にする

場合によっては、特定の条件に基づいて Web ページ内の HTML 要素を表示するか非表示にするかを...

Vueドロップダウンメニューのコンポーネント開発の詳細説明

この記事の例では、Vueドロップダウンメニューのコンポーネント開発の具体的なコードを参考までに共有し...

Vue で axios を使用して画像をアップロードするときに発生する問題

目次FormDataとは何ですか? vueとaxiosの協力による実践的な体験追加()セット()消去...

CSS3はテキストのレリーフ効果、彫刻効果、炎のテキストを実現します

この効果を実現するには、まず CSS のプロパティを知っておく必要があります。 text-shado...

mysql5.7.21 の異常起動を修正する方法

同僚から、停電のため MySQL インスタンスを起動できないという報告がありました。 innodb_...

Dockerで複数のSpringbootを実行するための詳細なチュートリアル

Dockerは複数のSpringbootを実行する1番目: ポートマッピング 2番目: メモリサイズ...

WeChatアプレット開発で遭遇したことのない落とし穴のまとめ

目次getApp()ページエントリファイルの先頭に変数を定義しますwx.createSelector...

JavaScript でのプロキシの使用を理解するための記事

目次エージェントとは何かプロキシの基礎知識ハンドラオブジェクトのメソッドプロキシでできること参考文献...

Centos7 での Rsync+crontab 定期同期バックアップ

最近、社内の重要なサーバデータを定期的にストレージにバックアップし、ついでにメモしておきたい以前、W...

Vue プロジェクトで TypeScript クラスを適用する方法

目次1. はじめに2. 使用1. @コンポーネント2. 計算、データ、方法3. @props 4. ...

JS配列の組み込みトラバーサルメソッドとその違いについての簡単な説明

目次forEach() (ES6) メソッドmap() (ES6) メソッドflatMap() メソ...

JavaScript の navigator.userAgent がブラウザ情報を取得するケースの説明

ブラウザはおそらく私たちにとって最も馴染みのあるツールです。 Firefox、Opera、Safar...