js を使用してファイルが UTF-8 でエンコードされているかどうかを判断する方法

js を使用してファイルが UTF-8 でエンコードされているかどうかを判断する方法

従来の解決策

FileReader を使用して UTF-8 形式のファイルを読み取り、ファイルの内容に文字化けした文字が含まれているかどうかに基づいて、ファイルが UTF-8 かどうかを判断します。

� が存在する場合、ファイルのエンコーディングは utf-8 ではありません。それ以外の場合は utf-8 です。

コードは次のとおりです。

const isUtf8 = async (ファイル: ファイル) => {
  戻り、新しい Promise((resolve, reject) => { を待ちます。
    const リーダー = 新しい FileReader();
    reader.readAsText(ファイル);

    reader.onloadend = (e: 任意): void => {
      定数コンテンツ = e.target.result;
      const encodingRight = content.indexOf("") === -1;

      if (encodingRight) {
        解決(エンコーディング右);
      } それ以外 {
        拒否(新しいエラー("エンコード形式エラーです。UTF-8形式のファイルをアップロードしてください"));
      }
    };
    
    リーダー.onerror = () => {
      拒否(新しいエラー("ファイルの内容の読み取りに失敗しました。ファイルが破損していないか確認してください"));
    };
  });
};

この方法の問題点は、ファイルが数 GB など非常に大きい場合、ブラウザが読み取ったコンテンツが直接メモリに配置され、fileReader インスタンスが直接 onerror をトリガーしてエラーをスローし、場合によってはブラウザが直接クラッシュすることです。

大容量ファイルソリューション

大きなファイルの場合は、ファイルの内容をサンプリングしてファイルをスライスすることができます。ここでは、100 個のスライスが使用されています。切り取ったファイルごとに、最初の 1kb セグメントを切り取り、文字列モードで読み取ります。 1024B が中国語文字エンコードの真ん中でカットされると、文字列として読み取るときにエラーが発生する可能性があります。つまり、� が先頭と末尾に出現し、非 UTF-8 セグメントとみなされる可能性があります。このとき、1kb に対応する文字列の前半部分を取得して、それが存在するかどうかを判断できます。

上記の定数は要件に応じて調整できます。

コードは次のとおりです。

const getSamples = (ファイル: ファイル) => {
  定数ファイルサイズ = ファイル.サイズ;
  定数パーツ: Blob[] = [];
  ファイルサイズが 50 * 1024 * 1024 未満の場合
    parts.push(ファイル);
  } それ以外 {
    合計を 100 とします。
    定数サンプルサイズ = 1024 * 1024;
    const chunkSize = Math.floor(ファイルサイズ / 合計);
    開始 = 0 とします。
    end = sampleSize; とします。
    (合計>1)の間{
      parts.push(file.slice(start, end));
      開始 += チャンクサイズ;
      終了 += チャンクサイズ;
      合計 - ;
    }
  }
  部品を返品する。
};

const isUtf8 = (ファイルパート: Blob) => {
  新しい Promise を返します ((resolve, reject) => {
    新しいFileReader()を作成します。

    fileReader.readAsText(ファイルパート);

    ファイルリーダー.onload = (e) => {
      const str = e.target?.result を文字列として返します。
      // およそ半分を取る const sampleStr = str?.slice(4, 4 + str?.length / 2);
      (sampleStr.indexOf("�") === -1)の場合{
        解決(void 0);
      } それ以外 {
        拒否(新しいエラー(エンコード形式エラー、UTF-8形式のファイルをアップロードしてください"));
      }
    };

    ファイルリーダー.onerror = () => {
      拒否(新しいエラー(ファイルの内容の読み取りに失敗しました。ファイルが破損していないか確認してください"));
    };
  });
};

デフォルトの非同期関数をエクスポートします(ファイル:File){
  const サンプル = getSamples(ファイル);
  res = true とします。

  for (const サンプルのファイル部分) {
    試す {
      isUtf8(filePart) を待機します。
    } キャッチ(エラー){
      戻り値:
      壊す;
    }
  }
  res を返します。
}

ファイルが utf-8 でエンコードされているかどうかを js がどのように判断するかについてのこの記事はこれで終わりです。より関連性の高い js 判断 utf-8 コンテンツについては、123WORDPRESS.COM の以前の記事を検索するか、以下の関連記事を引き続き参照してください。今後とも 123WORDPRESS.COM をよろしくお願いいたします。

以下もご興味があるかもしれません:
  • PHP は文字列のエンコーディングが utf-8 か gb2312 かを判定します。例
  • 中国語UTF-8かGBKかを判断するPHP正規表現とその具体的な実装

<<:  mysql5.6.zip形式の圧縮版インストールグラフィックチュートリアル

>>:  Centos Docker ブリッジ モードでホスト Redis サービスにアクセスできないというトラブルシューティングの経験

推薦する

CentOS 7.x のマスターおよびスレーブ DNS サーバーの展開

1. 準備例: 2 台のマシン: 192.168.219.146 (マスター)、192.168.21...

jsを使用して動的な背景を実現する

この記事の例では、動的な背景を実現するためのjsの具体的なコードを参考までに共有しています。具体的な...

MySQL ストアド プロシージャのエラー処理例の詳細な説明

この記事では、例を使用して MySQL ストアド プロシージャのエラー処理について説明します。ご参考...

Google Web Fonts でウェブサイトに無制限のフォントを追加

長い間、リソースの制約により、使用できるフォントが限られていたため、Web サイトの開発は妨げられて...

Linuxディレクトリ構造の詳細な紹介

Linuxを学び始めるときは、まずLinuxの標準ディレクトリ構造を理解する必要があります。 / r...

Nginx try_files ディレクティブの使用例

Nginx の設定構文は柔軟で、高度に制御可能です。バージョン 0.7 以降では、try_files...

Docker で ElasticSearch をデプロイする方法

1. ElasticSearch とは何ですか? Elasticsearch も Java で開発さ...

要素テーブルの多層ネスト表示の実践

複数の注文を含むリストが必要です。各注文は一意にすることも、複数の注文を結合することもできます。各注...

Vue3 の ref toRef と toRefs の違いを理解する方法

目次1. 基本1.参照2. 参照3. 参照4. 最適な使い方2. 詳細な1. なぜrefが必要なのか...

HTML 適応テーブル方式

<body style="scroll:no"> <テーブルの...

MySQL テーブルスペースのリカバリに対する正しいアプローチについての簡単な説明

目次予備的注釈問題の再現データ削除の原則データの再利用どの操作がデータホールの原因になりますか?表領...

Webデザインと制作のテスト問題と参考回答

<br />Web デザインと制作テスト パート I 多肢選択問題 1. 単一選択問題 ...

まだ*を選択しますか?

アプリケーションが牛のように遅い理由は数多くあります。ネットワーク、システム アーキテクチャ、または...

mysql8.0.14.zip のインストール中にデータ フォルダを自動的に作成できませんでした。サービスを開始できません。

今日システムを再インストールした後、コンピューターに mysql を再インストールし、ZIP ファイ...

iframe ページで js 関数を呼び出すには js を使用します

最近、私は毎日論文提案に取り組んでいます。自分のスキルを発揮して、再びWebをデザインしたくてうずう...