MySQL全文インデックスを使用して検索エンジンのサンプルコードの簡易版を実現する

information_schema.INNODB_FT_DEFAULT_STOPWORD から * を選択します。

+-------+ 
| 値 | 
+-------+ 
| ア | 
| について | 
| の | 
| は | 
| として | 
| で | 
| である | 
| 作成者 | 
| com | 
| ドイツ語 | 
| ja | 
| のために | 
| から |

グローバルsync_binlog=100を設定します。
グローバル innodb_flush_log_at_trx_commit=2 を設定します。

テーブル「記事」を作成します（
 `id` bigint(10) NULLではない、
 `url` varchar(1024) 文字セット latin1 NOT NULL デフォルト '',
 `title` varchar(256) NOT NULL デフォルト '',
 `source` varchar(32) DEFAULT '' COMMENT '真のソース',
 `keywords` varchar(32) デフォルト NULL,
 `publish_time` タイムスタンプ NULL デフォルト NULL、
 主キー (`id`)、
 キー `title_idx` (`title`)
) エンジン=InnoDB

まずテストデータを解凍します tar -zxf mydumper_dump_article.tar.gz
時間 myloader -u $user -p $passwd -S $socket -t 32 -d /datas/dump_article -v 3

`article` から COUNT(*) を選択します。
+----------+
| カウント(*) |
+----------+
| 10000000 |
+----------+
セット1列（7.85秒）

SELECT table_name, CONCAT(FORMAT(SUM(data_length) / 1024 / 1024,2),'M') AS dbdata_size, CONCAT(FORMAT(SUM(index_length) / 1024 / 1024,2),'M') AS dbindex_size, CONCAT(FORMAT(SUM(data_length + index_length) / 1024 / 1024 / 1024,2),'G') AS `db_size(G)`, AVG_ROW_LENGTH,table_rows,update_time FROM information_schema.tables WHERE table_schema = DATABASE() and table_name='article';
+------------+-------------+--------------+-------------+----------------+------------+---------------------+
| テーブル名 | dbdata_size | dbindex_size | db_size(G) | AVG_ROW_LENGTH | テーブル行 | 更新時間 |
+------------+-------------+--------------+-------------+----------------+------------+---------------------+
| 記事 | 3,710.00M | 1,003.00M | 4.60G | 414 | 9388739 | 2019-07-05 15:31:37 |
+------------+-------------+--------------+-------------+----------------+------------+---------------------+

記事からキーワードを10個まで選択してください。
+-------------------------------------------------+
| キーワード |
+-------------------------------------------------+
| NULL |
| NULL |
| 、結婚、愛|
| ヘアスタイル、サイドパート、メイク、ファッション |
| シャオ A、|
| 、服の組み合わせ、女性、ファッション |
| 美しい、女性|
| バレンタインデー、東莞、女性 |
| 肌、スキンケア、スキンケア、食品栄養、美容、ヘルスケア |
| 三里屯、北京、ファッション |
+-------------------------------------------------+

'%Fashion%' のようなキーワードが含まれる記事から count(*) を選択します。
+----------+
| カウント(*) |
+----------+
| 163 |
+----------+
セット1列目（7.56秒）

[mysqld]
innodb_ft_min_token_size=2

mysqlを使用します。
テーブル my_stopwords(VALUE VARCHAR(30)) を作成します。エンジン = INNODB;
my_stopwords(VALUE) に VALUE (',') を挿入します。
グローバル innodb_ft_server_stopword_table = 'mysql/my_stopwords' を設定します。

グローバル変数を表示します。WHERE Variable_name IN('innodb_ft_min_token_size','innodb_ft_server_stopword_table');
+---------------------------------+--------------------+
| 変数名 | 値 |
+---------------------------------+--------------------+
| innodb_ft_min_token_size | 2 |
| innodb_ft_server_stopword_table | mysql/my_stopwords |
+---------------------------------+--------------------+

テーブル article を変更し、フルテキスト インデックス idx_full_keyword(keywords) を追加します。
* [ ] クエリは正常、影響を受けた行は 0 行、警告は 1 件 (1 分 27.92 秒)
* [ ] レコード: 0 重複: 0 警告: 1

df -h
ファイルシステムサイズ 使用済み 使用可能使用率 マウント先
/dev/vda1 7.8G 6.3G 1.2G 85% /
tmpfs 1.9G 0 1.9G 0% /dev/shm
/dev/mapper/vg_opt-lvol0
            19G 12G 5.7G 68% /データ

元のテーブルサイズの一時ファイルが作成されます 8.6K 7月5日 16:19 #sql-5250_3533.frm
 4.4G 7月5日 16:20 #sql-ib117-1768830977.ibd


テーブル article を変更し、フルテキスト インデックス idx_full_keyword(keywords) を追加します。
エラー 1114 (HY000): テーブル「article」がいっぱいです

select count(*) from article where match(keywords) against('%time尚%');
+----------+
| カウント(*) |
+----------+
| 163 |
+----------+
セット内の1行（0.05秒）

「北京市三里屯」に完全に一致するレコードの数を示します。select count(*) from article where match(keywords) against('+北京市三里屯' in boolean mode);
+----------+
| カウント(*) |
+----------+
| 1 |
+----------+
セット内の1行（0.06秒）

「Sanlitun」または「Beijing」に一致するレコードの数を示します。select count(*) from article where match(keywords) against('Sanlitun,Beijing');
+----------+
| カウント(*) |
+----------+
| 8 |
+----------+
セット内の1行（0.06秒）

記事のタイトルを 10 件まで選択してください。
+--------------------------------------------------------------------------------+
| タイトル |
+--------------------------------------------------------------------------------+
| 価値がある |
|Launchpad 江南皮革工場の小さな展示会 |
|RAWの舞台裏の珍しい瞬間:「Mad Man」が舞台裏に運ばれる|
|生: 息子は父親に向かって「お前は緑茶の息子だ」と叫んだ。彼は一人で4人と戦った。|
| 細かく装飾された 30 平方メートルの小さなアパートメント 4 組、多数の写真、間取り図 |
|ナイトクラブの女王によるセクシーなスモーキーキャットアイメイク|
|ビッグショーがロック・ジョンソンを激しく非難 |
|少女時代チェ・スヨンの服飾知識 リン・ユナ、ホアン・ミイン、キム・テヨン、チョン・スジョン|                       
|徳陽でのアウトドア、花畑でのバーベキュー|
+--------------------------------------------------------------------------------+

テーブル article を変更し、パーサー ngram を使用してフルテキスト インデックス ft_index_title(title) を追加します。
クエリは正常、影響を受けた行は 0 行 (3 分 29.22 秒)
レコード: 0 重複: 0 警告: 0

タイトルが '%Outdoor%' のような記事から count(*) を選択します。
+----------+
| カウント(*) |
+----------+
| 22058 |
+----------+
セット1列（8.60秒）

タイトルが '%Background%' のような記事から count(*) を選択します。
+----------+
| カウント(*) |
+----------+
| 1142 |
+----------+

記事からcount(*)を選択し、titleと'Outdoor'が一致するか確認します。
+----------+
| カウント(*) |
+----------+
| 22058 |
+----------+
セット内の1行（0.07秒）

タイトルが '%Background%' のような記事から count(*) を選択します。
+----------+
| カウント(*) |
+----------+
| 1142 |
+----------+
セット1列目（8.31秒）

通常の検索では、実際にこのキーワードを含むレコードの数は6です。
select count(*) from article where title like '%公子大%';
+----------+
| カウント(*) |
+----------+
| 6 |
+----------+
セット1列目（8.40秒）

全文検索、キーワードを含むレコード数は9443件
select count(*) from article where match(title) against('公子大');
+----------+
| カウント(*) |
+----------+
|9443|
+----------+
セット内の1行（0.06秒）

このキーワードを含む実際のレコード数は 1 です
select count(*) from article where title like '%花田自服%';
+----------+
| カウント(*) |
+----------+
| 1 |
+----------+
セット1列目（8.33秒）

全文検索でこのキーワードを含むレコードの数は3202です
select count(*) from article where match(title) against('花田自服');
+----------+
| カウント(*) |
+----------+
| 3202 |
+----------+
セット内の1行（0.06秒）