MySQL メタデータで Hive テーブル作成ステートメントのコメントスクリプトを生成する方法

序文

この記事は主にMySQLメタデータ生成Hiveテーブル作成ステートメントコメントスクリプトに関する関連コンテンツを紹介し、参考と学習のために共有します。詳細な紹介を一緒に見てみましょう：

最近、Mysql やその他のリレーショナルデータベースから Hive テーブルにデータを抽出する場合、MySQL テーブル内のコメントを同期する必要があります。次のスクリプトは、Hive テーブルフィールドのコメント変更ステートメントを生成できます。

注: Oracle などの他のリレーショナルデータベースも、メタデータを読み取り、スクリプト構文を変更することで、同じ考え方を使用して実装できます。

使用：

MySQLメタデータデータベースで次のステートメントを実行します: information_schema

SELECT CONCAT('テーブルの変更', TABLE_NAME, '列の変更', COLUMN_NAME, ' ', COLUMN_NAME, ' ', DATA_TYPE, 'コメント', '"', COLUMN_COMMENT, '"', ';')
FROM (SELECT TABLE_NAME, COLUMN_NAME, CASE WHEN DATA_TYPE = 'varchar' THEN 'string' WHEN DATA_TYPE = 'int' THEN 'int' WHEN DATA_TYPE = 'tinyint' THEN 'tinyint' WHEN DATA_TYPE = 'decimal' THEN 'double' WHEN DATA_TYPE = 'datetime' THEN 'string' WHEN DATA_TYPE = 'timestamp' THEN 'string' WHEN DATA_TYPE = 'float' THEN 'double' WHEN DATA_TYPE = 'double' THEN 'double' WHEN DATA_TYPE = 'bigint' THEN 'bigint' END AS DATA_TYPE, COLUMN_COMMENT
コラムより
ここで、TABLE_NAME = 'o_oms_statistic_profit'
) t;

MySQL などの他のリレーショナルデータベースから Hive テーブルにデータを抽出する場合は、MySQL テーブル内のコメントを同期する必要があります。次のスクリプトは、Hive の create table ステートメントを生成できます。 Hive テーブルの主なフィールド情報のみが生成され、その他の情報は手動で追加する必要があります。

MySQLメタデータデータベースで次のステートメントを実行します: information_schema

SELECT CONCAT('テーブルの作成', TABLE_NAME, '(', 部分文字列(列情報, 1, 長さ(列情報) - 1), ')', 'コメント', '"', TABLE_COMMENT, '"', ';')
FROM (SELECT TABLE_NAME, TABLE_COMMENT, group_concat(CONCAT(COLUMN_NAME, ' ', DATA_TYPE, ' comment ', '"', COLUMN_COMMENT, '"')) AS column_info
（t1.table_nameを選択、t2.table_comment = nullの場合、t1.table_name else end as table_comment、column_type = 'varchar' then 'string' when data_type = 'decyint' then 'tynint' fhe e = 'dateTime' then 'string' when data_type = 'timestamp' then 'string' when data_type = 'float' and 'double' wheny dable 'and' double 'wheny data_type =' bigint 'and' bigint 'and data_type
列 t1 からテーブル t2 を結合し、t1.TABLE_NAME = t2.TABLE_NAME を指定します。
ここで、t1.TABLE_NAME = 'o_oms_statistic_profit'
） t3
テーブル名、テーブルコメントによるグループ化
）t4;

要約する

上記はこの記事の全内容です。この記事の内容が皆さんの勉強や仕事に少しでもお役に立てれば幸いです。ご質問があれば、メッセージを残してコミュニケーションしてください。123WORDPRESS.COM をご愛顧いただき、ありがとうございます。

以下もご興味があるかもしれません: