ホストサービスにアクセスするDockerでのサービスの実装

バージョン: "3"
 
サービス:
  ポストグル:
    画像: failymao/postgres:12.7
    コンテナ名: postgres
    再起動: 停止しない限り
    privileged: true # docker-compose 環境変数を設定するコマンド: [ "-c", "config_file=/var/lib/postgresql/postgresql.conf", "-c", "hba_file=/var/lib/postgresql/pg_hba.conf" ]
    ボリューム:
      - ./config/postgresql.conf:/var/lib/postgresql/postgresql.conf
      - ./config/pg_hba.conf:/var/lib/postgresql/pg_hba.conf
    環境：
      POSTGRES_パスワード: abc123
      POSTGRES_USER: postgres
      ポート: 15432
      POSTGRES_ホスト: 127.0.0.1
    ヘルスチェック:
      テスト: sh -c "sleep 5 && PGPASSWORD=abc123 psql -h 127.0.0.1 -U postgres -p 15432 -c '\q';"
      間隔: 30秒
      タイムアウト: 10秒
      再試行: 3
    ネットワークモード: "ホスト"
 
  飼育員:
    画像: failymao/zookeeper:1.4.0
    コンテナ名: 飼育係
    再起動: 常に
    ネットワークモード: "ホスト"
 
  カフカ:
    画像: failymao/kafka:1.4.0
    コンテナ名: kafka
    再起動: 常に
    依存:
      - 動物園の飼育員
    環境：
      KAFKA_ADVERTISED_HOST_NAME: カフカ
      KAFKA_ZOOKEEPER_CONNECT: ローカルホスト:2181
      KAFKA_LISTENERS: プレーンテキスト://127.0.0.1:9092
      KAFKA_ADVERTISED_LISTENERS: プレーンテキスト://127.0.0.1:9092
      KAFKA_ブローカーID: 1
      KAFKA_ログ保持時間: 24
      KAFKA_LOG_DIRS: /data/kafka-data #データ mountnetwork_mode: "host"
 
  プロデューサー：
    依存:
      - レディス
      - カフカ
      - 動物園の飼育員
    画像: long2ice/synch
    コンテナ名: プロデューサー
    コマンド: sh -c "
      睡眠30 &&
      同期 --alias pg2ch_test 生成"
    ボリューム:
      - ./synch.yaml:/synch/synch.yaml
    ネットワークモード: "ホスト"
 
  # コンシューマーはデータベース コンシューマーを消費します:
    端末: 真
    依存:
      - レディス
      - カフカ
      - 動物園の飼育員
    画像: long2ice/synch
    コンテナ名: コンシューマー
    コマンド: sh -c
      「30分寝て
      同期 --alias pg2ch_test 消費 --schema pg2ch_test"
    ボリューム:
      - ./synch.yaml:/synch/synch.yaml
    ネットワークモード: "ホスト"
 
  レディス:
    ホスト名: redis
    コンテナ名: redis
    画像: redis:latest
    ボリューム:
      - redis:/データ
    ネットワークモード: "ホスト"
 
ボリューム:
  レディス:
  カフカ:
  飼育員:

コア：
  debug: true # True に設定すると、SQL 情報が表示されます。
  insert_num: 20000 # 送信するnumの数。本番環境では20000に設定することを推奨します。
  insert_interval: 60 # 送信する秒数。本番環境では60に設定することを推奨します。
  # これを有効にすると、ClickHouse でデータベース `synch` が自動的に作成され、モニターデータが挿入されます
  監視: 有効
 
レディス:
  ホスト: redis
  ポート: 6379
  デシベル: 0
  パスワード：
  プレフィックス: 同期
  sentinel: false # redis sentinel を有効にする
  sentinel_hosts: # redis センチネルホスト
    - 127.0.0.1:5000
  sentinel_master: マスター
  queue_max_len: 200000 # ストリームの最大長。FIFO で冗長なものを削除します。
 
ソースDB:
  -db_type: ポストグル
    エイリアス: pg2ch_test
    broker_type: kafka # 現在、redis と kafka をサポートしています
    ホスト: 127.0.0.1
    ポート: 5433
    ユーザー: postgres
    パスワード: abc123
    データベース:
      - データベース: pg2ch_test
        自動作成: 有効
        表:
          - テーブル: pgbench_accounts
            自動フルETL: 有効
            clickhouse_engine: マージツリーの折りたたみ
            sign_column: サイン
            バージョン列:
            パーティションの基準:
            設定：
 
クリックハウス:
  # クラスターの場合、シャードホストはランダムに挿入されます
  ホスト:
    - 127.0.0.1:9000
  ユーザー: デフォルト
  パスワード: ''
  cluster_name: # 空でない場合はクラスター モードを有効にします。有効にする場合は、ホストが複数である必要があります。
  分散テーブルサフィックス: _all # クラスターで使用可能な分散テーブルサフィックス
 
カフカ:
  サーバー:
    - 127.0.0.1:9092
  topic_prefix: 同期

root@failymao-NC:/mnt/d/pythonProject/pg_2_ch_demo# cat /etc/hosts
# このファイルは WSL によって自動的に生成されました。このファイルの自動生成を停止するには、/etc/wsl.conf に次のエントリを追加します。
# [ネットワーク]
# 生成ホスト = false
127.0.0.1 ローカルホスト
 
10.111.130.24 ホスト.docker.内部

コア：
  debug: true # True に設定すると、SQL 情報が表示されます。
  insert_num: 20000 # 送信するnumの数。本番環境では20000に設定することを推奨します。
  insert_interval: 60 # 送信する秒数。本番環境では60に設定することを推奨します。
  # これを有効にすると、ClickHouse でデータベース `synch` が自動的に作成され、モニターデータが挿入されます
  監視: 有効
 
レディス:
  ホスト: redis
  ポート: 6379
  デシベル: 0
  パスワード：
  プレフィックス: 同期
  sentinel: false # redis sentinel を有効にする
  sentinel_hosts: # redis センチネルホスト
    - 127.0.0.1:5000
  sentinel_master: マスター
  queue_max_len: 200000 # ストリームの最大長。FIFO で冗長なものを削除します。
 
ソースDB:
  -db_type: ポストグル
    エイリアス: pg2ch_test
    broker_type: kafka # 現在、redis と kafka をサポートしています
    ホスト: host.docker.internal
    ポート: 5433
    ユーザー: postgres
    パスワード: abc123
    データベース:
      - データベース: pg2ch_test
        自動作成: 有効
        表:
          - テーブル: pgbench_accounts
            自動フルETL: 有効
            clickhouse_engine: マージツリーの折りたたみ
            sign_column: サイン
            バージョン列:
            パーティションの基準:
            設定：
 
クリックハウス:
  # クラスターの場合、シャードホストはランダムに挿入されます
  ホスト:
    - 127.0.0.1:9000
  ユーザー: デフォルト
  パスワード: ''
  cluster_name: # 空でない場合はクラスター モードを有効にします。有効にする場合は、ホストが複数である必要があります。
  分散テーブルサフィックス: _all # クラスターで使用可能な分散テーブルサフィックス
 
カフカ:
  サーバー:
    - 127.0.0.1:9092
  topic_prefix: 同期ホスト: host.docker.internal
コア：
  debug: true # True に設定すると、SQL 情報が表示されます。
  insert_num: 20000 # 送信するnumの数。本番環境では20000に設定することを推奨します。
  insert_interval: 60 # 送信する秒数。本番環境では60に設定することを推奨します。
  # これを有効にすると、ClickHouse でデータベース `synch` が自動的に作成され、モニターデータが挿入されます
  監視: 有効
 
レディス:
  ホスト: redis
  ポート: 6379
  デシベル: 0
  パスワード：
  プレフィックス: 同期
  sentinel: false # redis sentinel を有効にする
  sentinel_hosts: # redis センチネルホスト
    - 127.0.0.1:5000
  sentinel_master: マスター
  queue_max_len: 200000 # ストリームの最大長。FIFO で冗長なものを削除します。
 
ソースDB:
  -db_type: ポストグル
    エイリアス: pg2ch_test
    broker_type: kafka # 現在、redis と kafka をサポートしています
    ホスト： 
    ポート: 5433
    ユーザー: postgres
    パスワード: abc123
    データベース:
      - データベース: pg2ch_test
        自動作成: 有効
        表:
          - テーブル: pgbench_accounts
            自動フルETL: 有効
            clickhouse_engine: マージツリーの折りたたみ
            sign_column: サイン
            バージョン列:
            パーティションの基準:
            設定：
 
クリックハウス:
  # クラスターの場合、シャードホストはランダムに挿入されます
  ホスト:
    - 127.0.0.1:9000
  ユーザー: デフォルト
  パスワード: ''
  cluster_name: # 空でない場合はクラスター モードを有効にします。有効にする場合は、ホストが複数である必要があります。
  分散テーブルサフィックス: _all # クラスターで使用可能な分散テーブルサフィックス
 
カフカ:
  サーバー:
    - 127.0.0.1:9092
  topic_prefix: 同期