バンドルされているPgBouncerサービスでの作業
高可用性スタックの一部として、GitLab Premium には/etc/gitlab/gitlab.rb
で管理できるPgBouncerがバンドルされています。 PgBouncer は、フェイルオーバーシナリオでサーバー間のデータベース接続をシームレスに移行するために使用されます。 さらに、HA 以外のセットアップで接続をプールするために使用することもでき、リソースの使用量を削減しながらレスポンスタイムを高速化します。
HAセットアップでは、内部ロードバランサ(TCP) 、各データベースノードに対して個別にPgBouncerノードを実行することを推奨します。
オペレーション
HA GitLabインストールの一部としてPgBouncerを実行する方法
このコンテンツは新しい場所に移動しました。
非HA GitLabインストールの一部としてPgBouncerを実行する場合
-
コマンドでPGBOUNCER_USER_PASSWORD_HASHを生成します。
gitlab-ctl pg-password-md5 pgbouncer
-
コマンドでSQL_USER_PASSWORD_HASHを生成
gitlab-ctl pg-password-md5 gitlab
。 後で平文のSQL_USER_PASSWORDも入力する必要があります。 -
データベース・ノードの
/etc/gitlab/gitlab.rb
postgresql['pgbouncer_user_password'] = 'PGBOUNCER_USER_PASSWORD_HASH' postgresql['sql_user_password'] = 'SQL_USER_PASSWORD_HASH' postgresql['listen_address'] = 'XX.XX.XX.Y' # Where XX.XX.XX.Y is the ip address on the node postgresql should listen on postgresql['md5_auth_cidr_addresses'] = %w(AA.AA.AA.B/32) # Where AA.AA.AA.B is the IP address of the pgbouncer node
-
走る
gitlab-ctl reconfigure
注:データベースがすでに実行されている場合は、再設定後に
gitlab-ctl restart postgresql
を実行して再起動する必要があります。 -
PgBouncerを実行しているノード上で、以下が設定されていることを確認してください。
/etc/gitlab/gitlab.rb
pgbouncer['enable'] = true pgbouncer['databases'] = { gitlabhq_production: { host: 'DATABASE_HOST', user: 'pgbouncer', password: 'PGBOUNCER_USER_PASSWORD_HASH' } }
-
走る
gitlab-ctl reconfigure
-
Pumaが稼動しているノードで、以下が設定されていることを確認します。
/etc/gitlab/gitlab.rb
gitlab_rails['db_host'] = 'PGBOUNCER_HOST' gitlab_rails['db_port'] = '6432' gitlab_rails['db_password'] = 'SQL_USER_PASSWORD'
-
走る
gitlab-ctl reconfigure
-
この時点で、インスタンスはPgBouncerを通してデータベースに接続するはずです。 問題がある場合は、トラブルシューティングのセクションを参照してください。
モニタリングの有効化
GitLab 12.0から導入されました。
モニタリングを有効にする場合、全てのPgBouncerサーバーで有効にする必要があります。
-
/etc/gitlab/gitlab.rb
を作成/編集し、以下の設定を追加します:# Enable service discovery for Prometheus consul['enable'] = true consul['monitoring_service_discovery'] = true # Replace placeholders # Y.Y.Y.Y consul1.gitlab.example.com Z.Z.Z.Z # with the addresses of the Consul server nodes consul['configuration'] = { retry_join: %w(Y.Y.Y.Y consul1.gitlab.example.com Z.Z.Z.Z), } # Set the network addresses that the exporters will listen on node_exporter['listen_address'] = '0.0.0.0:9100' pgbouncer_exporter['listen_address'] = '0.0.0.0:9188'
-
sudo gitlab-ctl reconfigure
を実行して設定をコンパイルします。
PgBouncerとの対話
管理コンソール
Omnibus GitLabの一部として、PgBouncer管理コンソールに自動的に接続するためのコマンドgitlab-ctl pgb-console
。 コンソールとの対話方法の詳細については、PgBouncerのドキュメントを参照してください。
セッションを開始するには
# gitlab-ctl pgb-console
Password for user pgbouncer:
psql (11.7, server 1.7.2/bouncer)
Type "help" for help.
pgbouncer=#
パスワードはPGBOUNCER_USER_PASSWORDです。
インスタンスに関する基本的な情報を得るには、以下を実行します。
pgbouncer=# show databases; show clients; show servers;
name | host | port | database | force_user | pool_size | reserve_pool | pool_mode | max_connections | current_connections
---------------------+-----------+------+---------------------+------------+-----------+--------------+-----------+-----------------+---------------------
gitlabhq_production | 127.0.0.1 | 5432 | gitlabhq_production | | 100 | 5 | | 0 | 1
pgbouncer | | 6432 | pgbouncer | pgbouncer | 2 | 0 | statement | 0 | 0
(2 rows)
type | user | database | state | addr | port | local_addr | local_port | connect_time | request_time | ptr | link
| remote_pid | tls
------+-----------+---------------------+--------+-----------+-------+------------+------------+---------------------+---------------------+-----------+------
+------------+-----
C | gitlab | gitlabhq_production | active | 127.0.0.1 | 44590 | 127.0.0.1 | 6432 | 2018-04-24 22:13:10 | 2018-04-24 22:17:10 | 0x12444c0 |
| 0 |
C | gitlab | gitlabhq_production | active | 127.0.0.1 | 44592 | 127.0.0.1 | 6432 | 2018-04-24 22:13:10 | 2018-04-24 22:17:10 | 0x12447c0 |
| 0 |
C | gitlab | gitlabhq_production | active | 127.0.0.1 | 44594 | 127.0.0.1 | 6432 | 2018-04-24 22:13:10 | 2018-04-24 22:17:10 | 0x1244940 |
| 0 |
C | gitlab | gitlabhq_production | active | 127.0.0.1 | 44706 | 127.0.0.1 | 6432 | 2018-04-24 22:14:22 | 2018-04-24 22:16:31 | 0x1244ac0 |
| 0 |
C | gitlab | gitlabhq_production | active | 127.0.0.1 | 44708 | 127.0.0.1 | 6432 | 2018-04-24 22:14:22 | 2018-04-24 22:15:15 | 0x1244c40 |
| 0 |
C | gitlab | gitlabhq_production | active | 127.0.0.1 | 44794 | 127.0.0.1 | 6432 | 2018-04-24 22:15:15 | 2018-04-24 22:15:15 | 0x1244dc0 |
| 0 |
C | gitlab | gitlabhq_production | active | 127.0.0.1 | 44798 | 127.0.0.1 | 6432 | 2018-04-24 22:15:15 | 2018-04-24 22:16:31 | 0x1244f40 |
| 0 |
C | pgbouncer | pgbouncer | active | 127.0.0.1 | 44660 | 127.0.0.1 | 6432 | 2018-04-24 22:13:51 | 2018-04-24 22:17:12 | 0x1244640 |
| 0 |
(8 rows)
type | user | database | state | addr | port | local_addr | local_port | connect_time | request_time | ptr | link | rem
ote_pid | tls
------+--------+---------------------+-------+-----------+------+------------+------------+---------------------+---------------------+-----------+------+----
--------+-----
S | gitlab | gitlabhq_production | idle | 127.0.0.1 | 5432 | 127.0.0.1 | 35646 | 2018-04-24 22:15:15 | 2018-04-24 22:17:10 | 0x124dca0 | |
19980 |
(1 row)
トラブルシューティング
PgBouncerを通して接続する際に何らかの問題が発生した場合、最初に確認するのはログです:
# gitlab-ctl tail pgbouncer
さらに、管理コンソールでshow databases
の出力を確認できます。 出力では、gitlabhq_production
データベースのhost
フィールドに値が表示されるはずです。 さらに、current_connections
は 1 より大きいはずです。
メッセージLOG: invalid CIDR mask in address
Geoドキュメントの修正案を参照してください。
メッセージLOG: invalid IP mask "md5": Name or service not known
Geoドキュメントの修正案を参照してください。