]> git.openstreetmap.org Git - chef.git/blob - cookbooks/postgresql/recipes/default.rb
Enable some addition postgres collectors
[chef.git] / cookbooks / postgresql / recipes / default.rb
1 #
2 # Cookbook:: postgresql
3 # Recipe:: default
4 #
5 # Copyright:: 2012, OpenStreetMap Foundation
6 #
7 # Licensed under the Apache License, Version 2.0 (the "License");
8 # you may not use this file except in compliance with the License.
9 # You may obtain a copy of the License at
10 #
11 #     https://www.apache.org/licenses/LICENSE-2.0
12 #
13 # Unless required by applicable law or agreed to in writing, software
14 # distributed under the License is distributed on an "AS IS" BASIS,
15 # WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
16 # See the License for the specific language governing permissions and
17 # limitations under the License.
18 #
19
20 include_recipe "apt::postgresql"
21 include_recipe "munin"
22 include_recipe "prometheus"
23
24 package "locales-all"
25 package "postgresql-common"
26
27 node[:postgresql][:versions].each do |version|
28   package "postgresql-#{version}"
29   package "postgresql-client-#{version}"
30   package "postgresql-contrib-#{version}"
31   package "postgresql-server-dev-#{version}"
32
33   defaults = node[:postgresql][:settings][:defaults] || {}
34   settings = node[:postgresql][:settings][version] || {}
35
36   standby_mode = settings[:standby_mode] || defaults[:standby_mode]
37   primary_conninfo = settings[:primary_conninfo] || defaults[:primary_conninfo]
38
39   passwords = if primary_conninfo
40                 data_bag_item(primary_conninfo[:passwords][:bag],
41                               primary_conninfo[:passwords][:item])
42               end
43
44   template "/etc/postgresql/#{version}/main/postgresql.conf" do
45     source "postgresql.conf.erb"
46     owner "postgres"
47     group "postgres"
48     mode "644"
49     variables :version => version,
50               :defaults => defaults,
51               :settings => settings,
52               :primary_conninfo => primary_conninfo,
53               :passwords => passwords
54     notifies :reload, "service[postgresql]"
55     only_if { ::Dir.exist?("/etc/postgresql/#{version}/main") }
56   end
57
58   template "/etc/postgresql/#{version}/main/pg_hba.conf" do
59     source "pg_hba.conf.erb"
60     owner "postgres"
61     group "postgres"
62     mode "640"
63     variables :early_rules => settings[:early_authentication_rules] || defaults[:early_authentication_rules],
64               :late_rules => settings[:late_authentication_rules] || defaults[:late_authentication_rules]
65     notifies :reload, "service[postgresql]"
66     only_if { ::Dir.exist?("/etc/postgresql/#{version}/main") }
67   end
68
69   template "/etc/postgresql/#{version}/main/pg_ident.conf" do
70     source "pg_ident.conf.erb"
71     owner "postgres"
72     group "postgres"
73     mode "640"
74     variables :maps => settings[:user_name_maps] || defaults[:user_name_maps]
75     notifies :reload, "service[postgresql]"
76     only_if { ::Dir.exist?("/etc/postgresql/#{version}/main") }
77   end
78
79   link "/var/lib/postgresql/#{version}/main/server.crt" do
80     to "/etc/ssl/certs/ssl-cert-snakeoil.pem"
81     only_if { ::Dir.exist?("/var/lib/postgresql/#{version}/main") }
82   end
83
84   link "/var/lib/postgresql/#{version}/main/server.key" do
85     to "/etc/ssl/private/ssl-cert-snakeoil.key"
86     only_if { ::Dir.exist?("/var/lib/postgresql/#{version}/main") }
87   end
88
89   if standby_mode == "on"
90     file "/var/lib/postgresql/#{version}/main/standby.signal" do
91       owner "postgres"
92       group "postgres"
93       mode "640"
94     end
95   else
96     file "/var/lib/postgresql/#{version}/main/standby.signal" do
97       action :delete
98     end
99   end
100 end
101
102 service "postgresql" do
103   action [:enable, :start]
104   supports :status => true, :restart => true, :reload => true
105 end
106
107 ohai_plugin "postgresql" do
108   template "ohai.rb.erb"
109 end
110
111 file "/etc/prometheus/exporters/postgres_queries.yml" do
112   action :delete
113 end
114
115 package "pgtop"
116 package "libdbd-pg-perl"
117
118 clusters = node[:postgresql][:clusters] || []
119
120 clusters.each do |name, details|
121   prometheus_suffix = name.tr("/", "-")
122   prometheus_database = node[:postgresql][:monitor_database]
123
124   prometheus_exporter "postgres" do
125     port 10000 + details[:port].to_i
126     service "postgres-#{prometheus_suffix}"
127     labels "cluster" => name
128     scrape_interval "1m"
129     scrape_timeout "1m"
130     user "postgres"
131     options %w[
132       --collector.database_wraparound
133       --collector.long_running_transactions
134       --collector.process_idle
135       --collector.stat_activity_autovacuum
136       --collector.stat_wal_receiver
137       --collector.statio_user_indexes
138     ]
139     environment "DATA_SOURCE_NAME" => "postgres:///#{prometheus_database}?host=/run/postgresql&port=#{details[:port]}"
140     restrict_address_families "AF_UNIX"
141     remove_ipc false
142     subscribes :restart, "template[/etc/prometheus/exporters/postgres_queries.yml]"
143   end
144
145   munin_suffix = name.tr("/", ":")
146
147   munin_plugin "postgres_bgwriter_#{munin_suffix}" do
148     target "postgres_bgwriter"
149     conf "munin.erb"
150     conf_variables :port => details[:port]
151   end
152
153   munin_plugin "postgres_checkpoints_#{munin_suffix}" do
154     target "postgres_checkpoints"
155     conf "munin.erb"
156     conf_variables :port => details[:port]
157   end
158
159   munin_plugin "postgres_connections_db_#{munin_suffix}" do
160     target "postgres_connections_db"
161     conf "munin.erb"
162     conf_variables :port => details[:port]
163   end
164
165   munin_plugin "postgres_users_#{munin_suffix}" do
166     target "postgres_users"
167     conf "munin.erb"
168     conf_variables :port => details[:port]
169   end
170
171   munin_plugin "postgres_xlog_#{munin_suffix}" do
172     target "postgres_xlog"
173     conf "munin.erb"
174     conf_variables :port => details[:port]
175   end
176
177   next unless File.exist?("/var/lib/postgresql/#{details[:version]}/main/recovery.conf")
178
179   munin_plugin "postgres_replication_#{munin_suffix}" do
180     target "postgres_replication"
181     conf "munin.erb"
182     conf_variables :port => details[:port]
183   end
184 end
185
186 service "prometheus-postgres-exporter" do
187   action [:stop, :disable]
188 end
189
190 systemd_service "prometheus-postgres-exporter" do
191   action :delete
192 end