]> git.openstreetmap.org Git - chef.git/blob - cookbooks/networking/recipes/default.rb
Use osmosis 0.47.4 for hourly and daily replication
[chef.git] / cookbooks / networking / recipes / default.rb
1 #
2 # Cookbook:: networking
3 # Recipe:: default
4 #
5 # Copyright:: 2010, OpenStreetMap Foundation.
6 # Copyright:: 2009, Opscode, Inc.
7 #
8 # Licensed under the Apache License, Version 2.0 (the "License");
9 # you may not use this file except in compliance with the License.
10 # You may obtain a copy of the License at
11 #
12 #     https://www.apache.org/licenses/LICENSE-2.0
13 #
14 # Unless required by applicable law or agreed to in writing, software
15 # distributed under the License is distributed on an "AS IS" BASIS,
16 # WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
17 # See the License for the specific language governing permissions and
18 # limitations under the License.
19 #
20 # = Requires
21 # * node[:networking][:nameservers]
22
23 require "ipaddr"
24 require "yaml"
25
26 package "netplan.io"
27
28 netplan = {
29   "network" => {
30     "version" => 2,
31     "renderer" => "networkd",
32     "ethernets" => {},
33     "bonds" => {},
34     "vlans" => {}
35   }
36 }
37
38 node[:networking][:interfaces].each do |name, interface|
39   if interface[:interface]
40     if interface[:role] && (role = node[:networking][:roles][interface[:role]])
41       if role[interface[:family]]
42         node.normal[:networking][:interfaces][name][:prefix] = role[interface[:family]][:prefix]
43         node.normal[:networking][:interfaces][name][:gateway] = role[interface[:family]][:gateway]
44         node.normal[:networking][:interfaces][name][:routes] = role[interface[:family]][:routes]
45       end
46
47       node.normal[:networking][:interfaces][name][:metric] = role[:metric]
48       node.normal[:networking][:interfaces][name][:zone] = role[:zone]
49     end
50
51     prefix = node[:networking][:interfaces][name][:prefix]
52
53     node.normal[:networking][:interfaces][name][:netmask] = (~IPAddr.new(interface[:address]).mask(0)).mask(prefix)
54     node.normal[:networking][:interfaces][name][:network] = IPAddr.new(interface[:address]).mask(prefix)
55
56     interface = node[:networking][:interfaces][name]
57
58     deviceplan = if interface[:interface] =~ /^(.*)\.(\d+)$/
59                    netplan["network"]["vlans"][interface[:interface]] ||= {
60                      "id" => Regexp.last_match(2).to_i,
61                      "link" => Regexp.last_match(1),
62                      "accept-ra" => false,
63                      "addresses" => [],
64                      "routes" => []
65                    }
66                  elsif interface[:interface] =~ /^bond\d+$/
67                    netplan["network"]["bonds"][interface[:interface]] ||= {
68                      "accept-ra" => false,
69                      "addresses" => [],
70                      "routes" => []
71                    }
72                  else
73                    netplan["network"]["ethernets"][interface[:interface]] ||= {
74                      "accept-ra" => false,
75                      "addresses" => [],
76                      "routes" => []
77                    }
78                  end
79
80     deviceplan["addresses"].push("#{interface[:address]}/#{prefix}")
81
82     if interface[:mtu]
83       deviceplan["mtu"] = interface[:mtu]
84     end
85
86     if interface[:bond]
87       deviceplan["interfaces"] = interface[:bond][:slaves].to_a
88
89       deviceplan["parameters"] = {
90         "mode" => interface[:bond][:mode] || "active-backup",
91         "primary" => interface[:bond][:slaves].first,
92         "mii-monitor-interval" => interface[:bond][:miimon] || 100,
93         "down-delay" => interface[:bond][:downdelay] || 200,
94         "up-delay" => interface[:bond][:updelay] || 200
95       }
96
97       deviceplan["parameters"]["transmit-hash-policy"] = interface[:bond][:xmithashpolicy] if interface[:bond][:xmithashpolicy]
98       deviceplan["parameters"]["lacp-rate"] = interface[:bond][:lacprate] if interface[:bond][:lacprate]
99     end
100
101     if interface[:gateway]
102       if interface[:family] == "inet"
103         default_route = "0.0.0.0/0"
104       elsif interface[:family] == "inet6"
105         default_route = "::/0"
106       end
107
108       deviceplan["routes"].push(
109         "to" => default_route,
110         "via" => interface[:gateway],
111         "metric" => interface[:metric],
112         "on-link" => true
113       )
114
115       # This ordering relies on systemd-networkd adding routes
116       # in reverse order and will need moving before the previous
117       # route once that is fixed:
118       #
119       # https://github.com/systemd/systemd/issues/5430
120       # https://github.com/systemd/systemd/pull/10938
121       if interface[:family] == "inet6" &&
122          !interface[:network].include?(interface[:gateway]) &&
123          !IPAddr.new("fe80::/64").include?(interface[:gateway])
124         deviceplan["routes"].push(
125           "to" => interface[:gateway],
126           "scope" => "link"
127         )
128       end
129     end
130
131     if interface[:routes]
132       interface[:routes].each do |to, parameters|
133         route = {
134           "to" => to
135         }
136
137         route["type"] = parameters[:type] if parameters[:type]
138         route["via"] = parameters[:via] if parameters[:via]
139         route["metric"] = parameters[:metric] if parameters[:metric]
140
141         deviceplan["routes"].push(route)
142       end
143     end
144   else
145     node.rm(:networking, :interfaces, name)
146   end
147 end
148
149 netplan["network"]["bonds"].each_value do |bond|
150   bond["interfaces"].each do |interface|
151     netplan["network"]["ethernets"][interface] ||= { "accept-ra" => false }
152   end
153 end
154
155 netplan["network"]["vlans"].each_value do |vlan|
156   unless vlan["link"] =~ /^bond\d+$/
157     netplan["network"]["ethernets"][vlan["link"]] ||= { "accept-ra" => false }
158   end
159 end
160
161 file "/etc/netplan/01-netcfg.yaml" do
162   action :delete
163 end
164
165 file "/etc/netplan/50-cloud-init.yaml" do
166   action :delete
167 end
168
169 file "/etc/netplan/99-chef.yaml" do
170   owner "root"
171   group "root"
172   mode 0o644
173   content YAML.dump(netplan)
174 end
175
176 package "cloud-init" do
177   action :purge
178 end
179
180 execute "hostname" do
181   action :nothing
182   command "/bin/hostname -F /etc/hostname"
183 end
184
185 template "/etc/hostname" do
186   source "hostname.erb"
187   owner "root"
188   group "root"
189   mode 0o644
190   notifies :run, "execute[hostname]"
191 end
192
193 template "/etc/hosts" do
194   source "hosts.erb"
195   owner "root"
196   group "root"
197   mode 0o644
198   not_if { ENV["TEST_KITCHEN"] }
199 end
200
201 service "systemd-resolved" do
202   action [:enable, :start]
203 end
204
205 directory "/etc/systemd/resolved.conf.d" do
206   owner "root"
207   group "root"
208   mode 0o755
209 end
210
211 template "/etc/systemd/resolved.conf.d/99-chef.conf" do
212   source "resolved.conf.erb"
213   owner "root"
214   group "root"
215   mode 0o644
216   notifies :restart, "service[systemd-resolved]", :immediately
217 end
218
219 if node[:filesystem][:by_mountpoint][:"/etc/resolv.conf"]
220   mount "/etc/resolv.conf" do
221     action :umount
222     device node[:filesystem][:by_mountpoint][:"/etc/resolv.conf"][:devices].first
223   end
224 end
225
226 link "/etc/resolv.conf" do
227   to "../run/systemd/resolve/stub-resolv.conf"
228 end
229
230 if node[:networking][:tcp_fastopen_key]
231   fastopen_keys = data_bag_item("networking", "fastopen")
232
233   node.normal[:sysctl][:tcp_fastopen] = {
234     :comment => "Set shared key for TCP fast open",
235     :parameters => {
236       "net.ipv4.tcp_fastopen_key" => fastopen_keys[node[:networking][:tcp_fastopen_key]]
237     }
238   }
239 end
240
241 node.interfaces(:role => :internal) do |interface|
242   if interface[:gateway] && interface[:gateway] != interface[:address]
243     search(:node, "networking_interfaces*address:#{interface[:gateway]}") do |gateway|
244       next unless gateway[:openvpn]
245
246       gateway[:openvpn][:tunnels].each_value do |tunnel|
247         if tunnel[:peer][:address]
248           route tunnel[:peer][:address] do
249             netmask "255.255.255.255"
250             gateway interface[:gateway]
251             device interface[:interface]
252           end
253         end
254
255         next unless tunnel[:peer][:networks]
256
257         tunnel[:peer][:networks].each do |network|
258           route network[:address] do
259             netmask network[:netmask]
260             gateway interface[:gateway]
261             device interface[:interface]
262           end
263         end
264       end
265     end
266   end
267 end
268
269 zones = {}
270
271 search(:node, "networking:interfaces").collect do |n|
272   next if n[:fqdn] == node[:fqdn]
273
274   n.interfaces.each do |interface|
275     next unless interface[:role] == "external" && interface[:zone]
276
277     zones[interface[:zone]] ||= {}
278     zones[interface[:zone]][interface[:family]] ||= []
279     zones[interface[:zone]][interface[:family]] << interface[:address]
280   end
281 end
282
283 package "shorewall"
284
285 template "/etc/default/shorewall" do
286   source "shorewall-default.erb"
287   owner "root"
288   group "root"
289   mode 0o644
290   notifies :restart, "service[shorewall]"
291 end
292
293 template "/etc/shorewall/shorewall.conf" do
294   source "shorewall.conf.erb"
295   owner "root"
296   group "root"
297   mode 0o644
298   notifies :restart, "service[shorewall]"
299 end
300
301 template "/etc/shorewall/zones" do
302   source "shorewall-zones.erb"
303   owner "root"
304   group "root"
305   mode 0o644
306   variables :type => "ipv4"
307   notifies :restart, "service[shorewall]"
308 end
309
310 template "/etc/shorewall/interfaces" do
311   source "shorewall-interfaces.erb"
312   owner "root"
313   group "root"
314   mode 0o644
315   notifies :restart, "service[shorewall]"
316 end
317
318 template "/etc/shorewall/hosts" do
319   source "shorewall-hosts.erb"
320   owner "root"
321   group "root"
322   mode 0o644
323   variables :zones => zones
324   notifies :restart, "service[shorewall]"
325 end
326
327 template "/etc/shorewall/conntrack" do
328   source "shorewall-conntrack.erb"
329   owner "root"
330   group "root"
331   mode 0o644
332   notifies :restart, "service[shorewall]"
333   only_if { node[:networking][:firewall][:raw] }
334 end
335
336 template "/etc/shorewall/policy" do
337   source "shorewall-policy.erb"
338   owner "root"
339   group "root"
340   mode 0o644
341   notifies :restart, "service[shorewall]"
342 end
343
344 template "/etc/shorewall/rules" do
345   source "shorewall-rules.erb"
346   owner "root"
347   group "root"
348   mode 0o644
349   variables :family => "inet"
350   notifies :restart, "service[shorewall]"
351 end
352
353 service "shorewall" do
354   action [:enable, :start]
355   supports :restart => true
356   status_command "shorewall status"
357 end
358
359 template "/etc/logrotate.d/shorewall" do
360   source "logrotate.shorewall.erb"
361   owner "root"
362   group "root"
363   mode 0o644
364   variables :name => "shorewall"
365 end
366
367 firewall_rule "limit-icmp-echo" do
368   action :accept
369   family :inet
370   source "net"
371   dest "fw"
372   proto "icmp"
373   dest_ports "echo-request"
374   rate_limit "s:1/sec:5"
375 end
376
377 %w[ucl ams bm].each do |zone|
378   firewall_rule "accept-openvpn-#{zone}" do
379     action :accept
380     source zone
381     dest "fw"
382     proto "udp"
383     dest_ports "1194:1197"
384     source_ports "1194:1197"
385   end
386 end
387
388 if node[:roles].include?("gateway")
389   template "/etc/shorewall/masq" do
390     source "shorewall-masq.erb"
391     owner "root"
392     group "root"
393     mode 0o644
394     notifies :restart, "service[shorewall]"
395   end
396 else
397   file "/etc/shorewall/masq" do
398     action :delete
399     notifies :restart, "service[shorewall]"
400   end
401 end
402
403 unless node.interfaces(:family => :inet6).empty?
404   package "shorewall6"
405
406   template "/etc/default/shorewall6" do
407     source "shorewall-default.erb"
408     owner "root"
409     group "root"
410     mode 0o644
411     notifies :restart, "service[shorewall6]"
412   end
413
414   template "/etc/shorewall6/shorewall6.conf" do
415     source "shorewall6.conf.erb"
416     owner "root"
417     group "root"
418     mode 0o644
419     notifies :restart, "service[shorewall6]"
420   end
421
422   template "/etc/shorewall6/zones" do
423     source "shorewall-zones.erb"
424     owner "root"
425     group "root"
426     mode 0o644
427     variables :type => "ipv6"
428     notifies :restart, "service[shorewall6]"
429   end
430
431   template "/etc/shorewall6/interfaces" do
432     source "shorewall6-interfaces.erb"
433     owner "root"
434     group "root"
435     mode 0o644
436     notifies :restart, "service[shorewall6]"
437   end
438
439   template "/etc/shorewall6/hosts" do
440     source "shorewall6-hosts.erb"
441     owner "root"
442     group "root"
443     mode 0o644
444     variables :zones => zones
445     notifies :restart, "service[shorewall6]"
446   end
447
448   template "/etc/shorewall6/conntrack" do
449     source "shorewall-conntrack.erb"
450     owner "root"
451     group "root"
452     mode 0o644
453     notifies :restart, "service[shorewall6]"
454     only_if { node[:networking][:firewall][:raw] }
455   end
456
457   template "/etc/shorewall6/policy" do
458     source "shorewall-policy.erb"
459     owner "root"
460     group "root"
461     mode 0o644
462     notifies :restart, "service[shorewall6]"
463   end
464
465   template "/etc/shorewall6/rules" do
466     source "shorewall-rules.erb"
467     owner "root"
468     group "root"
469     mode 0o644
470     variables :family => "inet6"
471     notifies :restart, "service[shorewall6]"
472   end
473
474   service "shorewall6" do
475     action [:enable, :start]
476     supports :restart => true
477     status_command "shorewall6 status"
478   end
479
480   template "/etc/logrotate.d/shorewall6" do
481     source "logrotate.shorewall.erb"
482     owner "root"
483     group "root"
484     mode 0o644
485     variables :name => "shorewall6"
486   end
487
488   firewall_rule "limit-icmp6-echo" do
489     action :accept
490     family :inet6
491     source "net"
492     dest "fw"
493     proto "ipv6-icmp"
494     dest_ports "echo-request"
495     rate_limit "s:1/sec:5"
496   end
497 end
498
499 firewall_rule "accept-http" do
500   action :accept
501   source "net"
502   dest "fw"
503   proto "tcp:syn"
504   dest_ports "http"
505   rate_limit node[:networking][:firewall][:http_rate_limit]
506   connection_limit node[:networking][:firewall][:http_connection_limit]
507 end
508
509 firewall_rule "accept-https" do
510   action :accept
511   source "net"
512   dest "fw"
513   proto "tcp:syn"
514   dest_ports "https"
515   rate_limit node[:networking][:firewall][:http_rate_limit]
516   connection_limit node[:networking][:firewall][:http_connection_limit]
517 end