]> git.openstreetmap.org Git - chef.git/blob - cookbooks/networking/recipes/default.rb
Estabish tunnels between shenron and gateway machines
[chef.git] / cookbooks / networking / recipes / default.rb
1 #
2 # Cookbook:: networking
3 # Recipe:: default
4 #
5 # Copyright:: 2010, OpenStreetMap Foundation.
6 # Copyright:: 2009, Opscode, Inc.
7 #
8 # Licensed under the Apache License, Version 2.0 (the "License");
9 # you may not use this file except in compliance with the License.
10 # You may obtain a copy of the License at
11 #
12 #     https://www.apache.org/licenses/LICENSE-2.0
13 #
14 # Unless required by applicable law or agreed to in writing, software
15 # distributed under the License is distributed on an "AS IS" BASIS,
16 # WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
17 # See the License for the specific language governing permissions and
18 # limitations under the License.
19 #
20 # = Requires
21 # * node[:networking][:nameservers]
22
23 require "ipaddr"
24 require "yaml"
25
26 keys = data_bag_item("networking", "keys")
27
28 package "netplan.io"
29
30 netplan = {
31   "network" => {
32     "version" => 2,
33     "renderer" => "networkd",
34     "ethernets" => {},
35     "bonds" => {},
36     "vlans" => {}
37   }
38 }
39
40 node[:networking][:interfaces].each do |name, interface|
41   if interface[:interface]
42     if interface[:role] && (role = node[:networking][:roles][interface[:role]])
43       if role[interface[:family]]
44         node.default[:networking][:interfaces][name][:prefix] = role[interface[:family]][:prefix]
45         node.default[:networking][:interfaces][name][:gateway] = role[interface[:family]][:gateway]
46         node.default[:networking][:interfaces][name][:routes] = role[interface[:family]][:routes]
47       end
48
49       node.default[:networking][:interfaces][name][:metric] = role[:metric]
50       node.default[:networking][:interfaces][name][:zone] = role[:zone]
51     end
52
53     if interface[:address]
54       prefix = node[:networking][:interfaces][name][:prefix]
55
56       node.default[:networking][:interfaces][name][:netmask] = (~IPAddr.new(interface[:address]).mask(0)).mask(prefix)
57       node.default[:networking][:interfaces][name][:network] = IPAddr.new(interface[:address]).mask(prefix)
58     end
59
60     interface = node[:networking][:interfaces][name]
61
62     deviceplan = if interface[:interface] =~ /^(.*)\.(\d+)$/
63                    netplan["network"]["vlans"][interface[:interface]] ||= {
64                      "id" => Regexp.last_match(2).to_i,
65                      "link" => Regexp.last_match(1),
66                      "accept-ra" => false,
67                      "addresses" => [],
68                      "routes" => []
69                    }
70                  elsif interface[:interface] =~ /^bond\d+$/
71                    netplan["network"]["bonds"][interface[:interface]] ||= {
72                      "accept-ra" => false,
73                      "addresses" => [],
74                      "routes" => []
75                    }
76                  else
77                    netplan["network"]["ethernets"][interface[:interface]] ||= {
78                      "accept-ra" => false,
79                      "addresses" => [],
80                      "routes" => []
81                    }
82                  end
83
84     if interface[:address]
85       deviceplan["addresses"].push("#{interface[:address]}/#{prefix}")
86     end
87
88     if interface[:mtu]
89       deviceplan["mtu"] = interface[:mtu]
90     end
91
92     if interface[:bond]
93       deviceplan["interfaces"] = interface[:bond][:slaves].to_a
94
95       deviceplan["parameters"] = {
96         "mode" => interface[:bond][:mode] || "active-backup",
97         "primary" => interface[:bond][:slaves].first,
98         "mii-monitor-interval" => interface[:bond][:miimon] || 100,
99         "down-delay" => interface[:bond][:downdelay] || 200,
100         "up-delay" => interface[:bond][:updelay] || 200
101       }
102
103       deviceplan["parameters"]["transmit-hash-policy"] = interface[:bond][:xmithashpolicy] if interface[:bond][:xmithashpolicy]
104       deviceplan["parameters"]["lacp-rate"] = interface[:bond][:lacprate] if interface[:bond][:lacprate]
105     end
106
107     if interface[:gateway]
108       if interface[:family] == "inet"
109         default_route = "0.0.0.0/0"
110       elsif interface[:family] == "inet6"
111         default_route = "::/0"
112       end
113
114       deviceplan["routes"].push(
115         "to" => default_route,
116         "via" => interface[:gateway],
117         "metric" => interface[:metric],
118         "on-link" => true
119       )
120
121       # This ordering relies on systemd-networkd adding routes
122       # in reverse order and will need moving before the previous
123       # route once that is fixed:
124       #
125       # https://github.com/systemd/systemd/issues/5430
126       # https://github.com/systemd/systemd/pull/10938
127       if interface[:family] == "inet6" &&
128          !interface[:network].include?(interface[:gateway]) &&
129          !IPAddr.new("fe80::/64").include?(interface[:gateway])
130         deviceplan["routes"].push(
131           "to" => interface[:gateway],
132           "scope" => "link"
133         )
134       end
135     end
136
137     if interface[:routes]
138       interface[:routes].each do |to, parameters|
139         next if parameters[:via] == interface[:address]
140
141         route = {
142           "to" => to
143         }
144
145         route["type"] = parameters[:type] if parameters[:type]
146         route["via"] = parameters[:via] if parameters[:via]
147         route["metric"] = parameters[:metric] if parameters[:metric]
148
149         deviceplan["routes"].push(route)
150       end
151     end
152   else
153     node.rm(:networking, :interfaces, name)
154   end
155 end
156
157 netplan["network"]["bonds"].each_value do |bond|
158   bond["interfaces"].each do |interface|
159     netplan["network"]["ethernets"][interface] ||= { "accept-ra" => false }
160   end
161 end
162
163 netplan["network"]["vlans"].each_value do |vlan|
164   unless vlan["link"] =~ /^bond\d+$/
165     netplan["network"]["ethernets"][vlan["link"]] ||= { "accept-ra" => false }
166   end
167 end
168
169 file "/etc/netplan/01-netcfg.yaml" do
170   action :delete
171 end
172
173 file "/etc/netplan/50-cloud-init.yaml" do
174   action :delete
175 end
176
177 file "/etc/netplan/99-chef.yaml" do
178   owner "root"
179   group "root"
180   mode "644"
181   content YAML.dump(netplan)
182 end
183
184 package "cloud-init" do
185   action :purge
186 end
187
188 if node[:networking][:wireguard][:enabled]
189   wireguard_id = persistent_token("networking", "wireguard")
190
191   node.default[:networking][:wireguard][:address] = "fd43:e709:ea6d:1:#{wireguard_id[0, 4]}:#{wireguard_id[4, 4]}:#{wireguard_id[8, 4]}:#{wireguard_id[12, 4]}"
192
193   package "wireguard-tools" do
194     compile_time true
195   end
196
197   directory "/var/lib/systemd/wireguard" do
198     owner "root"
199     group "systemd-network"
200     mode "750"
201     compile_time true
202   end
203
204   file "/var/lib/systemd/wireguard/private.key" do
205     action :create_if_missing
206     owner "root"
207     group "systemd-network"
208     mode "640"
209     content %x(wg genkey)
210     compile_time true
211   end
212
213   node.default[:networking][:wireguard][:public_key] = %x(wg pubkey < /var/lib/systemd/wireguard/private.key).chomp
214
215   file "/var/lib/systemd/wireguard/preshared.key" do
216     action :create_if_missing
217     owner "root"
218     group "systemd-network"
219     mode "640"
220     content keys["wireguard"]
221   end
222
223   if node[:roles].include?("gateway")
224     search(:node, "roles:gateway") do |gateway|
225       next if gateway.name == node.name
226       next unless gateway[:networking][:wireguard] && gateway[:networking][:wireguard][:enabled]
227
228       allowed_ips = gateway.interfaces(:role => :internal).map do |interface|
229         "#{interface[:network]}/#{interface[:prefix]}"
230       end
231
232       node.default[:networking][:wireguard][:peers] << {
233         :public_key => gateway[:networking][:wireguard][:public_key],
234         :allowed_ips => allowed_ips,
235         :endpoint => "#{gateway.name}:51820"
236       }
237     end
238
239     search(:node, "roles:mail") do |server|
240       allowed_ips = server.interfaces(:role => :internal).map do |interface|
241         "#{interface[:network]}/#{interface[:prefix]}"
242       end
243
244       if server[:networking][:private_address]
245         allowed_ips << "#{server[:networking][:private_address]}/32"
246       end
247
248       node.default[:networking][:wireguard][:peers] << {
249         :public_key => server[:networking][:wireguard][:public_key],
250         :allowed_ips => allowed_ips,
251         :endpoint => "#{server.name}:51820"
252       }
253     end
254
255     node.default[:networking][:wireguard][:peers] << {
256       :public_key => "7Oj9ufNlgidyH/xDc+aHQKMjJPqTmD/ab13agMh6AxA=",
257       :allowed_ips => "10.0.16.1/32",
258       :endpoint => "gate.compton.nu:51820"
259     }
260   end
261
262   template "/etc/systemd/network/wireguard.netdev" do
263     source "wireguard.netdev.erb"
264     owner "root"
265     group "systemd-network"
266     mode "640"
267   end
268
269   template "/etc/systemd/network/wireguard.network" do
270     source "wireguard.network.erb"
271     owner "root"
272     group "root"
273     mode "644"
274   end
275
276   if node[:lsb][:release].to_f < 20.04
277     execute "ip-link-delete-wg0" do
278       action :nothing
279       command "ip link delete wg0"
280       subscribes :run, "template[/etc/systemd/network/wireguard.netdev]"
281       only_if { ::File.exist?("/sys/class/net/wg0") }
282     end
283
284     service "systemd-networkd" do
285       action :nothing
286       subscribes :restart, "template[/etc/systemd/network/wireguard.netdev]"
287       subscribes :restart, "template[/etc/systemd/network/wireguard.network]"
288       not_if { ENV.key?("TEST_KITCHEN") }
289     end
290   else
291     execute "networkctl-delete-wg0" do
292       action :nothing
293       command "networkctl delete wg0"
294       subscribes :run, "template[/etc/systemd/network/wireguard.netdev]"
295       only_if { ::File.exist?("/sys/class/net/wg0") }
296     end
297
298     execute "networkctl-reload" do
299       action :nothing
300       command "networkctl reload"
301       subscribes :run, "template[/etc/systemd/network/wireguard.netdev]"
302       subscribes :run, "template[/etc/systemd/network/wireguard.network]"
303       not_if { ENV.key?("TEST_KITCHEN") }
304     end
305   end
306 end
307
308 ohai "reload-hostname" do
309   action :nothing
310   plugin "hostname"
311 end
312
313 execute "hostnamectl-set-hostname" do
314   command "hostnamectl set-hostname #{node[:networking][:hostname]}"
315   notifies :reload, "ohai[reload-hostname]"
316   not_if { ENV.key?("TEST_KITCHEN") || node[:hostnamectl][:static_hostname] == node[:networking][:hostname] }
317 end
318
319 template "/etc/hosts" do
320   source "hosts.erb"
321   owner "root"
322   group "root"
323   mode "644"
324   not_if { ENV["TEST_KITCHEN"] }
325 end
326
327 service "systemd-resolved" do
328   action [:enable, :start]
329 end
330
331 directory "/etc/systemd/resolved.conf.d" do
332   owner "root"
333   group "root"
334   mode "755"
335 end
336
337 template "/etc/systemd/resolved.conf.d/99-chef.conf" do
338   source "resolved.conf.erb"
339   owner "root"
340   group "root"
341   mode "644"
342   notifies :restart, "service[systemd-resolved]", :immediately
343 end
344
345 if node[:filesystem][:by_mountpoint][:"/etc/resolv.conf"]
346   mount "/etc/resolv.conf" do
347     action :umount
348     device node[:filesystem][:by_mountpoint][:"/etc/resolv.conf"][:devices].first
349   end
350 end
351
352 link "/etc/resolv.conf" do
353   to "../run/systemd/resolve/stub-resolv.conf"
354 end
355
356 zones = {}
357
358 search(:node, "networking:interfaces").collect do |n|
359   next if n[:fqdn] == node[:fqdn]
360
361   n.interfaces.each do |interface|
362     next unless interface[:role] == "external" && interface[:zone]
363
364     zones[interface[:zone]] ||= {}
365     zones[interface[:zone]][interface[:family]] ||= []
366     zones[interface[:zone]][interface[:family]] << interface[:address]
367   end
368 end
369
370 package "shorewall"
371
372 template "/etc/default/shorewall" do
373   source "shorewall-default.erb"
374   owner "root"
375   group "root"
376   mode "644"
377   notifies :restart, "service[shorewall]"
378 end
379
380 template "/etc/shorewall/shorewall.conf" do
381   source "shorewall.conf.erb"
382   owner "root"
383   group "root"
384   mode "644"
385   notifies :restart, "service[shorewall]"
386 end
387
388 template "/etc/shorewall/zones" do
389   source "shorewall-zones.erb"
390   owner "root"
391   group "root"
392   mode "644"
393   variables :type => "ipv4"
394   notifies :restart, "service[shorewall]"
395 end
396
397 template "/etc/shorewall/interfaces" do
398   source "shorewall-interfaces.erb"
399   owner "root"
400   group "root"
401   mode "644"
402   notifies :restart, "service[shorewall]"
403 end
404
405 template "/etc/shorewall/hosts" do
406   source "shorewall-hosts.erb"
407   owner "root"
408   group "root"
409   mode "644"
410   variables :zones => zones
411   notifies :restart, "service[shorewall]"
412 end
413
414 template "/etc/shorewall/conntrack" do
415   source "shorewall-conntrack.erb"
416   owner "root"
417   group "root"
418   mode "644"
419   notifies :restart, "service[shorewall]"
420   only_if { node[:networking][:firewall][:raw] }
421 end
422
423 template "/etc/shorewall/policy" do
424   source "shorewall-policy.erb"
425   owner "root"
426   group "root"
427   mode "644"
428   notifies :restart, "service[shorewall]"
429 end
430
431 template "/etc/shorewall/rules" do
432   action :nothing
433   source "shorewall-rules.erb"
434   owner "root"
435   group "root"
436   mode "644"
437   variables :family => "inet"
438   notifies :restart, "service[shorewall]"
439 end
440
441 notify_group "shorewall-rules" do
442   action :run
443   notifies :create, "template[/etc/shorewall/rules]"
444 end
445
446 if node[:networking][:firewall][:enabled]
447   service "shorewall" do
448     action [:enable, :start]
449     supports :restart => true
450     status_command "shorewall status"
451   end
452 else
453   service "shorewall" do
454     action [:disable, :stop]
455     supports :restart => true
456     status_command "shorewall status"
457   end
458 end
459
460 template "/etc/logrotate.d/shorewall" do
461   source "logrotate.shorewall.erb"
462   owner "root"
463   group "root"
464   mode "644"
465   variables :name => "shorewall"
466 end
467
468 firewall_rule "limit-icmp-echo" do
469   action :accept
470   family :inet
471   source "net"
472   dest "fw"
473   proto "icmp"
474   dest_ports "echo-request"
475   rate_limit "s:1/sec:5"
476 end
477
478 if node[:networking][:wireguard][:enabled]
479   wireguard_source = if node[:roles].include?("gateway")
480                        "net"
481                      else
482                        "osm"
483                      end
484
485   firewall_rule "accept-wireguard" do
486     action :accept
487     source wireguard_source
488     dest "fw"
489     proto "udp"
490     dest_ports "51820"
491     source_ports "51820"
492   end
493 end
494
495 if node[:roles].include?("gateway")
496   template "/etc/shorewall/masq" do
497     source "shorewall-masq.erb"
498     owner "root"
499     group "root"
500     mode "644"
501     notifies :restart, "service[shorewall]"
502   end
503 else
504   file "/etc/shorewall/masq" do
505     action :delete
506     notifies :restart, "service[shorewall]"
507   end
508 end
509
510 unless node.interfaces(:family => :inet6).empty?
511   package "shorewall6"
512
513   template "/etc/default/shorewall6" do
514     source "shorewall-default.erb"
515     owner "root"
516     group "root"
517     mode "644"
518     notifies :restart, "service[shorewall6]"
519   end
520
521   template "/etc/shorewall6/shorewall6.conf" do
522     source "shorewall6.conf.erb"
523     owner "root"
524     group "root"
525     mode "644"
526     notifies :restart, "service[shorewall6]"
527   end
528
529   template "/etc/shorewall6/zones" do
530     source "shorewall-zones.erb"
531     owner "root"
532     group "root"
533     mode "644"
534     variables :type => "ipv6"
535     notifies :restart, "service[shorewall6]"
536   end
537
538   template "/etc/shorewall6/interfaces" do
539     source "shorewall6-interfaces.erb"
540     owner "root"
541     group "root"
542     mode "644"
543     notifies :restart, "service[shorewall6]"
544   end
545
546   template "/etc/shorewall6/hosts" do
547     source "shorewall6-hosts.erb"
548     owner "root"
549     group "root"
550     mode "644"
551     variables :zones => zones
552     notifies :restart, "service[shorewall6]"
553   end
554
555   template "/etc/shorewall6/conntrack" do
556     source "shorewall-conntrack.erb"
557     owner "root"
558     group "root"
559     mode "644"
560     notifies :restart, "service[shorewall6]"
561     only_if { node[:networking][:firewall][:raw] }
562   end
563
564   template "/etc/shorewall6/policy" do
565     source "shorewall-policy.erb"
566     owner "root"
567     group "root"
568     mode "644"
569     notifies :restart, "service[shorewall6]"
570   end
571
572   template "/etc/shorewall6/rules" do
573     action :nothing
574     source "shorewall-rules.erb"
575     owner "root"
576     group "root"
577     mode "644"
578     variables :family => "inet6"
579     notifies :restart, "service[shorewall6]"
580   end
581
582   notify_group "shorewall6-rules" do
583     action :run
584     notifies :create, "template[/etc/shorewall6/rules]"
585   end
586
587   if node[:networking][:firewall][:enabled]
588     service "shorewall6" do
589       action [:enable, :start]
590       supports :restart => true
591       status_command "shorewall6 status"
592     end
593   else
594     service "shorewall6" do
595       action [:disable, :stop]
596       supports :restart => true
597       status_command "shorewall6 status"
598     end
599   end
600
601   template "/etc/logrotate.d/shorewall6" do
602     source "logrotate.shorewall.erb"
603     owner "root"
604     group "root"
605     mode "644"
606     variables :name => "shorewall6"
607   end
608
609   firewall_rule "limit-icmp6-echo" do
610     action :accept
611     family :inet6
612     source "net"
613     dest "fw"
614     proto "ipv6-icmp"
615     dest_ports "echo-request"
616     rate_limit "s:1/sec:5"
617   end
618 end
619
620 firewall_rule "accept-http" do
621   action :accept
622   source "net"
623   dest "fw"
624   proto "tcp:syn"
625   dest_ports "http"
626   rate_limit node[:networking][:firewall][:http_rate_limit]
627   connection_limit node[:networking][:firewall][:http_connection_limit]
628 end
629
630 firewall_rule "accept-https" do
631   action :accept
632   source "net"
633   dest "fw"
634   proto "tcp:syn"
635   dest_ports "https"
636   rate_limit node[:networking][:firewall][:http_rate_limit]
637   connection_limit node[:networking][:firewall][:http_connection_limit]
638 end