cookbooks/community/recipes/default.rb

   1 #
   2 # Cookbook:: community
   3 # Recipe:: default
   4 #
   5 # Copyright:: 2021, OpenStreetMap Foundation
   6 #
   7 # Licensed under the Apache License, Version 2.0 (the "License");
   8 # you may not use this file except in compliance with the License.
   9 # You may obtain a copy of the License at
  10 #
  11 #     https://www.apache.org/licenses/LICENSE-2.0
  12 #
  13 # Unless required by applicable law or agreed to in writing, software
  14 # distributed under the License is distributed on an "AS IS" BASIS,
  15 # WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
  16 # See the License for the specific language governing permissions and
  17 # limitations under the License.
  18 #
  19
  20 include_recipe "accounts"
  21 include_recipe "docker"
  22 include_recipe "git"
  23 include_recipe "ssl"
  24
  25 passwords = data_bag_item("community", "passwords")
  26 license_keys = data_bag_item("geoipupdate", "license-keys") unless kitchen?
  27
  28 prometheus_servers = search(:node, "recipes:prometheus\\:\\:server").map do |server|
  29   server.ipaddresses(:role => :external)
  30 end.flatten
  31
  32 # Disable any default installed apache2 service. Web server is embedded within the discourse docker container
  33 service "apache2" do
  34   action [:disable, :stop]
  35 end
  36
  37 directory "/srv/community.openstreetmap.org" do
  38   owner "root"
  39   group "root"
  40   mode "755"
  41 end
  42
  43 directory "/srv/community.openstreetmap.org/shared" do
  44   owner "community"
  45   group "community"
  46   mode "755"
  47 end
  48
  49 directory "/srv/community.openstreetmap.org/files" do
  50   owner "community"
  51   group "community"
  52   mode "755"
  53 end
  54
  55 template "/srv/community.openstreetmap.org/files/update-feeds.atom" do
  56   source "update-feeds.atom.erb"
  57   owner "community"
  58   group "community"
  59   mode "644"
  60 end
  61
  62 git "/srv/community.openstreetmap.org/docker" do
  63   action :sync
  64   repository "https://github.com/discourse/discourse_docker.git"
  65   # DANGER launch wrapper automatically updates git repo if rebuild method used: https://github.com/discourse/discourse_docker/blob/107ffb40fe8b1ea40e00814468db974a4f3f8e8f/launcher#L799
  66   revision "b345430a822d6275573f3d82f1ad2e2b5fa1e0b1"
  67   depth 1
  68   user "root"
  69   group "root"
  70   notifies :run, "notify_group[discourse_container_new_data]"
  71   notifies :run, "notify_group[discourse_container_new_web_only]"
  72   notifies :run, "notify_group[discourse_container_new_mail_receiver]"
  73 end
  74
  75 template "/srv/community.openstreetmap.org/docker/containers/data.yml" do
  76   source "data.yml.erb"
  77   owner "root"
  78   group "root"
  79   mode "640"
  80   variables :passwords => passwords
  81   notifies :run, "notify_group[discourse_container_new_data]"
  82 end
  83
  84 resolvers = node[:networking][:nameservers].map do |resolver|
  85   resolver =~ /:/ ? "[#{resolver}]" : resolver
  86 end
  87
  88 template "/srv/community.openstreetmap.org/docker/containers/web_only.yml" do
  89   source "web_only.yml.erb"
  90   owner "root"
  91   group "root"
  92   mode "640"
  93   variables :license_keys => license_keys, :passwords => passwords,
  94             :prometheus_servers => prometheus_servers, :resolvers => resolvers
  95   notifies :run, "notify_group[discourse_container_new_web_only]"
  96 end
  97
  98 template "/srv/community.openstreetmap.org/files/policyd-spf.conf" do
  99   source "policyd-spf.conf.erb"
 100   owner "community"
 101   group "community"
 102   mode "644"
 103   notifies :run, "notify_group[discourse_container_new_mail_receiver]"
 104 end
 105
 106 template "/srv/community.openstreetmap.org/docker/containers/mail-receiver.yml" do
 107   source "mail-receiver.yml.erb"
 108   owner "root"
 109   group "root"
 110   mode "640"
 111   variables :passwords => passwords
 112   notifies :run, "notify_group[discourse_container_new_mail_receiver]"
 113 end
 114
 115 ssl_certificate "community.openstreetmap.org" do
 116   domains ["community.openstreetmap.org", "community.osm.org", "communities.openstreetmap.org", "communities.osm.org", "c.openstreetmap.org", "c.osm.org", "forum.openstreetmap.org", "forum.osm.org"]
 117   notifies :run, "notify_group[discourse_container_new_web_only]"
 118   notifies :run, "notify_group[discourse_container_new_mail_receiver]"
 119 end
 120
 121 notify_group "discourse_container_new_web_only" do
 122   notifies :run, "execute[discourse_container_data_start]", :immediately # noop if site up
 123   notifies :run, "execute[discourse_container_web_only_bootstrap]", :immediately # site up but runs in parallel. Slow
 124   notifies :run, "execute[discourse_container_web_only_destroy]", :immediately # site down
 125   notifies :run, "execute[discourse_container_data_destroy]", :immediately # site down
 126   notifies :run, "execute[discourse_container_data_bootstrap]", :immediately # site down
 127   notifies :run, "execute[discourse_container_data_start]", :immediately # site down
 128   notifies :run, "execute[discourse_container_web_only_start]", :immediately # site restore
 129 end
 130
 131 notify_group "discourse_container_new_data" do
 132   notifies :run, "execute[discourse_container_web_only_destroy]", :immediately # site down
 133   notifies :run, "execute[discourse_container_data_destroy]", :immediately # site down
 134   notifies :run, "execute[discourse_container_data_bootstrap]", :immediately # site down
 135   notifies :run, "execute[discourse_container_data_start]", :immediately # site down
 136   notifies :run, "execute[discourse_container_web_only_start]", :immediately # site restore
 137 end
 138
 139 notify_group "discourse_container_new_mail_receiver" do
 140   notifies :run, "execute[discourse_container_mail_receiver_destroy]", :immediately
 141   notifies :run, "execute[discourse_container_mail_receiver_bootstrap]", :immediately
 142   notifies :run, "execute[discourse_container_mail_receiver_start]", :immediately
 143 end
 144
 145 # Attempt at a failsafe to ensure all containers are running
 146 notify_group "discourse_container_ensure_all_running" do
 147   action :run
 148   notifies :run, "execute[discourse_container_data_start]", :delayed
 149   notifies :run, "execute[discourse_container_web_only_start]", :delayed
 150   notifies :run, "execute[discourse_container_mail_receiver_start]", :delayed
 151 end
 152
 153 execute "discourse_container_data_bootstrap" do
 154   action :nothing
 155   command "./launcher bootstrap data"
 156   cwd "/srv/community.openstreetmap.org/docker/"
 157   user "root"
 158   group "root"
 159 end
 160
 161 execute "discourse_container_data_destroy" do
 162   action :nothing
 163   command "./launcher destroy data"
 164   cwd "/srv/community.openstreetmap.org/docker/"
 165   user "root"
 166   group "root"
 167 end
 168
 169 execute "discourse_container_data_start" do
 170   action :nothing
 171   command "./launcher start data"
 172   cwd "/srv/community.openstreetmap.org/docker/"
 173   user "root"
 174   group "root"
 175 end
 176
 177 execute "discourse_container_web_only_bootstrap" do
 178   action :nothing
 179   command "./launcher bootstrap web_only"
 180   cwd "/srv/community.openstreetmap.org/docker/"
 181   user "root"
 182   group "root"
 183 end
 184
 185 execute "discourse_container_web_only_destroy" do
 186   action :nothing
 187   command "./launcher destroy web_only"
 188   cwd "/srv/community.openstreetmap.org/docker/"
 189   user "root"
 190   group "root"
 191 end
 192
 193 execute "discourse_container_web_only_start" do
 194   action :nothing
 195   command "./launcher start web_only"
 196   cwd "/srv/community.openstreetmap.org/docker/"
 197   user "root"
 198   group "root"
 199 end
 200
 201 execute "discourse_container_mail_receiver_bootstrap" do
 202   action :nothing
 203   command "./launcher bootstrap mail-receiver"
 204   cwd "/srv/community.openstreetmap.org/docker/"
 205   user "root"
 206   group "root"
 207 end
 208
 209 execute "discourse_container_mail_receiver_destroy" do
 210   action :nothing
 211   command "./launcher destroy mail-receiver"
 212   cwd "/srv/community.openstreetmap.org/docker/"
 213   user "root"
 214   group "root"
 215 end
 216
 217 execute "discourse_container_mail_receiver_start" do
 218   action :nothing
 219   command "./launcher start mail-receiver"
 220   cwd "/srv/community.openstreetmap.org/docker/"
 221   user "root"
 222   group "root"
 223 end
 224
 225 template "/etc/cron.daily/community-backup" do
 226   source "backup.cron.erb"
 227   owner "root"
 228   group "root"
 229   mode "750"
 230 end
 231
 232 node.default[:prometheus][:exporters][443] = {
 233   :name => "community",
 234   :address => "#{node[:prometheus][:address]}:443",
 235   :sni => "community.openstreetmap.org"
 236 }