cookbooks/dev/recipes/default.rb

   1 #
   2 # Cookbook Name:: dev
   3 # Recipe:: default
   4 #
   5 # Copyright 2011, OpenStreetMap Foundation
   6 #
   7 # Licensed under the Apache License, Version 2.0 (the "License");
   8 # you may not use this file except in compliance with the License.
   9 # You may obtain a copy of the License at
  10 #
  11 #     https://www.apache.org/licenses/LICENSE-2.0
  12 #
  13 # Unless required by applicable law or agreed to in writing, software
  14 # distributed under the License is distributed on an "AS IS" BASIS,
  15 # WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
  16 # See the License for the specific language governing permissions and
  17 # limitations under the License.
  18 #
  19
  20 require "yaml"
  21 require "securerandom"
  22
  23 include_recipe "apache"
  24 include_recipe "passenger"
  25 include_recipe "git"
  26 include_recipe "memcached"
  27 include_recipe "mysql"
  28 include_recipe "nodejs"
  29 include_recipe "postgresql"
  30 include_recipe "python"
  31
  32 package %w[
  33   php
  34   php-cgi
  35   php-cli
  36   php-curl
  37   php-db
  38   php-fpm
  39   php-imagick
  40   php-mysql
  41   php-pear
  42   php-pgsql
  43   php-sqlite3
  44 ]
  45
  46 package %w[
  47   pngcrush
  48   pngquant
  49 ]
  50
  51 package %w[
  52   python
  53   python-argparse
  54   python-beautifulsoup
  55   python-cheetah
  56   python-dateutil
  57   python-magic
  58   python-psycopg2
  59   python-gdal
  60 ]
  61
  62 nodejs_package "svgo"
  63
  64 python_package "geojson"
  65
  66 apache_module "env"
  67 apache_module "expires"
  68 apache_module "headers"
  69 apache_module "proxy"
  70 apache_module "proxy_fcgi"
  71 apache_module "rewrite"
  72 apache_module "suexec"
  73 apache_module "userdir"
  74 apache_module "wsgi"
  75
  76 package "apache2-suexec-pristine"
  77
  78 service "php7.2-fpm" do
  79   action [:enable, :start]
  80 end
  81
  82 template "/etc/php/7.2/fpm/pool.d/default.conf" do
  83   source "fpm-default.conf.erb"
  84   owner "root"
  85   group "root"
  86   mode 0o644
  87   notifies :reload, "service[php7.2-fpm]"
  88 end
  89
  90 file "/etc/php/7.2/fpm/pool.d/www.conf" do
  91   action :delete
  92   notifies :reload, "service[php7.2-fpm]"
  93 end
  94
  95 directory "/srv/dev.openstreetmap.org" do
  96   owner "root"
  97   group "root"
  98   mode 0o755
  99 end
 100
 101 template "/srv/dev.openstreetmap.org/index.html" do
 102   source "dev.html.erb"
 103   owner "root"
 104   group "root"
 105   mode 0o644
 106 end
 107
 108 ssl_certificate "dev.openstreetmap.org" do
 109   domains "dev.openstreetmap.org"
 110   notifies :reload, "service[apache2]"
 111 end
 112
 113 apache_site "dev.openstreetmap.org" do
 114   template "apache.dev.erb"
 115 end
 116
 117 package "phppgadmin"
 118
 119 template "/etc/phppgadmin/config.inc.php" do
 120   source "phppgadmin.conf.erb"
 121   owner "root"
 122   group "root"
 123   mode 0o644
 124 end
 125
 126 file "/etc/apache2/conf.d/phppgadmin" do
 127   action :delete
 128 end
 129
 130 ssl_certificate "phppgadmin.dev.openstreetmap.org" do
 131   domains "phppgadmin.dev.openstreetmap.org"
 132   notifies :reload, "service[apache2]"
 133 end
 134
 135 apache_site "phppgadmin.dev.openstreetmap.org" do
 136   template "apache.phppgadmin.erb"
 137 end
 138
 139 search(:accounts, "*:*").each do |account|
 140   name = account["id"]
 141   details = node[:accounts][:users][name] || {}
 142
 143   next unless %w[user administrator].include?(details[:status])
 144
 145   user_home = details[:home] || account["home"] || "#{node[:accounts][:home]}/#{name}"
 146
 147   next unless File.directory?("#{user_home}/public_html")
 148
 149   port = 7000 + account["uid"].to_i
 150
 151   template "/etc/php/7.2/fpm/pool.d/#{name}.conf" do
 152     source "fpm.conf.erb"
 153     owner "root"
 154     group "root"
 155     mode 0o644
 156     variables :user => name, :port => port
 157     notifies :reload, "service[php7.2-fpm]"
 158   end
 159
 160   ssl_certificate "#{name}.dev.openstreetmap.org" do
 161     domains ["#{name}.dev.openstreetmap.org", "#{name}.dev.osm.org"]
 162     notifies :reload, "service[apache2]"
 163   end
 164
 165   apache_site "#{name}.dev.openstreetmap.org" do
 166     template "apache.user.erb"
 167     directory "#{user_home}/public_html"
 168     variables :user => name, :port => port
 169   end
 170
 171   template "/etc/sudoers.d/#{name}" do
 172     source "sudoers.user.erb"
 173     owner "root"
 174     group "root"
 175     mode 0o440
 176     variables :user => name
 177   end
 178 end
 179
 180 if node[:postgresql][:clusters][:"9.5/main"]
 181   postgresql_user "apis" do
 182     cluster "9.5/main"
 183   end
 184
 185   template "/usr/local/bin/cleanup-rails-assets" do
 186     cookbook "web"
 187     source "cleanup-assets.erb"
 188     owner "root"
 189     group "root"
 190     mode 0o755
 191   end
 192
 193   node[:dev][:rails].each do |name, details|
 194     database_name = details[:database] || "apis_#{name}"
 195     site_name = "#{name}.apis.dev.openstreetmap.org"
 196     rails_directory = "/srv/#{name}.apis.dev.openstreetmap.org"
 197
 198     if details[:repository]
 199       site_aliases = details[:aliases] || []
 200       secret_key_base = details[:secret_key_base] || SecureRandom.base64(96)
 201
 202       node.normal[:dev][:rails][name][:secret_key_base] = secret_key_base
 203
 204       postgresql_database database_name do
 205         cluster "9.5/main"
 206         owner "apis"
 207       end
 208
 209       postgresql_extension "#{database_name}_btree_gist" do
 210         cluster "9.5/main"
 211         database database_name
 212         extension "btree_gist"
 213       end
 214
 215       rails_port site_name do
 216         ruby node[:passenger][:ruby_version]
 217         directory rails_directory
 218         user "apis"
 219         group "apis"
 220         repository details[:repository]
 221         revision details[:revision]
 222         database_port node[:postgresql][:clusters][:"9.5/main"][:port]
 223         database_name database_name
 224         database_username "apis"
 225         memcache_servers ["127.0.0.1"]
 226         csp_enforce true
 227         run_migrations true
 228       end
 229
 230       template "#{rails_directory}/config/initializers/setup.rb" do
 231         source "rails.setup.rb.erb"
 232         owner "apis"
 233         group "apis"
 234         mode 0o644
 235         variables :site => site_name
 236         notifies :restart, "rails_port[#{site_name}]"
 237       end
 238
 239       ssl_certificate site_name do
 240         domains [site_name] + site_aliases
 241         notifies :reload, "service[apache2]"
 242       end
 243
 244       apache_site site_name do
 245         template "apache.rails.erb"
 246         variables :application_name => name, :aliases => site_aliases, :secret_key_base => secret_key_base
 247       end
 248     else
 249       apache_site site_name do
 250         action [:delete]
 251       end
 252
 253       directory rails_directory do
 254         action :delete
 255         recursive true
 256       end
 257
 258       file "/etc/cron.daily/rails-#{site_name.tr('.', '-')}" do
 259         action :delete
 260       end
 261
 262       postgresql_database database_name do
 263         action :drop
 264         cluster "9.5/main"
 265       end
 266
 267       node.normal[:dev][:rails].delete(name)
 268     end
 269   end
 270
 271   directory "/srv/apis.dev.openstreetmap.org" do
 272     owner "apis"
 273     group "apis"
 274     mode 0o755
 275   end
 276
 277   template "/srv/apis.dev.openstreetmap.org/index.html" do
 278     source "apis.html.erb"
 279     owner "apis"
 280     group "apis"
 281     mode 0o644
 282   end
 283
 284   ssl_certificate "apis.dev.openstreetmap.org" do
 285     domains "apis.dev.openstreetmap.org"
 286     notifies :reload, "service[apache2]"
 287   end
 288
 289   apache_site "apis.dev.openstreetmap.org" do
 290     template "apache.apis.erb"
 291   end
 292
 293   node[:postgresql][:clusters].each_key do |name|
 294     postgresql_munin name do
 295       cluster name
 296       database "ALL"
 297     end
 298   end
 299 end
 300
 301 directory "/srv/ooc.openstreetmap.org" do
 302   owner "root"
 303   group "root"
 304   mode 0o755
 305 end
 306
 307 remote_directory "/srv/ooc.openstreetmap.org/html" do
 308   source "ooc"
 309   owner "root"
 310   group "root"
 311   mode 0o755
 312   files_owner "root"
 313   files_group "root"
 314   files_mode 0o644
 315 end
 316
 317 ssl_certificate "ooc.openstreetmap.org" do
 318   domains ["ooc.openstreetmap.org",
 319            "a.ooc.openstreetmap.org",
 320            "b.ooc.openstreetmap.org",
 321            "c.ooc.openstreetmap.org"]
 322   notifies :reload, "service[apache2]"
 323 end
 324
 325 apache_site "ooc.openstreetmap.org" do
 326   template "apache.ooc.erb"
 327 end