Bring dev.osm.org under chef control and SSL enable it
[chef.git] / cookbooks / dev / recipes / default.rb
1 #
2 # Cookbook Name:: dev
3 # Recipe:: default
4 #
5 # Copyright 2011, OpenStreetMap Foundation
6 #
7 # Licensed under the Apache License, Version 2.0 (the "License");
8 # you may not use this file except in compliance with the License.
9 # You may obtain a copy of the License at
10 #
11 #     http://www.apache.org/licenses/LICENSE-2.0
12 #
13 # Unless required by applicable law or agreed to in writing, software
14 # distributed under the License is distributed on an "AS IS" BASIS,
15 # WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
16 # See the License for the specific language governing permissions and
17 # limitations under the License.
18 #
19
20 require "yaml"
21 require "securerandom"
22
23 include_recipe "apache"
24 include_recipe "passenger"
25 include_recipe "git"
26 include_recipe "mysql"
27 include_recipe "nodejs"
28 include_recipe "postgresql"
29 include_recipe "python"
30
31 package %w[
32   php
33   php-cgi
34   php-cli
35   php-curl
36   php-db
37   php-fpm
38   php-imagick
39   php-mcrypt
40   php-mysql
41   php-pear
42   php-pgsql
43   php-sqlite3
44 ]
45
46 package %w[
47   pngcrush
48   pngquant
49 ]
50
51 package %w[
52   python
53   python-argparse
54   python-beautifulsoup
55   python-cheetah
56   python-dateutil
57   python-magic
58   python-psycopg2
59   python-gdal
60 ]
61
62 nodejs_package "svgo"
63
64 python_package "geojson"
65
66 apache_module "env"
67 apache_module "expires"
68 apache_module "headers"
69 apache_module "proxy"
70 apache_module "proxy_fcgi"
71 apache_module "rewrite"
72 apache_module "suexec"
73 apache_module "userdir"
74 apache_module "wsgi"
75
76 package "apache2-suexec-pristine"
77
78 gem_package "sqlite3"
79
80 gem_package "rails" do
81   version "3.0.9"
82 end
83
84 service "php7.0-fpm" do
85   action [:enable, :start]
86 end
87
88 template "/etc/php/7.0/fpm/pool.d/default.conf" do
89   source "fpm-default.conf.erb"
90   owner "root"
91   group "root"
92   mode 0o644
93   notifies :reload, "service[php7.0-fpm]"
94 end
95
96 file "/etc/php/7.0/fpm/pool.d/www.conf" do
97   action :delete
98   notifies :reload, "service[php7.0-fpm]"
99 end
100
101 directory "/srv/dev.openstreetmap.org" do
102   owner "root"
103   group "root"
104   mode 0o755
105 end
106
107 template "/srv/dev.openstreetmap.org/index.html" do
108   source "dev.html.erb"
109   owner "root"
110   group "root"
111   mode 0o644
112 end
113
114 ssl_certificate "dev.openstreetmap.org" do
115   domains "dev.openstreetmap.org"
116   notifies :reload, "service[apache2]"
117 end
118
119 apache_site "dev.openstreetmap.org" do
120   template "apache.dev.erb"
121 end
122
123 package "phppgadmin"
124
125 template "/etc/phppgadmin/config.inc.php" do
126   source "phppgadmin.conf.erb"
127   owner "root"
128   group "root"
129   mode 0o644
130 end
131
132 file "/etc/apache2/conf.d/phppgadmin" do
133   action :delete
134 end
135
136 ssl_certificate "phppgadmin.dev.openstreetmap.org" do
137   domains "phppgadmin.dev.openstreetmap.org"
138   notifies :reload, "service[apache2]"
139 end
140
141 apache_site "phppgadmin.dev.openstreetmap.org" do
142   template "apache.phppgadmin.erb"
143 end
144
145 search(:accounts, "*:*").each do |account|
146   name = account["id"]
147   details = node[:accounts][:users][name] || {}
148
149   next unless %w[user administrator].include?(details[:status])
150
151   user_home = details[:home] || account["home"] || "#{node[:accounts][:home]}/#{name}"
152
153   next unless File.directory?("#{user_home}/public_html")
154
155   port = 7000 + account["uid"].to_i
156
157   template "/etc/php/7.0/fpm/pool.d/#{name}.conf" do
158     source "fpm.conf.erb"
159     owner "root"
160     group "root"
161     mode 0o644
162     variables :user => name, :port => port
163     notifies :reload, "service[php7.0-fpm]"
164   end
165
166   ssl_certificate "#{name}.dev.openstreetmap.org" do
167     domains ["#{name}.dev.openstreetmap.org", "#{name}.dev.osm.org"]
168     notifies :reload, "service[apache2]"
169   end
170
171   apache_site "#{name}.dev.openstreetmap.org" do
172     template "apache.user.erb"
173     directory "#{user_home}/public_html"
174     variables :user => name, :port => port
175   end
176
177   template "/etc/sudoers.d/#{name}" do
178     source "sudoers.user.erb"
179     owner "root"
180     group "root"
181     mode 0o440
182     variables :user => name
183   end
184 end
185
186 if node[:postgresql][:clusters][:"9.5/main"]
187   postgresql_user "apis" do
188     cluster "9.5/main"
189   end
190
191   template "/usr/local/bin/cleanup-rails-assets" do
192     cookbook "web"
193     source "cleanup-assets.erb"
194     owner "root"
195     group "root"
196     mode 0o755
197   end
198
199   node[:dev][:rails].each do |name, details|
200     database_name = details[:database] || "apis_#{name}"
201     site_name = "#{name}.apis.dev.openstreetmap.org"
202     rails_directory = "/srv/#{name}.apis.dev.openstreetmap.org"
203
204     if details[:repository]
205       site_aliases = details[:aliases] || []
206       secret_key_base = details[:secret_key_base] || SecureRandom.base64(96)
207
208       node.normal[:dev][:rails][name][:secret_key_base] = secret_key_base
209
210       postgresql_database database_name do
211         cluster "9.5/main"
212         owner "apis"
213       end
214
215       postgresql_extension "#{database_name}_btree_gist" do
216         cluster "9.5/main"
217         database database_name
218         extension "btree_gist"
219       end
220
221       rails_port site_name do
222         ruby node[:passenger][:ruby_version]
223         directory rails_directory
224         user "apis"
225         group "apis"
226         repository details[:repository]
227         revision details[:revision]
228         database_port node[:postgresql][:clusters][:"9.5/main"][:port]
229         database_name database_name
230         database_username "apis"
231         run_migrations true
232       end
233
234       template "#{rails_directory}/config/initializers/setup.rb" do
235         source "rails.setup.rb.erb"
236         owner "apis"
237         group "apis"
238         mode 0o644
239         variables :site => site_name
240         notifies :restart, "rails_port[#{site_name}]"
241       end
242
243       ssl_certificate site_name do
244         domains [site_name] + site_aliases
245         notifies :reload, "service[apache2]"
246       end
247
248       apache_site site_name do
249         template "apache.rails.erb"
250         variables :name => site_name, :aliases => site_aliases, :secret_key_base => secret_key_base
251       end
252     else
253       apache_site site_name do
254         action [:delete]
255       end
256
257       directory rails_directory do
258         action :delete
259         recursive true
260       end
261
262       file "/etc/cron.daily/rails-#{site_name.tr('.', '-')}" do
263         action :delete
264       end
265
266       postgresql_database database_name do
267         action :drop
268         cluster "9.5/main"
269       end
270
271       node.normal[:dev][:rails].delete(name)
272     end
273   end
274
275   directory "/srv/apis.dev.openstreetmap.org" do
276     owner "apis"
277     group "apis"
278     mode 0o755
279   end
280
281   template "/srv/apis.dev.openstreetmap.org/index.html" do
282     source "apis.html.erb"
283     owner "apis"
284     group "apis"
285     mode 0o644
286   end
287
288   ssl_certificate "apis.dev.openstreetmap.org" do
289     domains "apis.dev.openstreetmap.org"
290     notifies :reload, "service[apache2]"
291   end
292
293   apache_site "apis.dev.openstreetmap.org" do
294     template "apache.apis.erb"
295   end
296
297   node[:postgresql][:clusters].each_key do |name|
298     postgresql_munin name do
299       cluster name
300       database "ALL"
301     end
302   end
303 end