Improve translatability of nominatim results. Closes #2498.
[rails.git] / app / controllers / geocoder_controller.rb
1 class GeocoderController < ApplicationController
2   require 'uri'
3   require 'net/http'
4   require 'rexml/document'
5
6   before_filter :authorize_web
7   before_filter :set_locale
8
9   def search
10     @query = params[:query]
11     @sources = Array.new
12
13     @query.sub(/^\s+/, "")
14     @query.sub(/\s+$/, "")
15
16     if @query.match(/^[+-]?\d+(\.\d*)?\s*[\s,]\s*[+-]?\d+(\.\d*)?$/)
17       @sources.push "latlon"
18     elsif @query.match(/^\d{5}(-\d{4})?$/)
19       @sources.push "us_postcode"
20     elsif @query.match(/^(GIR 0AA|[A-PR-UWYZ]([0-9]{1,2}|([A-HK-Y][0-9]|[A-HK-Y][0-9]([0-9]|[ABEHMNPRV-Y]))|[0-9][A-HJKS-UW])\s*[0-9][ABD-HJLNP-UW-Z]{2})$/i)
21       @sources.push "uk_postcode"
22       @sources.push "osm_nominatim"
23       @sources.push "osm_namefinder"
24     elsif @query.match(/^[A-Z]\d[A-Z]\s*\d[A-Z]\d$/i)
25       @sources.push "ca_postcode"
26     else
27       @sources.push "osm_nominatim"
28       @sources.push "osm_namefinder"
29       @sources.push "geonames"
30     end
31
32     render :update do |page|
33       page.replace_html :sidebar_content, :partial => "search"
34       page.call "openSidebar"
35     end
36   end
37
38   def search_latlon
39     # get query parameters
40     query = params[:query]
41
42     # create result array
43     @results = Array.new
44
45     # decode the location
46     if m = query.match(/^\s*([+-]?\d+(\.\d*)?)\s*[\s,]\s*([+-]?\d+(\.\d*)?)\s*$/)
47       lat = m[1].to_f
48       lon = m[3].to_f
49     end
50
51     # generate results
52     if lat < -90 or lat > 90
53       @error = "Latitude #{lat} out of range"
54       render :action => "error"
55     elsif lon < -180 or lon > 180
56       @error = "Longitude #{lon} out of range"
57       render :action => "error"
58     else
59       @results.push({:lat => lat, :lon => lon,
60                      :zoom => APP_CONFIG['postcode_zoom'],
61                      :name => "#{lat}, #{lon}"})
62
63       render :action => "results"
64     end
65   end
66
67   def search_us_postcode
68     # get query parameters
69     query = params[:query]
70
71     # create result array
72     @results = Array.new
73
74     # ask geocoder.us (they have a non-commercial use api)
75     response = fetch_text("http://rpc.geocoder.us/service/csv?zip=#{escape_query(query)}")
76
77     # parse the response
78     unless response.match(/couldn't find this zip/)
79       data = response.split(/\s*,\s+/) # lat,long,town,state,zip
80       @results.push({:lat => data[0], :lon => data[1],
81                      :zoom => APP_CONFIG['postcode_zoom'],
82                      :prefix => "#{data[2]}, #{data[3]},",
83                      :name => data[4]})
84     end
85
86     render :action => "results"
87   rescue Exception => ex
88     @error = "Error contacting rpc.geocoder.us: #{ex.to_s}"
89     render :action => "error"
90   end
91
92   def search_uk_postcode
93     # get query parameters
94     query = params[:query]
95
96     # create result array
97     @results = Array.new
98
99     # ask npemap.org.uk to do a combined npemap + freethepostcode search
100     response = fetch_text("http://www.npemap.org.uk/cgi/geocoder.fcgi?format=text&postcode=#{escape_query(query)}")
101
102     # parse the response
103     unless response.match(/Error/)
104       dataline = response.split(/\n/)[1]
105       data = dataline.split(/,/) # easting,northing,postcode,lat,long
106       postcode = data[2].gsub(/'/, "")
107       zoom = APP_CONFIG['postcode_zoom'] - postcode.count("#")
108       @results.push({:lat => data[3], :lon => data[4], :zoom => zoom,
109                      :name => postcode})
110     end
111
112     render :action => "results"
113   rescue Exception => ex
114     @error = "Error contacting www.npemap.org.uk: #{ex.to_s}"
115     render :action => "error"
116   end
117
118   def search_ca_postcode
119     # get query parameters
120     query = params[:query]
121     @results = Array.new
122
123     # ask geocoder.ca (note - they have a per-day limit)
124     response = fetch_xml("http://geocoder.ca/?geoit=XML&postal=#{escape_query(query)}")
125
126     # parse the response
127     if response.get_elements("geodata/error").empty?
128       @results.push({:lat => response.get_text("geodata/latt").to_s,
129                      :lon => response.get_text("geodata/longt").to_s,
130                      :zoom => APP_CONFIG['postcode_zoom'],
131                      :name => query.upcase})
132     end
133
134     render :action => "results"
135   rescue Exception => ex
136     @error = "Error contacting geocoder.ca: #{ex.to_s}"
137     render :action => "error"
138   end
139
140   def search_osm_namefinder
141     # get query parameters
142     query = params[:query]
143
144     # create result array
145     @results = Array.new
146
147     # ask OSM namefinder
148     response = fetch_xml("http://gazetteer.openstreetmap.org/namefinder/search.xml?find=#{escape_query(query)}")
149
150     # parse the response
151     response.elements.each("searchresults/named") do |named|
152       lat = named.attributes["lat"].to_s
153       lon = named.attributes["lon"].to_s
154       zoom = named.attributes["zoom"].to_s
155       place = named.elements["place/named"] || named.elements["nearestplaces/named"]
156       type = named.attributes["info"].to_s.capitalize
157       name = named.attributes["name"].to_s
158       description = named.elements["description"].to_s
159
160       if name.empty?
161         prefix = ""
162         name = type
163       else
164         prefix =  t "geocoder.search_osm_namefinder.prefix", :type => type
165       end
166
167       if place
168         distance = format_distance(place.attributes["approxdistance"].to_i)
169         direction = format_direction(place.attributes["direction"].to_i)
170         placename = format_name(place.attributes["name"].to_s)
171         suffix = t "geocoder.search_osm_namefinder.suffix_place", :distance => distance, :direction => direction, :placename => placename
172
173         if place.attributes["rank"].to_i <= 30
174           parent = nil
175           parentrank = 0
176           parentscore = 0
177
178           place.elements.each("nearestplaces/named") do |nearest|
179             nearestrank = nearest.attributes["rank"].to_i
180             nearestscore = nearestrank / nearest.attributes["distance"].to_f
181
182             if nearestrank > 30 and
183                ( nearestscore > parentscore or
184                  ( nearestscore == parentscore and nearestrank > parentrank ) )
185               parent = nearest
186               parentrank = nearestrank
187               parentscore = nearestscore
188             end
189           end
190
191           if parent
192             parentname = format_name(parent.attributes["name"].to_s)
193
194             if  place.attributes["info"].to_s == "suburb"
195               suffix = t "geocoder.search_osm_namefinder.suffix_suburb", :suffix => suffix, :parentname => parentname
196             else
197               parentdistance = format_distance(parent.attributes["approxdistance"].to_i)
198               parentdirection = format_direction(parent.attributes["direction"].to_i)
199               suffix = t "geocoder.search_osm_namefinder.suffix_parent", :suffix => suffix, :parentdistance => parentdistance, :parentdirection => parentdirection, :parentname => parentname
200             end
201           end
202         end
203       else
204         suffix = ""
205       end
206
207       @results.push({:lat => lat, :lon => lon, :zoom => zoom,
208                      :prefix => prefix, :name => name, :suffix => suffix,
209                      :description => description})
210     end
211
212     render :action => "results"
213   rescue Exception => ex
214     @error = "Error contacting gazetteer.openstreetmap.org: #{ex.to_s}"
215     render :action => "error"
216   end
217
218   def search_osm_nominatim
219     # get query parameters
220     query = params[:query]
221     minlon = params[:minlon]
222     minlat = params[:minlat]
223     maxlon = params[:maxlon]
224     maxlat = params[:maxlat]
225
226     # get view box
227     if minlon && minlat && maxlon && maxlat
228       viewbox = "&viewbox=#{minlon},#{maxlat},#{maxlon},#{minlat}"
229     end
230
231     # create result array
232     @results = Array.new
233
234     # ask nominatim
235     response = fetch_xml("http://nominatim.openstreetmap.org/search?format=xml&q=#{escape_query(query)}#{viewbox}&accept-language=#{request.user_preferred_languages.join(',')}")
236
237     # parse the response
238     response.elements.each("searchresults/place") do |place|
239       lat = place.attributes["lat"].to_s
240       lon = place.attributes["lon"].to_s
241       klass = place.attributes["class"].to_s
242       type = place.attributes["type"].to_s
243       name = place.attributes["display_name"].to_s
244       min_lat,max_lat,min_lon,max_lon = place.attributes["boundingbox"].to_s.split(",")
245       prefix = t "geocoder.search_osm_nominatim.prefix_#{type}", :default => type.gsub("_", " ").capitalize
246
247       @results.push({:lat => lat, :lon => lon,
248                      :min_lat => min_lat, :max_lat => max_lat,
249                      :min_lon => min_lon, :max_lon => max_lon,
250                      :prefix => prefix, :name => name})
251     end
252
253     render :action => "results"
254   rescue Exception => ex
255     @error = "Error contacting nominatim.openstreetmap.org: #{ex.to_s}"
256     render :action => "error"
257   end
258
259   def search_geonames
260     # get query parameters
261     query = params[:query]
262
263     # create result array
264     @results = Array.new
265
266     # ask geonames.org
267     response = fetch_xml("http://ws.geonames.org/search?q=#{escape_query(query)}&maxRows=20")
268
269     # parse the response
270     response.elements.each("geonames/geoname") do |geoname|
271       lat = geoname.get_text("lat").to_s
272       lon = geoname.get_text("lng").to_s
273       name = geoname.get_text("name").to_s
274       country = geoname.get_text("countryName").to_s
275       @results.push({:lat => lat, :lon => lon,
276                      :zoom => APP_CONFIG['geonames_zoom'],
277                      :name => name,
278                      :suffix => ", #{country}"})
279     end
280
281     render :action => "results"
282   rescue Exception => ex
283     @error = "Error contacting ws.geonames.org: #{ex.to_s}"
284     render :action => "error"
285   end
286
287   def description
288     @sources = Array.new
289
290     @sources.push({ :name => "osm_nominatim" })
291     @sources.push({ :name => "osm_namefinder", :types => "cities", :max => 2 })
292     @sources.push({ :name => "osm_namefinder", :types => "towns", :max => 4 })
293     @sources.push({ :name => "osm_namefinder", :types => "places", :max => 10 })
294     @sources.push({ :name => "geonames" })
295
296     render :update do |page|
297       page.replace_html :sidebar_content, :partial => "description"
298       page.call "openSidebar"
299     end
300   end
301
302   def description_osm_namefinder
303     # get query parameters
304     lat = params[:lat]
305     lon = params[:lon]
306     types = params[:types]
307     max = params[:max]
308
309     # create result array
310     @results = Array.new
311
312     # ask OSM namefinder
313     response = fetch_xml("http://gazetteer.openstreetmap.org/namefinder/search.xml?find=#{types}+near+#{lat},#{lon}&max=#{max}")
314
315     # parse the response
316     response.elements.each("searchresults/named") do |named|
317       lat = named.attributes["lat"].to_s
318       lon = named.attributes["lon"].to_s
319       zoom = named.attributes["zoom"].to_s
320       place = named.elements["place/named"] || named.elements["nearestplaces/named"]
321       type = named.attributes["info"].to_s
322       name = named.attributes["name"].to_s
323       description = named.elements["description"].to_s
324       distance = format_distance(place.attributes["approxdistance"].to_i)
325       direction = format_direction((place.attributes["direction"].to_i - 180) % 360)
326       prefix = t "geocoder.description_osm_namefinder.prefix", :distance => distance, :direction => direction, :type => type
327       @results.push({:lat => lat, :lon => lon, :zoom => zoom,
328                      :prefix => prefix.capitalize, :name => name,
329                      :description => description})
330     end
331
332     render :action => "results"
333   rescue Exception => ex
334     @error = "Error contacting gazetteer.openstreetmap.org: #{ex.to_s}"
335     render :action => "error"
336   end
337
338   def description_osm_nominatim
339     # get query parameters
340     lat = params[:lat]
341     lon = params[:lon]
342     zoom = params[:zoom]
343
344     # create result array
345     @results = Array.new
346
347     # ask OSM namefinder
348     response = fetch_xml("http://nominatim.openstreetmap.org/reverse?lat=#{lat}&lon=#{lon}&zoom=#{zoom}&accept-language=#{request.user_preferred_languages.join(',')}")
349
350     # parse the response
351     response.elements.each("reversegeocode") do |result|
352       description = result.get_text("result").to_s
353
354       @results.push({:prefix => "#{description}"})
355     end
356
357     render :action => "results"
358   rescue Exception => ex
359     @error = "Error contacting nominatim.openstreetmap.org: #{ex.to_s}"
360     render :action => "error"
361   end
362
363   def description_geonames
364     # get query parameters
365     lat = params[:lat]
366     lon = params[:lon]
367
368     # create result array
369     @results = Array.new
370
371     # ask geonames.org
372     response = fetch_xml("http://ws.geonames.org/countrySubdivision?lat=#{lat}&lng=#{lon}")
373
374     # parse the response
375     response.elements.each("geonames/countrySubdivision") do |geoname|
376       name = geoname.get_text("adminName1").to_s
377       country = geoname.get_text("countryName").to_s
378       @results.push({:prefix => "#{name}, #{country}"})
379     end
380
381     render :action => "results"
382   rescue Exception => ex
383     @error = "Error contacting ws.geonames.org: #{ex.to_s}"
384     render :action => "error"
385   end
386
387 private
388
389   def fetch_text(url)
390     return Net::HTTP.get(URI.parse(url))
391   end
392
393   def fetch_xml(url)
394     return REXML::Document.new(fetch_text(url))
395   end
396
397   def format_distance(distance)
398     return t("geocoder.distance", :count => distance)
399   end
400
401   def format_direction(bearing)
402     return t("geocoder.direction.south_west") if bearing >= 22.5 and bearing < 67.5
403     return t("geocoder.direction.south") if bearing >= 67.5 and bearing < 112.5
404     return t("geocoder.direction.south_east") if bearing >= 112.5 and bearing < 157.5
405     return t("geocoder.direction.east") if bearing >= 157.5 and bearing < 202.5
406     return t("geocoder.direction.north_east") if bearing >= 202.5 and bearing < 247.5
407     return t("geocoder.direction.north") if bearing >= 247.5 and bearing < 292.5
408     return t("geocoder.direction.north_west") if bearing >= 292.5 and bearing < 337.5
409     return t("geocoder.direction.west")
410   end
411
412   def format_name(name)
413     return name.gsub(/( *\[[^\]]*\])*$/, "")
414   end
415
416   def count_results(results)
417     count = 0
418
419     results.each do |source|
420       count += source[:results].length if source[:results]
421     end
422
423     return count
424   end
425
426   def escape_query(query)
427     return URI.escape(query, Regexp.new("[^#{URI::PATTERN::UNRESERVED}]", false, 'N'))
428   end
429 end