Don't paginate redactions
[rails.git] / app / controllers / changeset_controller.rb
1 # The ChangesetController is the RESTful interface to Changeset objects
2
3 class ChangesetController < ApplicationController
4   layout 'site'
5   require 'xml/libxml'
6
7   skip_before_filter :verify_authenticity_token, :except => [:list]
8   before_filter :authorize_web, :only => [:list, :feed, :comments_feed]
9   before_filter :set_locale, :only => [:list, :feed, :comments_feed]
10   before_filter :authorize, :only => [:create, :update, :delete, :upload, :include, :close, :comment, :subscribe, :unsubscribe, :hide_comment, :unhide_comment]
11   before_filter :require_moderator, :only => [:hide_comment, :unhide_comment]
12   before_filter :require_allow_write_api, :only => [:create, :update, :delete, :upload, :include, :close, :comment, :subscribe, :unsubscribe, :hide_comment, :unhide_comment]
13   before_filter :require_public_data, :only => [:create, :update, :delete, :upload, :include, :close, :comment, :subscribe, :unsubscribe]
14   before_filter :check_api_writable, :only => [:create, :update, :delete, :upload, :include, :comment, :subscribe, :unsubscribe, :hide_comment, :unhide_comment]
15   before_filter :check_api_readable, :except => [:create, :update, :delete, :upload, :download, :query, :list, :feed, :comment, :subscribe, :unsubscribe, :comments_feed]
16   before_filter(:only => [:list, :feed, :comments_feed]) { |c| c.check_database_readable(true) }
17   after_filter :compress_output
18   around_filter :api_call_handle_error, :except => [:list, :feed, :comments_feed]
19   around_filter :web_timeout, :only => [:list, :feed, :comments_feed]
20
21   # Helper methods for checking consistency
22   include ConsistencyValidations
23
24   # Create a changeset from XML.
25   def create
26     assert_method :put
27
28     cs = Changeset.from_xml(request.raw_post, true)
29
30     # Assume that Changeset.from_xml has thrown an exception if there is an error parsing the xml
31     cs.user_id = @user.id
32     cs.save_with_tags!
33
34     # Subscribe user to changeset comments
35     cs.subscribers << @user
36
37     render :text => cs.id.to_s, :content_type => "text/plain"
38   end
39
40   ##
41   # Return XML giving the basic info about the changeset. Does not
42   # return anything about the nodes, ways and relations in the changeset.
43   def read
44     changeset = Changeset.find(params[:id])
45
46     render :text => changeset.to_xml(params[:include_discussion].presence).to_s, :content_type => "text/xml"
47   end
48
49   ##
50   # marks a changeset as closed. this may be called multiple times
51   # on the same changeset, so is idempotent.
52   def close
53     assert_method :put
54
55     changeset = Changeset.find(params[:id])
56     check_changeset_consistency(changeset, @user)
57
58     # to close the changeset, we'll just set its closed_at time to
59     # now. this might not be enough if there are concurrency issues,
60     # but we'll have to wait and see.
61     changeset.set_closed_time_now
62
63     changeset.save!
64     render :text => ""
65   end
66
67   ##
68   # insert a (set of) points into a changeset bounding box. this can only
69   # increase the size of the bounding box. this is a hint that clients can
70   # set either before uploading a large number of changes, or changes that
71   # the client (but not the server) knows will affect areas further away.
72   def expand_bbox
73     # only allow POST requests, because although this method is
74     # idempotent, there is no "document" to PUT really...
75     assert_method :post
76
77     cs = Changeset.find(params[:id])
78     check_changeset_consistency(cs, @user)
79
80     # keep an array of lons and lats
81     lon = Array.new
82     lat = Array.new
83
84     # the request is in pseudo-osm format... this is kind-of an
85     # abuse, maybe should change to some other format?
86     doc = XML::Parser.string(request.raw_post).parse
87     doc.find("//osm/node").each do |n|
88       lon << n['lon'].to_f * GeoRecord::SCALE
89       lat << n['lat'].to_f * GeoRecord::SCALE
90     end
91
92     # add the existing bounding box to the lon-lat array
93     lon << cs.min_lon unless cs.min_lon.nil?
94     lat << cs.min_lat unless cs.min_lat.nil?
95     lon << cs.max_lon unless cs.max_lon.nil?
96     lat << cs.max_lat unless cs.max_lat.nil?
97
98     # collapse the arrays to minimum and maximum
99     cs.min_lon, cs.min_lat, cs.max_lon, cs.max_lat =
100       lon.min, lat.min, lon.max, lat.max
101
102     # save the larger bounding box and return the changeset, which
103     # will include the bigger bounding box.
104     cs.save!
105     render :text => cs.to_xml.to_s, :content_type => "text/xml"
106   end
107
108   ##
109   # Upload a diff in a single transaction.
110   #
111   # This means that each change within the diff must succeed, i.e: that
112   # each version number mentioned is still current. Otherwise the entire
113   # transaction *must* be rolled back.
114   #
115   # Furthermore, each element in the diff can only reference the current
116   # changeset.
117   #
118   # Returns: a diffResult document, as described in
119   # http://wiki.openstreetmap.org/wiki/OSM_Protocol_Version_0.6
120   def upload
121     # only allow POST requests, as the upload method is most definitely
122     # not idempotent, as several uploads with placeholder IDs will have
123     # different side-effects.
124     # see http://www.w3.org/Protocols/rfc2616/rfc2616-sec9.html#sec9.1.2
125     assert_method :post
126
127     changeset = Changeset.find(params[:id])
128     check_changeset_consistency(changeset, @user)
129
130     diff_reader = DiffReader.new(request.raw_post, changeset)
131     Changeset.transaction do
132       result = diff_reader.commit
133       render :text => result.to_s, :content_type => "text/xml"
134     end
135   end
136
137   ##
138   # download the changeset as an osmChange document.
139   #
140   # to make it easier to revert diffs it would be better if the osmChange
141   # format were reversible, i.e: contained both old and new versions of
142   # modified elements. but it doesn't at the moment...
143   #
144   # this method cannot order the database changes fully (i.e: timestamp and
145   # version number may be too coarse) so the resulting diff may not apply
146   # to a different database. however since changesets are not atomic this
147   # behaviour cannot be guaranteed anyway and is the result of a design
148   # choice.
149   def download
150     changeset = Changeset.find(params[:id])
151
152     # get all the elements in the changeset which haven't been redacted
153     # and stick them in a big array.
154     elements = [changeset.old_nodes.unredacted,
155                 changeset.old_ways.unredacted,
156                 changeset.old_relations.unredacted].flatten
157
158     # sort the elements by timestamp and version number, as this is the
159     # almost sensible ordering available. this would be much nicer if
160     # global (SVN-style) versioning were used - then that would be
161     # unambiguous.
162     elements.sort! do |a, b|
163       if (a.timestamp == b.timestamp)
164         a.version <=> b.version
165       else
166         a.timestamp <=> b.timestamp
167       end
168     end
169
170     # create changeset and user caches
171     changeset_cache = {}
172     user_display_name_cache = {}
173
174     # create an osmChange document for the output
175     result = OSM::API.new.get_xml_doc
176     result.root.name = "osmChange"
177
178     # generate an output element for each operation. note: we avoid looking
179     # at the history because it is simpler - but it would be more correct to
180     # check these assertions.
181     elements.each do |elt|
182       result.root <<
183         if (elt.version == 1)
184           # first version, so it must be newly-created.
185           created = XML::Node.new "create"
186           created << elt.to_xml_node(changeset_cache, user_display_name_cache)
187         else
188           unless elt.visible
189             # if the element isn't visible then it must have been deleted
190             deleted = XML::Node.new "delete"
191             deleted << elt.to_xml_node(changeset_cache, user_display_name_cache)
192           else
193             # must be a modify
194             modified = XML::Node.new "modify"
195             modified << elt.to_xml_node(changeset_cache, user_display_name_cache)
196           end
197         end
198     end
199
200     render :text => result.to_s, :content_type => "text/xml"
201   end
202
203   ##
204   # query changesets by bounding box, time, user or open/closed status.
205   def query
206     # find any bounding box
207     if params['bbox']
208       bbox = BoundingBox.from_bbox_params(params)
209     end
210
211     # create the conditions that the user asked for. some or all of
212     # these may be nil.
213     changesets = Changeset.all
214     changesets = conditions_bbox(changesets, bbox)
215     changesets = conditions_user(changesets, params['user'], params['display_name'])
216     changesets = conditions_time(changesets, params['time'])
217     changesets = conditions_open(changesets, params['open'])
218     changesets = conditions_closed(changesets, params['closed'])
219     changesets = conditions_ids(changesets, params['changesets'])
220
221     # create the results document
222     results = OSM::API.new.get_xml_doc
223
224     # add all matching changesets to the XML results document
225     changesets.order("created_at DESC").limit(100).each do |cs|
226       results.root << cs.to_xml_node
227     end
228
229     render :text => results.to_s, :content_type => "text/xml"
230   end
231
232   ##
233   # updates a changeset's tags. none of the changeset's attributes are
234   # user-modifiable, so they will be ignored.
235   #
236   # changesets are not (yet?) versioned, so we don't have to deal with
237   # history tables here. changesets are locked to a single user, however.
238   #
239   # after succesful update, returns the XML of the changeset.
240   def update
241     # request *must* be a PUT.
242     assert_method :put
243
244     changeset = Changeset.find(params[:id])
245     new_changeset = Changeset.from_xml(request.raw_post)
246
247     unless new_changeset.nil?
248       check_changeset_consistency(changeset, @user)
249       changeset.update_from(new_changeset, @user)
250       render :text => changeset.to_xml, :mime_type => "text/xml"
251     else
252
253       render :text => "", :status => :bad_request
254     end
255   end
256
257   ##
258   # list edits (open changesets) in reverse chronological order
259   def list
260     if request.format == :atom and params[:max_id]
261       redirect_to params.merge({ :max_id => nil }), :status => :moved_permanently
262       return
263     end
264
265     if params[:display_name]
266       user = User.find_by_display_name(params[:display_name])
267       if !user || !user.active?
268         render_unknown_user params[:display_name]
269         return
270       end
271     end
272
273     if (params[:friends] || params[:nearby]) && !@user && request.format == :html
274       require_user
275       return
276     end
277
278     if request.format == :html and !params[:list]
279       require_oauth
280       render :action => :history, :layout => map_layout
281     else
282       changesets = conditions_nonempty(Changeset.all)
283
284       if params[:display_name]
285         if user.data_public? or user == @user
286           changesets = changesets.where(:user_id => user.id)
287         else
288           changesets = changesets.where("false")
289         end
290       elsif params[:bbox]
291         changesets = conditions_bbox(changesets, BoundingBox.from_bbox_params(params))
292       elsif params[:friends] && @user
293         changesets = changesets.where(:user_id => @user.friend_users.identifiable)
294       elsif params[:nearby] && @user
295         changesets = changesets.where(:user_id => @user.nearby)
296       end
297
298       if params[:max_id]
299         changesets = changesets.where("changesets.id <= ?", params[:max_id])
300       end
301
302       @edits = changesets.order("changesets.id DESC").limit(20).preload(:user, :changeset_tags)
303
304       render :action => :list, :layout => false
305     end
306   end
307
308   ##
309   # list edits as an atom feed
310   def feed
311     list
312   end
313
314   ##
315   # Add a comment to a changeset
316   def comment
317     # Check the arguments are sane
318     raise OSM::APIBadUserInput.new("No id was given") unless params[:id]
319     raise OSM::APIBadUserInput.new("No text was given") if params[:text].blank?
320
321     # Extract the arguments
322     id = params[:id].to_i
323     body = params[:text]
324
325     # Find the changeset and check it is valid
326     changeset = Changeset.find(id)
327     raise OSM::APIChangesetNotYetClosedError.new(changeset) if changeset.is_open?
328
329     # Add a comment to the changeset
330     comment = changeset.comments.create({
331       :changeset => changeset,
332       :body => body,
333       :author => @user
334     })
335
336     # Notify current subscribers of the new comment
337     changeset.subscribers.each do |user|
338       if @user != user
339         Notifier.changeset_comment_notification(comment, user).deliver
340       end
341     end
342
343     # Add the commenter to the subscribers if necessary
344     changeset.subscribers << @user unless changeset.subscribers.exists?(@user)
345
346     # Return a copy of the updated changeset
347     render :text => changeset.to_xml.to_s, :content_type => "text/xml"
348   end
349
350   ##
351   # Adds a subscriber to the changeset
352   def subscribe
353     # Check the arguments are sane
354     raise OSM::APIBadUserInput.new("No id was given") unless params[:id]
355
356     # Extract the arguments
357     id = params[:id].to_i
358
359     # Find the changeset and check it is valid
360     changeset = Changeset.find(id)
361     raise OSM::APIChangesetNotYetClosedError.new(changeset) if changeset.is_open?
362     raise OSM::APIChangesetAlreadySubscribedError.new(changeset) if changeset.subscribers.exists?(@user)
363
364     # Add the subscriber
365     changeset.subscribers << @user
366
367     # Return a copy of the updated changeset
368     render :text => changeset.to_xml.to_s, :content_type => "text/xml"
369   end
370
371   ##
372   # Removes a subscriber from the changeset
373   def unsubscribe
374     # Check the arguments are sane
375     raise OSM::APIBadUserInput.new("No id was given") unless params[:id]
376
377     # Extract the arguments
378     id = params[:id].to_i
379
380     # Find the changeset and check it is valid
381     changeset = Changeset.find(id)
382     raise OSM::APIChangesetNotYetClosedError.new(changeset) if changeset.is_open?
383     raise OSM::APIChangesetNotSubscribedError.new(changeset) unless changeset.subscribers.exists?(@user)
384
385     # Remove the subscriber
386     changeset.subscribers.delete(@user)
387
388     # Return a copy of the updated changeset
389     render :text => changeset.to_xml.to_s, :content_type => "text/xml"
390   end
391
392   ##
393   # Sets visible flag on comment to false
394   def hide_comment
395     # Check the arguments are sane
396     raise OSM::APIBadUserInput.new("No id was given") unless params[:id]
397
398     # Extract the arguments
399     id = params[:id].to_i
400
401     # Find the changeset
402     comment = ChangesetComment.find(id)
403
404     # Hide the comment
405     comment.update(:visible => false)
406
407     # Return a copy of the updated changeset
408     render :text => comment.changeset.to_xml.to_s, :content_type => "text/xml"
409   end
410
411   ##
412   # Sets visible flag on comment to true
413   def unhide_comment
414     # Check the arguments are sane
415     raise OSM::APIBadUserInput.new("No id was given") unless params[:id]
416
417     # Extract the arguments
418     id = params[:id].to_i
419
420     # Find the changeset
421     comment = ChangesetComment.find(id)
422
423     # Unhide the comment
424     comment.update(:visible => true)
425
426     # Return a copy of the updated changeset
427     render :text => comment.changeset.to_xml.to_s, :content_type => "text/xml"
428   end
429
430   ##
431   # Get a feed of recent changeset comments
432   def comments_feed
433     if params[:id]
434       # Extract the arguments
435       id = params[:id].to_i
436
437       # Find the changeset
438       changeset = Changeset.find(id)
439
440       # Return comments for this changeset only
441       @comments = changeset.comments.includes(:author, :changeset).limit(comments_limit)
442     else
443       # Return comments
444       @comments = ChangesetComment.includes(:author, :changeset).where(:visible => :true).order("created_at DESC").limit(comments_limit).preload(:changeset)
445     end
446
447     # Render the result
448     respond_to do |format|
449       format.rss
450     end
451   end
452
453 private
454   #------------------------------------------------------------
455   # utility functions below.
456   #------------------------------------------------------------
457
458   ##
459   # if a bounding box was specified do some sanity checks.
460   # restrict changesets to those enclosed by a bounding box
461   # we need to return both the changesets and the bounding box
462   def conditions_bbox(changesets, bbox)
463     if  bbox
464       bbox.check_boundaries
465       bbox = bbox.to_scaled
466       return changesets.where("min_lon < ? and max_lon > ? and min_lat < ? and max_lat > ?",
467                               bbox.max_lon.to_i, bbox.min_lon.to_i,
468                               bbox.max_lat.to_i, bbox.min_lat.to_i)
469     else
470       return changesets
471     end
472   end
473
474   ##
475   # restrict changesets to those by a particular user
476   def conditions_user(changesets, user, name)
477     unless user.nil? and name.nil?
478       # shouldn't provide both name and UID
479       raise OSM::APIBadUserInput.new("provide either the user ID or display name, but not both") if user and name
480
481       # use either the name or the UID to find the user which we're selecting on.
482       u = if name.nil?
483             # user input checking, we don't have any UIDs < 1
484             raise OSM::APIBadUserInput.new("invalid user ID") if user.to_i < 1
485             u = User.find(user.to_i)
486           else
487             u = User.find_by_display_name(name)
488           end
489
490       # make sure we found a user
491       raise OSM::APINotFoundError.new if u.nil?
492
493       # should be able to get changesets of public users only, or
494       # our own changesets regardless of public-ness.
495       unless u.data_public?
496         # get optional user auth stuff so that users can see their own
497         # changesets if they're non-public
498         setup_user_auth
499
500         raise OSM::APINotFoundError if @user.nil? or @user.id != u.id
501       end
502       return changesets.where(:user_id => u.id)
503     else
504       return changesets
505     end
506   end
507
508   ##
509   # restrict changes to those closed during a particular time period
510   def conditions_time(changesets, time)
511     unless time.nil?
512       # if there is a range, i.e: comma separated, then the first is
513       # low, second is high - same as with bounding boxes.
514       if time.count(',') == 1
515         # check that we actually have 2 elements in the array
516         times = time.split(/,/)
517         raise OSM::APIBadUserInput.new("bad time range") if times.size != 2
518
519         from, to = times.collect { |t| DateTime.parse(t) }
520         return changesets.where("closed_at >= ? and created_at <= ?", from, to)
521       else
522         # if there is no comma, assume its a lower limit on time
523         return changesets.where("closed_at >= ?", DateTime.parse(time))
524       end
525     else
526       return changesets
527     end
528     # stupid DateTime seems to throw both of these for bad parsing, so
529     # we have to catch both and ensure the correct code path is taken.
530   rescue ArgumentError => ex
531     raise OSM::APIBadUserInput.new(ex.message.to_s)
532   rescue RuntimeError => ex
533     raise OSM::APIBadUserInput.new(ex.message.to_s)
534   end
535
536   ##
537   # return changesets which are open (haven't been closed yet)
538   # we do this by seeing if the 'closed at' time is in the future. Also if we've
539   # hit the maximum number of changes then it counts as no longer open.
540   # if parameter 'open' is nill then open and closed changesets are returned
541   def conditions_open(changesets, open)
542     if open.nil?
543       return changesets
544     else
545       return changesets.where("closed_at >= ? and num_changes <= ?",
546                               Time.now.getutc, Changeset::MAX_ELEMENTS)
547     end
548   end
549
550   ##
551   # query changesets which are closed
552   # ('closed at' time has passed or changes limit is hit)
553   def conditions_closed(changesets, closed)
554     if closed.nil?
555       return changesets
556     else
557       return changesets.where("closed_at < ? or num_changes > ?",
558                               Time.now.getutc, Changeset::MAX_ELEMENTS)
559     end
560   end
561
562   ##
563   # query changesets by a list of ids
564   # (either specified as array or comma-separated string)
565   def conditions_ids(changesets, ids)
566     if ids.nil?
567       return changesets
568     elsif ids.empty?
569       raise OSM::APIBadUserInput.new("No changesets were given to search for")
570     else
571       ids = ids.split(',').collect { |n| n.to_i }
572       return changesets.where(:id => ids)
573     end
574   end
575
576   ##
577   # eliminate empty changesets (where the bbox has not been set)
578   # this should be applied to all changeset list displays
579   def conditions_nonempty(changesets)
580     return changesets.where("num_changes > 0")
581   end
582
583   ##
584   # Get the maximum number of comments to return
585   def comments_limit
586     if params[:limit]
587       if params[:limit].to_i > 0 and params[:limit].to_i <= 10000
588         params[:limit].to_i
589       else
590         raise OSM::APIBadUserInput.new("Comments limit must be between 1 and 10000")
591       end
592     else
593       100
594     end
595   end
596 end