]> git.openstreetmap.org Git - rails.git/blob - test/controllers/api/changesets_controller_test.rb
Move api empty changeset upload test
[rails.git] / test / controllers / api / changesets_controller_test.rb
1 require "test_helper"
2
3 module Api
4   class ChangesetsControllerTest < ActionDispatch::IntegrationTest
5     ##
6     # test all routes which lead to this controller
7     def test_routes
8       assert_routing(
9         { :path => "/api/0.6/changesets", :method => :get },
10         { :controller => "api/changesets", :action => "index" }
11       )
12       assert_routing(
13         { :path => "/api/0.6/changesets.json", :method => :get },
14         { :controller => "api/changesets", :action => "index", :format => "json" }
15       )
16       assert_routing(
17         { :path => "/api/0.6/changesets", :method => :post },
18         { :controller => "api/changesets", :action => "create" }
19       )
20       assert_routing(
21         { :path => "/api/0.6/changeset/1", :method => :get },
22         { :controller => "api/changesets", :action => "show", :id => "1" }
23       )
24       assert_routing(
25         { :path => "/api/0.6/changeset/1.json", :method => :get },
26         { :controller => "api/changesets", :action => "show", :id => "1", :format => "json" }
27       )
28       assert_routing(
29         { :path => "/api/0.6/changeset/1", :method => :put },
30         { :controller => "api/changesets", :action => "update", :id => "1" }
31       )
32
33       assert_recognizes(
34         { :controller => "api/changesets", :action => "create" },
35         { :path => "/api/0.6/changeset/create", :method => :put }
36       )
37     end
38
39     ##
40     # test the query functionality of changesets
41     def test_index
42       private_user = create(:user, :data_public => false)
43       private_user_changeset = create(:changeset, :user => private_user)
44       private_user_closed_changeset = create(:changeset, :closed, :user => private_user)
45       user = create(:user)
46       changeset = create(:changeset, :user => user)
47       closed_changeset = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 1, 1, 0, 0, 0), :closed_at => Time.utc(2008, 1, 2, 0, 0, 0))
48       changeset2 = create(:changeset, :bbox => [5, 5, 15, 15])
49       changeset3 = create(:changeset, :bbox => [4.5, 4.5, 5, 5])
50
51       get api_changesets_path(:bbox => "-10,-10, 10, 10")
52       assert_response :success, "can't get changesets in bbox"
53       assert_changesets_in_order [changeset3, changeset2]
54
55       get api_changesets_path(:bbox => "4.5,4.5,4.6,4.6")
56       assert_response :success, "can't get changesets in bbox"
57       assert_changesets_in_order [changeset3]
58
59       # not found when looking for changesets of non-existing users
60       get api_changesets_path(:user => User.maximum(:id) + 1)
61       assert_response :not_found
62       assert_equal "text/plain", @response.media_type
63       get api_changesets_path(:display_name => " ")
64       assert_response :not_found
65       assert_equal "text/plain", @response.media_type
66
67       # can't get changesets of user 1 without authenticating
68       get api_changesets_path(:user => private_user.id)
69       assert_response :not_found, "shouldn't be able to get changesets by non-public user (ID)"
70       get api_changesets_path(:display_name => private_user.display_name)
71       assert_response :not_found, "shouldn't be able to get changesets by non-public user (name)"
72
73       # but this should work
74       auth_header = bearer_authorization_header private_user
75       get api_changesets_path(:user => private_user.id), :headers => auth_header
76       assert_response :success, "can't get changesets by user ID"
77       assert_changesets_in_order [private_user_changeset, private_user_closed_changeset]
78
79       get api_changesets_path(:display_name => private_user.display_name), :headers => auth_header
80       assert_response :success, "can't get changesets by user name"
81       assert_changesets_in_order [private_user_changeset, private_user_closed_changeset]
82
83       # test json endpoint
84       get api_changesets_path(:display_name => private_user.display_name), :headers => auth_header, :params => { :format => "json" }
85       assert_response :success, "can't get changesets by user name"
86
87       js = ActiveSupport::JSON.decode(@response.body)
88       assert_not_nil js
89
90       assert_equal Settings.api_version, js["version"]
91       assert_equal Settings.generator, js["generator"]
92       assert_equal 2, js["changesets"].count
93
94       # check that the correct error is given when we provide both UID and name
95       get api_changesets_path(:user => private_user.id,
96                               :display_name => private_user.display_name), :headers => auth_header
97       assert_response :bad_request, "should be a bad request to have both ID and name specified"
98
99       get api_changesets_path(:user => private_user.id, :open => true), :headers => auth_header
100       assert_response :success, "can't get changesets by user and open"
101       assert_changesets_in_order [private_user_changeset]
102
103       get api_changesets_path(:time => "2007-12-31"), :headers => auth_header
104       assert_response :success, "can't get changesets by time-since"
105       assert_changesets_in_order [changeset3, changeset2, changeset, private_user_changeset, private_user_closed_changeset, closed_changeset]
106
107       get api_changesets_path(:time => "2008-01-01T12:34Z"), :headers => auth_header
108       assert_response :success, "can't get changesets by time-since with hour"
109       assert_changesets_in_order [changeset3, changeset2, changeset, private_user_changeset, private_user_closed_changeset, closed_changeset]
110
111       get api_changesets_path(:time => "2007-12-31T23:59Z,2008-01-02T00:01Z"), :headers => auth_header
112       assert_response :success, "can't get changesets by time-range"
113       assert_changesets_in_order [closed_changeset]
114
115       get api_changesets_path(:open => "true"), :headers => auth_header
116       assert_response :success, "can't get changesets by open-ness"
117       assert_changesets_in_order [changeset3, changeset2, changeset, private_user_changeset]
118
119       get api_changesets_path(:closed => "true"), :headers => auth_header
120       assert_response :success, "can't get changesets by closed-ness"
121       assert_changesets_in_order [private_user_closed_changeset, closed_changeset]
122
123       get api_changesets_path(:closed => "true", :user => private_user.id), :headers => auth_header
124       assert_response :success, "can't get changesets by closed-ness and user"
125       assert_changesets_in_order [private_user_closed_changeset]
126
127       get api_changesets_path(:closed => "true", :user => user.id), :headers => auth_header
128       assert_response :success, "can't get changesets by closed-ness and user"
129       assert_changesets_in_order [closed_changeset]
130
131       get api_changesets_path(:changesets => "#{private_user_changeset.id},#{changeset.id},#{closed_changeset.id}"), :headers => auth_header
132       assert_response :success, "can't get changesets by id (as comma-separated string)"
133       assert_changesets_in_order [changeset, private_user_changeset, closed_changeset]
134
135       get api_changesets_path(:changesets => ""), :headers => auth_header
136       assert_response :bad_request, "should be a bad request since changesets is empty"
137     end
138
139     ##
140     # test the query functionality of changesets with the limit parameter
141     def test_index_limit
142       user = create(:user)
143       changeset1 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 1, 1, 0, 0, 0), :closed_at => Time.utc(2008, 1, 2, 0, 0, 0))
144       changeset2 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 2, 1, 0, 0, 0), :closed_at => Time.utc(2008, 2, 2, 0, 0, 0))
145       changeset3 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 3, 1, 0, 0, 0), :closed_at => Time.utc(2008, 3, 2, 0, 0, 0))
146       changeset4 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 4, 1, 0, 0, 0), :closed_at => Time.utc(2008, 4, 2, 0, 0, 0))
147       changeset5 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 5, 1, 0, 0, 0), :closed_at => Time.utc(2008, 5, 2, 0, 0, 0))
148
149       get api_changesets_path
150       assert_response :success
151       assert_changesets_in_order [changeset5, changeset4, changeset3, changeset2, changeset1]
152
153       get api_changesets_path(:limit => "3")
154       assert_response :success
155       assert_changesets_in_order [changeset5, changeset4, changeset3]
156
157       get api_changesets_path(:limit => "0")
158       assert_response :bad_request
159
160       get api_changesets_path(:limit => Settings.max_changeset_query_limit)
161       assert_response :success
162       assert_changesets_in_order [changeset5, changeset4, changeset3, changeset2, changeset1]
163
164       get api_changesets_path(:limit => Settings.max_changeset_query_limit + 1)
165       assert_response :bad_request
166     end
167
168     ##
169     # test the query functionality of sequential changesets with order and time parameters
170     def test_index_order
171       user = create(:user)
172       changeset1 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 1, 1, 0, 0, 0), :closed_at => Time.utc(2008, 1, 2, 0, 0, 0))
173       changeset2 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 2, 1, 0, 0, 0), :closed_at => Time.utc(2008, 2, 2, 0, 0, 0))
174       changeset3 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 3, 1, 0, 0, 0), :closed_at => Time.utc(2008, 3, 2, 0, 0, 0))
175       changeset4 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 4, 1, 0, 0, 0), :closed_at => Time.utc(2008, 4, 2, 0, 0, 0))
176       changeset5 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 5, 1, 0, 0, 0), :closed_at => Time.utc(2008, 5, 2, 0, 0, 0))
177       changeset6 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 6, 1, 0, 0, 0), :closed_at => Time.utc(2008, 6, 2, 0, 0, 0))
178
179       get api_changesets_path
180       assert_response :success
181       assert_changesets_in_order [changeset6, changeset5, changeset4, changeset3, changeset2, changeset1]
182
183       get api_changesets_path(:order => "oldest")
184       assert_response :success
185       assert_changesets_in_order [changeset1, changeset2, changeset3, changeset4, changeset5, changeset6]
186
187       [
188         # lower time bound at the opening time of a changeset
189         ["2008-02-01T00:00:00Z", "2008-05-15T00:00:00Z", [changeset5, changeset4, changeset3, changeset2], [changeset5, changeset4, changeset3, changeset2]],
190         # lower time bound in the middle of a changeset
191         ["2008-02-01T12:00:00Z", "2008-05-15T00:00:00Z", [changeset5, changeset4, changeset3, changeset2], [changeset5, changeset4, changeset3]],
192         # lower time bound at the closing time of a changeset
193         ["2008-02-02T00:00:00Z", "2008-05-15T00:00:00Z", [changeset5, changeset4, changeset3, changeset2], [changeset5, changeset4, changeset3]],
194         # lower time bound after the closing time of a changeset
195         ["2008-02-02T00:00:01Z", "2008-05-15T00:00:00Z", [changeset5, changeset4, changeset3], [changeset5, changeset4, changeset3]],
196         # upper time bound in the middle of a changeset
197         ["2007-09-09T12:00:00Z", "2008-04-01T12:00:00Z", [changeset4, changeset3, changeset2, changeset1], [changeset4, changeset3, changeset2, changeset1]],
198         # empty range
199         ["2009-02-02T00:00:01Z", "2018-05-15T00:00:00Z", [], []]
200       ].each do |from, to, interval_changesets, point_changesets|
201         get api_changesets_path(:time => "#{from},#{to}")
202         assert_response :success
203         assert_changesets_in_order interval_changesets
204
205         get api_changesets_path(:from => from, :to => to)
206         assert_response :success
207         assert_changesets_in_order point_changesets
208
209         get api_changesets_path(:from => from, :to => to, :order => "oldest")
210         assert_response :success
211         assert_changesets_in_order point_changesets.reverse
212       end
213     end
214
215     ##
216     # test the query functionality of overlapping changesets with order and time parameters
217     def test_index_order_overlapping
218       user = create(:user)
219       changeset1 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2015, 6, 4, 17, 0, 0), :closed_at => Time.utc(2015, 6, 4, 17, 0, 0))
220       changeset2 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2015, 6, 4, 16, 0, 0), :closed_at => Time.utc(2015, 6, 4, 18, 0, 0))
221       changeset3 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2015, 6, 4, 14, 0, 0), :closed_at => Time.utc(2015, 6, 4, 20, 0, 0))
222       changeset4 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2015, 6, 3, 23, 0, 0), :closed_at => Time.utc(2015, 6, 4, 23, 0, 0))
223       create(:changeset, :closed, :user => user, :created_at => Time.utc(2015, 6, 2, 23, 0, 0), :closed_at => Time.utc(2015, 6, 3, 23, 0, 0))
224
225       get api_changesets_path(:time => "2015-06-04T00:00:00Z")
226       assert_response :success
227       assert_changesets_in_order [changeset1, changeset2, changeset3, changeset4]
228
229       get api_changesets_path(:from => "2015-06-04T00:00:00Z")
230       assert_response :success
231       assert_changesets_in_order [changeset1, changeset2, changeset3]
232
233       get api_changesets_path(:from => "2015-06-04T00:00:00Z", :order => "oldest")
234       assert_response :success
235       assert_changesets_in_order [changeset3, changeset2, changeset1]
236
237       get api_changesets_path(:time => "2015-06-04T16:00:00Z,2015-06-04T17:30:00Z")
238       assert_response :success
239       assert_changesets_in_order [changeset1, changeset2, changeset3, changeset4]
240
241       get api_changesets_path(:from => "2015-06-04T16:00:00Z", :to => "2015-06-04T17:30:00Z")
242       assert_response :success
243       assert_changesets_in_order [changeset1, changeset2]
244
245       get api_changesets_path(:from => "2015-06-04T16:00:00Z", :to => "2015-06-04T17:30:00Z", :order => "oldest")
246       assert_response :success
247       assert_changesets_in_order [changeset2, changeset1]
248     end
249
250     ##
251     # check that errors are returned if garbage is inserted
252     # into query strings
253     def test_index_invalid
254       ["abracadabra!",
255        "1,2,3,F",
256        ";drop table users;"].each do |bbox|
257         get api_changesets_path(:bbox => bbox)
258         assert_response :bad_request, "'#{bbox}' isn't a bbox"
259       end
260
261       ["now()",
262        "00-00-00",
263        ";drop table users;",
264        ",",
265        "-,-"].each do |time|
266         get api_changesets_path(:time => time)
267         assert_response :bad_request, "'#{time}' isn't a valid time range"
268       end
269
270       ["me",
271        "foobar",
272        "-1",
273        "0"].each do |uid|
274         get api_changesets_path(:user => uid)
275         assert_response :bad_request, "'#{uid}' isn't a valid user ID"
276       end
277
278       get api_changesets_path(:order => "oldest", :time => "2008-01-01T00:00Z,2018-01-01T00:00Z")
279       assert_response :bad_request, "cannot use order=oldest with time"
280     end
281
282     # -----------------------
283     # Test simple changeset creation
284     # -----------------------
285
286     def test_create
287       auth_header = bearer_authorization_header create(:user, :data_public => false)
288       # Create the first user's changeset
289       xml = "<osm><changeset>" \
290             "<tag k='created_by' v='osm test suite checking changesets'/>" \
291             "</changeset></osm>"
292       post api_changesets_path, :params => xml, :headers => auth_header
293       assert_require_public_data
294
295       auth_header = bearer_authorization_header
296       # Create the first user's changeset
297       xml = "<osm><changeset>" \
298             "<tag k='created_by' v='osm test suite checking changesets'/>" \
299             "</changeset></osm>"
300       post api_changesets_path, :params => xml, :headers => auth_header
301
302       assert_response :success, "Creation of changeset did not return success status"
303       newid = @response.body.to_i
304
305       # check end time, should be an hour ahead of creation time
306       cs = Changeset.find(newid)
307       duration = cs.closed_at - cs.created_at
308       # the difference can either be a rational, or a floating point number
309       # of seconds, depending on the code path taken :-(
310       if duration.instance_of?(Rational)
311         assert_equal Rational(1, 24), duration, "initial idle timeout should be an hour (#{cs.created_at} -> #{cs.closed_at})"
312       else
313         # must be number of seconds...
314         assert_equal 3600, duration.round, "initial idle timeout should be an hour (#{cs.created_at} -> #{cs.closed_at})"
315       end
316
317       # checks if uploader was subscribed
318       assert_equal 1, cs.subscribers.length
319     end
320
321     def test_create_invalid
322       auth_header = bearer_authorization_header create(:user, :data_public => false)
323       xml = "<osm><changeset></osm>"
324       post api_changesets_path, :params => xml, :headers => auth_header
325       assert_require_public_data
326
327       ## Try the public user
328       auth_header = bearer_authorization_header
329       xml = "<osm><changeset></osm>"
330       post api_changesets_path, :params => xml, :headers => auth_header
331       assert_response :bad_request, "creating a invalid changeset should fail"
332     end
333
334     def test_create_invalid_no_content
335       ## First check with no auth
336       post api_changesets_path
337       assert_response :unauthorized, "shouldn't be able to create a changeset with no auth"
338
339       ## Now try to with a non-public user
340       auth_header = bearer_authorization_header create(:user, :data_public => false)
341       post api_changesets_path, :headers => auth_header
342       assert_require_public_data
343
344       ## Try an inactive user
345       auth_header = bearer_authorization_header create(:user, :pending)
346       post api_changesets_path, :headers => auth_header
347       assert_inactive_user
348
349       ## Now try to use a normal user
350       auth_header = bearer_authorization_header
351       post api_changesets_path, :headers => auth_header
352       assert_response :bad_request, "creating a changeset with no content should fail"
353     end
354
355     def test_create_wrong_method
356       auth_header = bearer_authorization_header
357
358       put api_changesets_path, :headers => auth_header
359       assert_response :not_found
360       assert_template "rescues/routing_error"
361     end
362
363     def test_create_legacy_path
364       auth_header = bearer_authorization_header
365       xml = "<osm><changeset></changeset></osm>"
366
367       assert_difference "Changeset.count", 1 do
368         put "/api/0.6/changeset/create", :params => xml, :headers => auth_header
369       end
370
371       assert_response :success, "Creation of changeset did not return success status"
372       assert_equal Changeset.last.id, @response.body.to_i
373     end
374
375     ##
376     # check that the changeset can be shown and returns the correct
377     # document structure.
378     def test_show
379       changeset = create(:changeset)
380
381       get api_changeset_path(changeset)
382       assert_response :success, "cannot get first changeset"
383
384       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
385       assert_single_changeset changeset do
386         assert_dom "> discussion", 0
387       end
388
389       get api_changeset_path(changeset, :include_discussion => true)
390       assert_response :success, "cannot get first changeset with comments"
391
392       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
393       assert_single_changeset changeset do
394         assert_dom "> discussion", 1
395         assert_dom "> discussion > comment", 0
396       end
397     end
398
399     def test_show_comments
400       # all comments visible
401       changeset = create(:changeset, :closed)
402       comment1, comment2, comment3 = create_list(:changeset_comment, 3, :changeset_id => changeset.id)
403
404       get api_changeset_path(changeset, :include_discussion => true)
405       assert_response :success, "cannot get closed changeset with comments"
406
407       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1 do
408         assert_single_changeset changeset do
409           assert_dom "> discussion", 1 do
410             assert_dom "> comment", 3 do |dom_comments|
411               assert_dom dom_comments[0], "> @id", comment1.id.to_s
412               assert_dom dom_comments[0], "> @visible", "true"
413               assert_dom dom_comments[1], "> @id", comment2.id.to_s
414               assert_dom dom_comments[1], "> @visible", "true"
415               assert_dom dom_comments[2], "> @id", comment3.id.to_s
416               assert_dom dom_comments[2], "> @visible", "true"
417             end
418           end
419         end
420       end
421
422       # one hidden comment not included because not asked for
423       comment2.update(:visible => false)
424       changeset.reload
425
426       get api_changeset_path(changeset, :include_discussion => true)
427       assert_response :success, "cannot get closed changeset with comments"
428
429       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
430       assert_single_changeset changeset do
431         assert_dom "> discussion", 1 do
432           assert_dom "> comment", 2 do |dom_comments|
433             assert_dom dom_comments[0], "> @id", comment1.id.to_s
434             assert_dom dom_comments[0], "> @visible", "true"
435             assert_dom dom_comments[1], "> @id", comment3.id.to_s
436             assert_dom dom_comments[1], "> @visible", "true"
437           end
438         end
439       end
440
441       # one hidden comment not included because no permissions
442       get api_changeset_path(changeset, :include_discussion => true, :show_hidden_comments => true)
443       assert_response :success, "cannot get closed changeset with comments"
444
445       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
446       assert_single_changeset changeset do
447         assert_dom "> discussion", 1 do
448           assert_dom "> comment", 2 do |dom_comments|
449             assert_dom dom_comments[0], "> @id", comment1.id.to_s
450             assert_dom dom_comments[0], "> @visible", "true"
451             # maybe will show an empty comment element with visible=false in the future
452             assert_dom dom_comments[1], "> @id", comment3.id.to_s
453             assert_dom dom_comments[1], "> @visible", "true"
454           end
455         end
456       end
457
458       # one hidden comment shown to moderators
459       moderator_user = create(:moderator_user)
460       auth_header = bearer_authorization_header moderator_user
461       get api_changeset_path(changeset, :include_discussion => true, :show_hidden_comments => true), :headers => auth_header
462       assert_response :success, "cannot get closed changeset with comments"
463
464       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
465       assert_single_changeset changeset do
466         assert_dom "> discussion", 1 do
467           assert_dom "> comment", 3 do |dom_comments|
468             assert_dom dom_comments[0], "> @id", comment1.id.to_s
469             assert_dom dom_comments[0], "> @visible", "true"
470             assert_dom dom_comments[1], "> @id", comment2.id.to_s
471             assert_dom dom_comments[1], "> @visible", "false"
472             assert_dom dom_comments[2], "> @id", comment3.id.to_s
473             assert_dom dom_comments[2], "> @visible", "true"
474           end
475         end
476       end
477     end
478
479     def test_show_tags
480       changeset = create(:changeset, :closed)
481       create(:changeset_tag, :changeset => changeset, :k => "created_by", :v => "JOSM/1.5 (18364)")
482       create(:changeset_tag, :changeset => changeset, :k => "comment", :v => "changeset comment")
483
484       get api_changeset_path(changeset)
485
486       assert_response :success
487       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
488       assert_single_changeset changeset do
489         assert_dom "> tag", 2
490         assert_dom "> tag[k='created_by'][v='JOSM/1.5 (18364)']", 1
491         assert_dom "> tag[k='comment'][v='changeset comment']", 1
492       end
493     end
494
495     def test_show_json
496       changeset = create(:changeset)
497
498       get api_changeset_path(changeset, :format => "json")
499       assert_response :success, "cannot get first changeset"
500
501       js = ActiveSupport::JSON.decode(@response.body)
502       assert_not_nil js
503
504       assert_equal Settings.api_version, js["version"]
505       assert_equal Settings.generator, js["generator"]
506       assert_single_changeset_json changeset, js
507       assert_nil js["changeset"]["tags"]
508       assert_nil js["changeset"]["comments"]
509       assert_equal changeset.user.id, js["changeset"]["uid"]
510       assert_equal changeset.user.display_name, js["changeset"]["user"]
511
512       get api_changeset_path(changeset, :format => "json", :include_discussion => true)
513       assert_response :success, "cannot get first changeset with comments"
514
515       js = ActiveSupport::JSON.decode(@response.body)
516       assert_not_nil js
517       assert_equal Settings.api_version, js["version"]
518       assert_equal Settings.generator, js["generator"]
519       assert_single_changeset_json changeset, js
520       assert_nil js["changeset"]["tags"]
521       assert_nil js["changeset"]["min_lat"]
522       assert_nil js["changeset"]["min_lon"]
523       assert_nil js["changeset"]["max_lat"]
524       assert_nil js["changeset"]["max_lon"]
525       assert_equal 0, js["changeset"]["comments"].count
526     end
527
528     def test_show_comments_json
529       # all comments visible
530       changeset = create(:changeset, :closed)
531       comment0, comment1, comment2 = create_list(:changeset_comment, 3, :changeset_id => changeset.id)
532
533       get api_changeset_path(changeset, :format => "json", :include_discussion => true)
534       assert_response :success, "cannot get closed changeset with comments"
535
536       js = ActiveSupport::JSON.decode(@response.body)
537       assert_not_nil js
538       assert_equal Settings.api_version, js["version"]
539       assert_equal Settings.generator, js["generator"]
540       assert_single_changeset_json changeset, js
541       assert_equal 3, js["changeset"]["comments"].count
542       assert_equal comment0.id, js["changeset"]["comments"][0]["id"]
543       assert js["changeset"]["comments"][0]["visible"]
544       assert_equal comment1.id, js["changeset"]["comments"][1]["id"]
545       assert js["changeset"]["comments"][1]["visible"]
546       assert_equal comment2.id, js["changeset"]["comments"][2]["id"]
547       assert js["changeset"]["comments"][2]["visible"]
548
549       # one hidden comment not included because not asked for
550       comment1.update(:visible => false)
551       changeset.reload
552
553       get api_changeset_path(changeset, :format => "json", :include_discussion => true)
554       assert_response :success, "cannot get closed changeset with comments"
555
556       js = ActiveSupport::JSON.decode(@response.body)
557       assert_not_nil js
558       assert_equal Settings.api_version, js["version"]
559       assert_equal Settings.generator, js["generator"]
560       assert_single_changeset_json changeset, js
561       assert_equal 2, js["changeset"]["comments"].count
562       assert_equal comment0.id, js["changeset"]["comments"][0]["id"]
563       assert js["changeset"]["comments"][0]["visible"]
564       assert_equal comment2.id, js["changeset"]["comments"][1]["id"]
565       assert js["changeset"]["comments"][1]["visible"]
566
567       # one hidden comment not included because no permissions
568       get api_changeset_path(changeset, :format => "json", :include_discussion => true, :show_hidden_comments => true)
569       assert_response :success, "cannot get closed changeset with comments"
570
571       js = ActiveSupport::JSON.decode(@response.body)
572       assert_not_nil js
573       assert_equal Settings.api_version, js["version"]
574       assert_equal Settings.generator, js["generator"]
575       assert_single_changeset_json changeset, js
576       assert_equal 2, js["changeset"]["comments"].count
577       assert_equal comment0.id, js["changeset"]["comments"][0]["id"]
578       assert js["changeset"]["comments"][0]["visible"]
579       # maybe will show an empty comment element with visible=false in the future
580       assert_equal comment2.id, js["changeset"]["comments"][1]["id"]
581       assert js["changeset"]["comments"][1]["visible"]
582
583       # one hidden comment shown to moderators
584       moderator_user = create(:moderator_user)
585       auth_header = bearer_authorization_header moderator_user
586       get api_changeset_path(changeset, :format => "json", :include_discussion => true, :show_hidden_comments => true), :headers => auth_header
587       assert_response :success, "cannot get closed changeset with comments"
588
589       js = ActiveSupport::JSON.decode(@response.body)
590       assert_not_nil js
591       assert_equal Settings.api_version, js["version"]
592       assert_equal Settings.generator, js["generator"]
593       assert_single_changeset_json changeset, js
594       assert_equal 3, js["changeset"]["comments"].count
595       assert_equal comment0.id, js["changeset"]["comments"][0]["id"]
596       assert js["changeset"]["comments"][0]["visible"]
597       assert_equal comment1.id, js["changeset"]["comments"][1]["id"]
598       assert_not js["changeset"]["comments"][1]["visible"]
599       assert_equal comment2.id, js["changeset"]["comments"][2]["id"]
600       assert js["changeset"]["comments"][2]["visible"]
601     end
602
603     def test_show_tags_json
604       changeset = create(:changeset, :closed)
605       create(:changeset_tag, :changeset => changeset, :k => "created_by", :v => "JOSM/1.5 (18364)")
606       create(:changeset_tag, :changeset => changeset, :k => "comment", :v => "changeset comment")
607
608       get api_changeset_path(changeset, :format => "json")
609
610       assert_response :success
611       js = ActiveSupport::JSON.decode(@response.body)
612       assert_not_nil js
613       assert_equal Settings.api_version, js["version"]
614       assert_equal Settings.generator, js["generator"]
615       assert_single_changeset_json changeset, js
616       assert_equal 2, js["changeset"]["tags"].count
617       assert_equal "JOSM/1.5 (18364)", js["changeset"]["tags"]["created_by"]
618       assert_equal "changeset comment", js["changeset"]["tags"]["comment"]
619     end
620
621     def test_show_bbox_json
622       changeset = create(:changeset, :bbox => [5, -5, 12, 15])
623
624       get api_changeset_path(changeset, :format => "json")
625       assert_response :success, "cannot get first changeset"
626
627       js = ActiveSupport::JSON.decode(@response.body)
628       assert_not_nil js
629       assert_equal(-5, js["changeset"]["min_lat"])
630       assert_equal 5, js["changeset"]["min_lon"]
631       assert_equal 15, js["changeset"]["max_lat"]
632       assert_equal 12, js["changeset"]["max_lon"]
633     end
634
635     ##
636     # check that a changeset that doesn't exist returns an appropriate message
637     def test_show_not_found
638       [0, -32, 233455644, "afg", "213"].each do |id|
639         get api_changeset_path(id)
640         assert_response :not_found, "should get a not found"
641       rescue ActionController::UrlGenerationError => e
642         assert_match(/No route matches/, e.to_s)
643       end
644     end
645
646     def test_repeated_changeset_create
647       3.times do
648         auth_header = bearer_authorization_header
649
650         # create a temporary changeset
651         xml = "<osm><changeset>" \
652               "<tag k='created_by' v='osm test suite checking changesets'/>" \
653               "</changeset></osm>"
654         assert_difference "Changeset.count", 1 do
655           post api_changesets_path, :params => xml, :headers => auth_header
656         end
657         assert_response :success
658       end
659     end
660
661     def test_upload_large_changeset
662       user = create(:user)
663       auth_header = bearer_authorization_header user
664
665       # create an old changeset to ensure we have the maximum rate limit
666       create(:changeset, :user => user, :created_at => Time.now.utc - 28.days)
667
668       # create a changeset
669       post api_changesets_path, :params => "<osm><changeset/></osm>", :headers => auth_header
670       assert_response :success, "Should be able to create a changeset: #{@response.body}"
671       changeset_id = @response.body.to_i
672
673       # upload some widely-spaced nodes, spiralling positive and negative
674       diff = <<~CHANGESET
675         <osmChange>
676          <create>
677           <node id='-1' lon='-20' lat='-10' changeset='#{changeset_id}'/>
678           <node id='-10' lon='20'  lat='10' changeset='#{changeset_id}'/>
679           <node id='-2' lon='-40' lat='-20' changeset='#{changeset_id}'/>
680           <node id='-11' lon='40'  lat='20' changeset='#{changeset_id}'/>
681           <node id='-3' lon='-60' lat='-30' changeset='#{changeset_id}'/>
682           <node id='-12' lon='60'  lat='30' changeset='#{changeset_id}'/>
683           <node id='-4' lon='-80' lat='-40' changeset='#{changeset_id}'/>
684           <node id='-13' lon='80'  lat='40' changeset='#{changeset_id}'/>
685           <node id='-5' lon='-100' lat='-50' changeset='#{changeset_id}'/>
686           <node id='-14' lon='100'  lat='50' changeset='#{changeset_id}'/>
687           <node id='-6' lon='-120' lat='-60' changeset='#{changeset_id}'/>
688           <node id='-15' lon='120'  lat='60' changeset='#{changeset_id}'/>
689           <node id='-7' lon='-140' lat='-70' changeset='#{changeset_id}'/>
690           <node id='-16' lon='140'  lat='70' changeset='#{changeset_id}'/>
691           <node id='-8' lon='-160' lat='-80' changeset='#{changeset_id}'/>
692           <node id='-17' lon='160'  lat='80' changeset='#{changeset_id}'/>
693           <node id='-9' lon='-179.9' lat='-89.9' changeset='#{changeset_id}'/>
694           <node id='-18' lon='179.9'  lat='89.9' changeset='#{changeset_id}'/>
695          </create>
696         </osmChange>
697       CHANGESET
698
699       # upload it, which used to cause an error like "PGError: ERROR:
700       # integer out of range" (bug #2152). but shouldn't any more.
701       post api_changeset_upload_path(changeset_id), :params => diff, :headers => auth_header
702       assert_response :success,
703                       "can't upload a spatially-large diff to changeset: #{@response.body}"
704
705       # check that the changeset bbox is within bounds
706       cs = Changeset.find(changeset_id)
707       assert_operator cs.min_lon, :>=, -180 * GeoRecord::SCALE, "Minimum longitude (#{cs.min_lon / GeoRecord::SCALE}) should be >= -180 to be valid."
708       assert_operator cs.max_lon, :<=, 180 * GeoRecord::SCALE, "Maximum longitude (#{cs.max_lon / GeoRecord::SCALE}) should be <= 180 to be valid."
709       assert_operator cs.min_lat, :>=, -90 * GeoRecord::SCALE, "Minimum latitude (#{cs.min_lat / GeoRecord::SCALE}) should be >= -90 to be valid."
710       assert_operator cs.max_lat, :<=, 90 * GeoRecord::SCALE, "Maximum latitude (#{cs.max_lat / GeoRecord::SCALE}) should be <= 90 to be valid."
711     end
712
713     ##
714     # test what happens if a diff is uploaded containing only a node
715     # move.
716     def test_upload_node_move
717       auth_header = bearer_authorization_header
718
719       xml = "<osm><changeset>" \
720             "<tag k='created_by' v='osm test suite checking changesets'/>" \
721             "</changeset></osm>"
722       post api_changesets_path, :params => xml, :headers => auth_header
723       assert_response :success
724       changeset_id = @response.body.to_i
725
726       old_node = create(:node, :lat => 1, :lon => 1)
727
728       diff = XML::Document.new
729       diff.root = XML::Node.new "osmChange"
730       modify = XML::Node.new "modify"
731       xml_old_node = xml_node_for_node(old_node)
732       xml_old_node["lat"] = 2.0.to_s
733       xml_old_node["lon"] = 2.0.to_s
734       xml_old_node["changeset"] = changeset_id.to_s
735       modify << xml_old_node
736       diff.root << modify
737
738       # upload it
739       post api_changeset_upload_path(changeset_id), :params => diff.to_s, :headers => auth_header
740       assert_response :success,
741                       "diff should have uploaded OK"
742
743       # check the bbox
744       changeset = Changeset.find(changeset_id)
745       assert_equal 1 * GeoRecord::SCALE, changeset.min_lon, "min_lon should be 1 degree"
746       assert_equal 2 * GeoRecord::SCALE, changeset.max_lon, "max_lon should be 2 degrees"
747       assert_equal 1 * GeoRecord::SCALE, changeset.min_lat, "min_lat should be 1 degree"
748       assert_equal 2 * GeoRecord::SCALE, changeset.max_lat, "max_lat should be 2 degrees"
749     end
750
751     ##
752     # test what happens if a diff is uploaded adding a node to a way.
753     def test_upload_way_extend
754       auth_header = bearer_authorization_header
755
756       xml = "<osm><changeset>" \
757             "<tag k='created_by' v='osm test suite checking changesets'/>" \
758             "</changeset></osm>"
759       post api_changesets_path, :params => xml, :headers => auth_header
760       assert_response :success
761       changeset_id = @response.body.to_i
762
763       old_way = create(:way)
764       create(:way_node, :way => old_way, :node => create(:node, :lat => 0.1, :lon => 0.1))
765
766       diff = XML::Document.new
767       diff.root = XML::Node.new "osmChange"
768       modify = XML::Node.new "modify"
769       xml_old_way = xml_node_for_way(old_way)
770       nd_ref = XML::Node.new "nd"
771       nd_ref["ref"] = create(:node, :lat => 0.3, :lon => 0.3).id.to_s
772       xml_old_way << nd_ref
773       xml_old_way["changeset"] = changeset_id.to_s
774       modify << xml_old_way
775       diff.root << modify
776
777       # upload it
778       post api_changeset_upload_path(changeset_id), :params => diff.to_s, :headers => auth_header
779       assert_response :success,
780                       "diff should have uploaded OK"
781
782       # check the bbox
783       changeset = Changeset.find(changeset_id)
784       assert_equal 0.1 * GeoRecord::SCALE, changeset.min_lon, "min_lon should be 0.1 degree"
785       assert_equal 0.3 * GeoRecord::SCALE, changeset.max_lon, "max_lon should be 0.3 degrees"
786       assert_equal 0.1 * GeoRecord::SCALE, changeset.min_lat, "min_lat should be 0.1 degree"
787       assert_equal 0.3 * GeoRecord::SCALE, changeset.max_lat, "max_lat should be 0.3 degrees"
788     end
789
790     ##
791     # test that the X-Error-Format header works to request XML errors
792     def test_upload_xml_errors
793       changeset = create(:changeset)
794       node = create(:node)
795       create(:relation_member, :member => node)
796
797       auth_header = bearer_authorization_header changeset.user
798
799       # try and delete a node that is in use
800       diff = XML::Document.new
801       diff.root = XML::Node.new "osmChange"
802       delete = XML::Node.new "delete"
803       diff.root << delete
804       delete << xml_node_for_node(node)
805
806       # upload it
807       error_header = error_format_header "xml"
808       post api_changeset_upload_path(changeset), :params => diff.to_s, :headers => auth_header.merge(error_header)
809       assert_response :success,
810                       "failed to return error in XML format"
811
812       # check the returned payload
813       assert_select "osmError[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
814       assert_select "osmError>status", 1
815       assert_select "osmError>message", 1
816     end
817
818     def test_upload_not_found
819       changeset = create(:changeset)
820
821       auth_header = bearer_authorization_header changeset.user
822
823       # modify node
824       diff = <<~CHANGESET
825         <osmChange>
826         <modify>
827           <node id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
828         </modify>
829         </osmChange>
830       CHANGESET
831
832       # upload it
833       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
834       assert_response :not_found, "Node should not be found"
835
836       # modify way
837       diff = <<~CHANGESET
838         <osmChange>
839         <modify>
840           <way id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
841         </modify>
842         </osmChange>
843       CHANGESET
844
845       # upload it
846       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
847       assert_response :not_found, "Way should not be found"
848
849       # modify relation
850       diff = <<~CHANGESET
851         <osmChange>
852         <modify>
853           <relation id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
854         </modify>
855         </osmChange>
856       CHANGESET
857
858       # upload it
859       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
860       assert_response :not_found, "Relation should not be found"
861
862       # delete node
863       diff = <<~CHANGESET
864         <osmChange>
865         <delete>
866           <node id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
867         </delete>
868         </osmChange>
869       CHANGESET
870
871       # upload it
872       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
873       assert_response :not_found, "Node should not be deleted"
874
875       # delete way
876       diff = <<~CHANGESET
877         <osmChange>
878         <delete>
879           <way id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
880         </delete>
881         </osmChange>
882       CHANGESET
883
884       # upload it
885       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
886       assert_response :not_found, "Way should not be deleted"
887
888       # delete relation
889       diff = <<~CHANGESET
890         <osmChange>
891         <delete>
892           <relation id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
893         </delete>
894         </osmChange>
895       CHANGESET
896
897       # upload it
898       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
899       assert_response :not_found, "Relation should not be deleted"
900     end
901
902     ##
903     # test initial rate limit
904     def test_upload_initial_rate_limit
905       # create a user
906       user = create(:user)
907
908       # create some objects to use
909       node = create(:node)
910       way = create(:way_with_nodes, :nodes_count => 2)
911       relation = create(:relation)
912
913       # create a changeset that puts us near the initial rate limit
914       changeset = create(:changeset, :user => user,
915                                      :created_at => Time.now.utc - 5.minutes,
916                                      :num_changes => Settings.initial_changes_per_hour - 2)
917
918       # create authentication header
919       auth_header = bearer_authorization_header user
920
921       # simple diff to create a node way and relation using placeholders
922       diff = <<~CHANGESET
923         <osmChange>
924          <create>
925           <node id='-1' lon='0' lat='0' changeset='#{changeset.id}'>
926            <tag k='foo' v='bar'/>
927            <tag k='baz' v='bat'/>
928           </node>
929           <way id='-1' changeset='#{changeset.id}'>
930            <nd ref='#{node.id}'/>
931           </way>
932          </create>
933          <create>
934           <relation id='-1' changeset='#{changeset.id}'>
935            <member type='way' role='some' ref='#{way.id}'/>
936            <member type='node' role='some' ref='#{node.id}'/>
937            <member type='relation' role='some' ref='#{relation.id}'/>
938           </relation>
939          </create>
940         </osmChange>
941       CHANGESET
942
943       # upload it
944       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
945       assert_response :too_many_requests, "upload did not hit rate limit"
946     end
947
948     ##
949     # test maximum rate limit
950     def test_upload_maximum_rate_limit
951       # create a user
952       user = create(:user)
953
954       # create some objects to use
955       node = create(:node)
956       way = create(:way_with_nodes, :nodes_count => 2)
957       relation = create(:relation)
958
959       # create a changeset to establish our initial edit time
960       changeset = create(:changeset, :user => user,
961                                      :created_at => Time.now.utc - 28.days)
962
963       # create changeset to put us near the maximum rate limit
964       total_changes = Settings.max_changes_per_hour - 2
965       while total_changes.positive?
966         changes = [total_changes, Changeset::MAX_ELEMENTS].min
967         changeset = create(:changeset, :user => user,
968                                        :created_at => Time.now.utc - 5.minutes,
969                                        :num_changes => changes)
970         total_changes -= changes
971       end
972
973       # create authentication header
974       auth_header = bearer_authorization_header user
975
976       # simple diff to create a node way and relation using placeholders
977       diff = <<~CHANGESET
978         <osmChange>
979          <create>
980           <node id='-1' lon='0' lat='0' changeset='#{changeset.id}'>
981            <tag k='foo' v='bar'/>
982            <tag k='baz' v='bat'/>
983           </node>
984           <way id='-1' changeset='#{changeset.id}'>
985            <nd ref='#{node.id}'/>
986           </way>
987          </create>
988          <create>
989           <relation id='-1' changeset='#{changeset.id}'>
990            <member type='way' role='some' ref='#{way.id}'/>
991            <member type='node' role='some' ref='#{node.id}'/>
992            <member type='relation' role='some' ref='#{relation.id}'/>
993           </relation>
994          </create>
995         </osmChange>
996       CHANGESET
997
998       # upload it
999       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1000       assert_response :too_many_requests, "upload did not hit rate limit"
1001     end
1002
1003     ##
1004     # test initial size limit
1005     def test_upload_initial_size_limit
1006       # create a user
1007       user = create(:user)
1008
1009       # create a changeset that puts us near the initial size limit
1010       changeset = create(:changeset, :user => user,
1011                                      :min_lat => (-0.5 * GeoRecord::SCALE).round, :min_lon => (0.5 * GeoRecord::SCALE).round,
1012                                      :max_lat => (0.5 * GeoRecord::SCALE).round, :max_lon => (2.5 * GeoRecord::SCALE).round)
1013
1014       # create authentication header
1015       auth_header = bearer_authorization_header user
1016
1017       # simple diff to create a node
1018       diff = <<~CHANGESET
1019         <osmChange>
1020          <create>
1021           <node id='-1' lon='0.9' lat='2.9' changeset='#{changeset.id}'>
1022            <tag k='foo' v='bar'/>
1023            <tag k='baz' v='bat'/>
1024           </node>
1025          </create>
1026         </osmChange>
1027       CHANGESET
1028
1029       # upload it
1030       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1031       assert_response :payload_too_large, "upload did not hit size limit"
1032     end
1033
1034     ##
1035     # test size limit after one week
1036     def test_upload_week_size_limit
1037       # create a user
1038       user = create(:user)
1039
1040       # create a changeset to establish our initial edit time
1041       create(:changeset, :user => user, :created_at => Time.now.utc - 7.days)
1042
1043       # create a changeset that puts us near the initial size limit
1044       changeset = create(:changeset, :user => user, :bbox => [0.5, -0.5, 2.5, 0.5])
1045
1046       # create authentication header
1047       auth_header = bearer_authorization_header user
1048
1049       # simple diff to create a node way and relation using placeholders
1050       diff = <<~CHANGESET
1051         <osmChange>
1052          <create>
1053           <node id='-1' lon='35' lat='35' changeset='#{changeset.id}'>
1054            <tag k='foo' v='bar'/>
1055            <tag k='baz' v='bat'/>
1056           </node>
1057          </create>
1058         </osmChange>
1059       CHANGESET
1060
1061       # upload it
1062       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1063       assert_response :payload_too_large, "upload did not hit size limit"
1064     end
1065
1066     ##
1067     # when we make some simple changes we get the same changes back from the
1068     # diff download.
1069     def test_diff_download_simple
1070       node = create(:node)
1071
1072       ## First try with a non-public user, which should get a forbidden
1073       auth_header = bearer_authorization_header create(:user, :data_public => false)
1074
1075       # create a temporary changeset
1076       xml = "<osm><changeset>" \
1077             "<tag k='created_by' v='osm test suite checking changesets'/>" \
1078             "</changeset></osm>"
1079       post api_changesets_path, :params => xml, :headers => auth_header
1080       assert_response :forbidden
1081
1082       ## Now try with a normal user
1083       auth_header = bearer_authorization_header
1084
1085       # create a temporary changeset
1086       xml = "<osm><changeset>" \
1087             "<tag k='created_by' v='osm test suite checking changesets'/>" \
1088             "</changeset></osm>"
1089       post api_changesets_path, :params => xml, :headers => auth_header
1090       assert_response :success
1091       changeset_id = @response.body.to_i
1092
1093       # add a diff to it
1094       diff = <<~CHANGESET
1095         <osmChange>
1096          <modify>
1097           <node id='#{node.id}' lon='0.0' lat='0.0' changeset='#{changeset_id}' version='1'/>
1098           <node id='#{node.id}' lon='0.1' lat='0.0' changeset='#{changeset_id}' version='2'/>
1099           <node id='#{node.id}' lon='0.1' lat='0.1' changeset='#{changeset_id}' version='3'/>
1100           <node id='#{node.id}' lon='0.1' lat='0.2' changeset='#{changeset_id}' version='4'/>
1101           <node id='#{node.id}' lon='0.2' lat='0.2' changeset='#{changeset_id}' version='5'/>
1102           <node id='#{node.id}' lon='0.3' lat='0.2' changeset='#{changeset_id}' version='6'/>
1103           <node id='#{node.id}' lon='0.3' lat='0.3' changeset='#{changeset_id}' version='7'/>
1104           <node id='#{node.id}' lon='0.9' lat='0.9' changeset='#{changeset_id}' version='8'/>
1105          </modify>
1106         </osmChange>
1107       CHANGESET
1108
1109       # upload it
1110       post api_changeset_upload_path(changeset_id), :params => diff, :headers => auth_header
1111       assert_response :success,
1112                       "can't upload multiple versions of an element in a diff: #{@response.body}"
1113
1114       get api_changeset_download_path(changeset_id)
1115       assert_response :success
1116
1117       assert_select "osmChange", 1
1118       assert_select "osmChange>modify", 8
1119       assert_select "osmChange>modify>node", 8
1120     end
1121
1122     ##
1123     # culled this from josm to ensure that nothing in the way that josm
1124     # is formatting the request is causing it to fail.
1125     #
1126     # NOTE: the error turned out to be something else completely!
1127     def test_josm_upload
1128       auth_header = bearer_authorization_header
1129
1130       # create a temporary changeset
1131       xml = "<osm><changeset>" \
1132             "<tag k='created_by' v='osm test suite checking changesets'/>" \
1133             "</changeset></osm>"
1134       post api_changesets_path, :params => xml, :headers => auth_header
1135       assert_response :success
1136       changeset_id = @response.body.to_i
1137
1138       diff = <<~OSMFILE
1139         <osmChange version="0.6" generator="JOSM">
1140         <create version="0.6" generator="JOSM">
1141           <node id='-1' visible='true' changeset='#{changeset_id}' lat='51.49619982187321' lon='-0.18722061869438314' />
1142           <node id='-2' visible='true' changeset='#{changeset_id}' lat='51.496359883909605' lon='-0.18653093576241928' />
1143           <node id='-3' visible='true' changeset='#{changeset_id}' lat='51.49598132358285' lon='-0.18719613290981638' />
1144           <node id='-4' visible='true' changeset='#{changeset_id}' lat='51.4961591711078' lon='-0.18629015888084607' />
1145           <node id='-5' visible='true' changeset='#{changeset_id}' lat='51.49582126021711' lon='-0.18708186591517145' />
1146           <node id='-6' visible='true' changeset='#{changeset_id}' lat='51.49591018437858' lon='-0.1861432441734455' />
1147           <node id='-7' visible='true' changeset='#{changeset_id}' lat='51.49560784152179' lon='-0.18694719410005425' />
1148           <node id='-8' visible='true' changeset='#{changeset_id}' lat='51.49567389979617' lon='-0.1860289771788006' />
1149           <node id='-9' visible='true' changeset='#{changeset_id}' lat='51.49543761398892' lon='-0.186820684213126' />
1150           <way id='-10' action='modify' visible='true' changeset='#{changeset_id}'>
1151             <nd ref='-1' />
1152             <nd ref='-2' />
1153             <nd ref='-3' />
1154             <nd ref='-4' />
1155             <nd ref='-5' />
1156             <nd ref='-6' />
1157             <nd ref='-7' />
1158             <nd ref='-8' />
1159             <nd ref='-9' />
1160             <tag k='highway' v='residential' />
1161             <tag k='name' v='Foobar Street' />
1162           </way>
1163         </create>
1164         </osmChange>
1165       OSMFILE
1166
1167       # upload it
1168       post api_changeset_upload_path(changeset_id), :params => diff, :headers => auth_header
1169       assert_response :success,
1170                       "can't upload a diff from JOSM: #{@response.body}"
1171
1172       get api_changeset_download_path(changeset_id)
1173       assert_response :success
1174
1175       assert_select "osmChange", 1
1176       assert_select "osmChange>create>node", 9
1177       assert_select "osmChange>create>way", 1
1178       assert_select "osmChange>create>way>nd", 9
1179       assert_select "osmChange>create>way>tag", 2
1180     end
1181
1182     ##
1183     # when we make some complex changes we get the same changes back from the
1184     # diff download.
1185     def test_diff_download_complex
1186       node = create(:node)
1187       node2 = create(:node)
1188       way = create(:way)
1189       auth_header = bearer_authorization_header
1190
1191       # create a temporary changeset
1192       xml = "<osm><changeset>" \
1193             "<tag k='created_by' v='osm test suite checking changesets'/>" \
1194             "</changeset></osm>"
1195       post api_changesets_path, :params => xml, :headers => auth_header
1196       assert_response :success
1197       changeset_id = @response.body.to_i
1198
1199       # add a diff to it
1200       diff = <<~CHANGESET
1201         <osmChange>
1202          <delete>
1203           <node id='#{node.id}' lon='0.0' lat='0.0' changeset='#{changeset_id}' version='1'/>
1204          </delete>
1205          <create>
1206           <node id='-1' lon='0.9' lat='0.9' changeset='#{changeset_id}' version='0'/>
1207           <node id='-2' lon='0.8' lat='0.9' changeset='#{changeset_id}' version='0'/>
1208           <node id='-3' lon='0.7' lat='0.9' changeset='#{changeset_id}' version='0'/>
1209          </create>
1210          <modify>
1211           <node id='#{node2.id}' lon='2.0' lat='1.5' changeset='#{changeset_id}' version='1'/>
1212           <way id='#{way.id}' changeset='#{changeset_id}' version='1'>
1213            <nd ref='#{node2.id}'/>
1214            <nd ref='-1'/>
1215            <nd ref='-2'/>
1216            <nd ref='-3'/>
1217           </way>
1218          </modify>
1219         </osmChange>
1220       CHANGESET
1221
1222       # upload it
1223       post api_changeset_upload_path(changeset_id), :params => diff, :headers => auth_header
1224       assert_response :success,
1225                       "can't upload multiple versions of an element in a diff: #{@response.body}"
1226
1227       get api_changeset_download_path(changeset_id)
1228       assert_response :success
1229
1230       assert_select "osmChange", 1
1231       assert_select "osmChange>create", 3
1232       assert_select "osmChange>delete", 1
1233       assert_select "osmChange>modify", 2
1234       assert_select "osmChange>create>node", 3
1235       assert_select "osmChange>delete>node", 1
1236       assert_select "osmChange>modify>node", 1
1237       assert_select "osmChange>modify>way", 1
1238     end
1239
1240     ##
1241     # check that the bounding box of a changeset gets updated correctly
1242     # FIXME: This should really be moded to a integration test due to the with_controller
1243     def test_changeset_bbox
1244       way = create(:way)
1245       create(:way_node, :way => way, :node => create(:node, :lat => 0.3, :lon => 0.3))
1246
1247       auth_header = bearer_authorization_header
1248
1249       # create a new changeset
1250       xml = "<osm><changeset/></osm>"
1251       post api_changesets_path, :params => xml, :headers => auth_header
1252       assert_response :success, "Creating of changeset failed."
1253       changeset_id = @response.body.to_i
1254
1255       # add a single node to it
1256       with_controller(NodesController.new) do
1257         xml = "<osm><node lon='0.1' lat='0.2' changeset='#{changeset_id}'/></osm>"
1258         post api_nodes_path, :params => xml, :headers => auth_header
1259         assert_response :success, "Couldn't create node."
1260       end
1261
1262       # get the bounding box back from the changeset
1263       get api_changeset_path(changeset_id)
1264       assert_response :success, "Couldn't read back changeset."
1265       assert_select "osm>changeset[min_lon='0.1000000']", 1
1266       assert_select "osm>changeset[max_lon='0.1000000']", 1
1267       assert_select "osm>changeset[min_lat='0.2000000']", 1
1268       assert_select "osm>changeset[max_lat='0.2000000']", 1
1269
1270       # add another node to it
1271       with_controller(NodesController.new) do
1272         xml = "<osm><node lon='0.2' lat='0.1' changeset='#{changeset_id}'/></osm>"
1273         post api_nodes_path, :params => xml, :headers => auth_header
1274         assert_response :success, "Couldn't create second node."
1275       end
1276
1277       # get the bounding box back from the changeset
1278       get api_changeset_path(changeset_id)
1279       assert_response :success, "Couldn't read back changeset for the second time."
1280       assert_select "osm>changeset[min_lon='0.1000000']", 1
1281       assert_select "osm>changeset[max_lon='0.2000000']", 1
1282       assert_select "osm>changeset[min_lat='0.1000000']", 1
1283       assert_select "osm>changeset[max_lat='0.2000000']", 1
1284
1285       # add (delete) a way to it, which contains a point at (3,3)
1286       with_controller(WaysController.new) do
1287         xml = update_changeset(xml_for_way(way), changeset_id)
1288         delete api_way_path(way), :params => xml.to_s, :headers => auth_header
1289         assert_response :success, "Couldn't delete a way."
1290       end
1291
1292       # get the bounding box back from the changeset
1293       get api_changeset_path(changeset_id)
1294       assert_response :success, "Couldn't read back changeset for the third time."
1295       assert_select "osm>changeset[min_lon='0.1000000']", 1
1296       assert_select "osm>changeset[max_lon='0.3000000']", 1
1297       assert_select "osm>changeset[min_lat='0.1000000']", 1
1298       assert_select "osm>changeset[max_lat='0.3000000']", 1
1299     end
1300
1301     ##
1302     # check updating tags on a changeset
1303     def test_changeset_update
1304       private_user = create(:user, :data_public => false)
1305       private_changeset = create(:changeset, :user => private_user)
1306       user = create(:user)
1307       changeset = create(:changeset, :user => user)
1308
1309       ## First try with a non-public user
1310       new_changeset = create_changeset_xml(:user => private_user)
1311       new_tag = XML::Node.new "tag"
1312       new_tag["k"] = "tagtesting"
1313       new_tag["v"] = "valuetesting"
1314       new_changeset.find("//osm/changeset").first << new_tag
1315
1316       # try without any authorization
1317       put api_changeset_path(private_changeset), :params => new_changeset.to_s
1318       assert_response :unauthorized
1319
1320       # try with the wrong authorization
1321       auth_header = bearer_authorization_header
1322       put api_changeset_path(private_changeset), :params => new_changeset.to_s, :headers => auth_header
1323       assert_response :conflict
1324
1325       # now this should get an unauthorized
1326       auth_header = bearer_authorization_header private_user
1327       put api_changeset_path(private_changeset), :params => new_changeset.to_s, :headers => auth_header
1328       assert_require_public_data "user with their data non-public, shouldn't be able to edit their changeset"
1329
1330       ## Now try with the public user
1331       new_changeset = create_changeset_xml(:id => 1)
1332       new_tag = XML::Node.new "tag"
1333       new_tag["k"] = "tagtesting"
1334       new_tag["v"] = "valuetesting"
1335       new_changeset.find("//osm/changeset").first << new_tag
1336
1337       # try without any authorization
1338       put api_changeset_path(changeset), :params => new_changeset.to_s
1339       assert_response :unauthorized
1340
1341       # try with the wrong authorization
1342       auth_header = bearer_authorization_header
1343       put api_changeset_path(changeset), :params => new_changeset.to_s, :headers => auth_header
1344       assert_response :conflict
1345
1346       # now this should work...
1347       auth_header = bearer_authorization_header user
1348       put api_changeset_path(changeset), :params => new_changeset.to_s, :headers => auth_header
1349       assert_response :success
1350
1351       assert_select "osm>changeset[id='#{changeset.id}']", 1
1352       assert_select "osm>changeset>tag", 1
1353       assert_select "osm>changeset>tag[k='tagtesting'][v='valuetesting']", 1
1354     end
1355
1356     ##
1357     # check that a user different from the one who opened the changeset
1358     # can't modify it.
1359     def test_changeset_update_invalid
1360       auth_header = bearer_authorization_header
1361
1362       changeset = create(:changeset)
1363       new_changeset = create_changeset_xml(:user => changeset.user, :id => changeset.id)
1364       new_tag = XML::Node.new "tag"
1365       new_tag["k"] = "testing"
1366       new_tag["v"] = "testing"
1367       new_changeset.find("//osm/changeset").first << new_tag
1368
1369       put api_changeset_path(changeset), :params => new_changeset.to_s, :headers => auth_header
1370       assert_response :conflict
1371     end
1372
1373     ##
1374     # check that a changeset can contain a certain max number of changes.
1375     ## FIXME should be changed to an integration test due to the with_controller
1376     def test_changeset_limits
1377       user = create(:user)
1378       auth_header = bearer_authorization_header user
1379
1380       # create an old changeset to ensure we have the maximum rate limit
1381       create(:changeset, :user => user, :created_at => Time.now.utc - 28.days)
1382
1383       # open a new changeset
1384       xml = "<osm><changeset/></osm>"
1385       post api_changesets_path, :params => xml, :headers => auth_header
1386       assert_response :success, "can't create a new changeset"
1387       cs_id = @response.body.to_i
1388
1389       # start the counter just short of where the changeset should finish.
1390       offset = 10
1391       # alter the database to set the counter on the changeset directly,
1392       # otherwise it takes about 6 minutes to fill all of them.
1393       changeset = Changeset.find(cs_id)
1394       changeset.num_changes = Changeset::MAX_ELEMENTS - offset
1395       changeset.save!
1396
1397       with_controller(NodesController.new) do
1398         # create a new node
1399         xml = "<osm><node changeset='#{cs_id}' lat='0.0' lon='0.0'/></osm>"
1400         post api_nodes_path, :params => xml, :headers => auth_header
1401         assert_response :success, "can't create a new node"
1402         node_id = @response.body.to_i
1403
1404         get api_node_path(node_id)
1405         assert_response :success, "can't read back new node"
1406         node_doc = XML::Parser.string(@response.body).parse
1407         node_xml = node_doc.find("//osm/node").first
1408
1409         # loop until we fill the changeset with nodes
1410         offset.times do |i|
1411           node_xml["lat"] = rand.to_s
1412           node_xml["lon"] = rand.to_s
1413           node_xml["version"] = (i + 1).to_s
1414
1415           put api_node_path(node_id), :params => node_doc.to_s, :headers => auth_header
1416           assert_response :success, "attempt #{i} should have succeeded"
1417         end
1418
1419         # trying again should fail
1420         node_xml["lat"] = rand.to_s
1421         node_xml["lon"] = rand.to_s
1422         node_xml["version"] = offset.to_s
1423
1424         put api_node_path(node_id), :params => node_doc.to_s, :headers => auth_header
1425         assert_response :conflict, "final attempt should have failed"
1426       end
1427
1428       changeset = Changeset.find(cs_id)
1429       assert_equal Changeset::MAX_ELEMENTS + 1, changeset.num_changes
1430
1431       # check that the changeset is now closed as well
1432       assert_not(changeset.open?,
1433                  "changeset should have been auto-closed by exceeding " \
1434                  "element limit.")
1435     end
1436
1437     private
1438
1439     ##
1440     # check that the output consists of one specific changeset
1441     def assert_single_changeset(changeset, &)
1442       assert_dom "> changeset", 1 do
1443         assert_dom "> @id", changeset.id.to_s
1444         assert_dom "> @created_at", changeset.created_at.xmlschema
1445         if changeset.open?
1446           assert_dom "> @open", "true"
1447           assert_dom "> @closed_at", 0
1448         else
1449           assert_dom "> @open", "false"
1450           assert_dom "> @closed_at", changeset.closed_at.xmlschema
1451         end
1452         assert_dom "> @comments_count", changeset.comments.length.to_s
1453         assert_dom "> @changes_count", changeset.num_changes.to_s
1454         yield if block_given?
1455       end
1456     end
1457
1458     def assert_single_changeset_json(changeset, js)
1459       assert_equal changeset.id, js["changeset"]["id"]
1460       assert_equal changeset.created_at.xmlschema, js["changeset"]["created_at"]
1461       if changeset.open?
1462         assert js["changeset"]["open"]
1463         assert_nil js["changeset"]["closed_at"]
1464       else
1465         assert_not js["changeset"]["open"]
1466         assert_equal changeset.closed_at.xmlschema, js["changeset"]["closed_at"]
1467       end
1468       assert_equal changeset.comments.length, js["changeset"]["comments_count"]
1469       assert_equal changeset.num_changes, js["changeset"]["changes_count"]
1470     end
1471
1472     ##
1473     # check that certain changesets exist in the output in the specified order
1474     def assert_changesets_in_order(changesets)
1475       assert_select "osm>changeset", changesets.size
1476       changesets.each_with_index do |changeset, index|
1477         assert_select "osm>changeset:nth-child(#{index + 1})[id='#{changeset.id}']", 1
1478       end
1479     end
1480
1481     ##
1482     # update the changeset_id of a way element
1483     def update_changeset(xml, changeset_id)
1484       xml_attr_rewrite(xml, "changeset", changeset_id)
1485     end
1486
1487     ##
1488     # update an attribute in a way element
1489     def xml_attr_rewrite(xml, name, value)
1490       xml.find("//osm/way").first[name] = value.to_s
1491       xml
1492     end
1493
1494     ##
1495     # build XML for changesets
1496     def create_changeset_xml(user: nil, id: nil)
1497       root = XML::Document.new
1498       root.root = XML::Node.new "osm"
1499       cs = XML::Node.new "changeset"
1500       if user
1501         cs["user"] = user.display_name
1502         cs["uid"] = user.id.to_s
1503       end
1504       cs["id"] = id.to_s if id
1505       root.root << cs
1506       root
1507     end
1508   end
1509 end