]> git.openstreetmap.org Git - rails.git/blob - test/controllers/api/changesets_controller_test.rb
Move api changeset upload modify tests
[rails.git] / test / controllers / api / changesets_controller_test.rb
1 require "test_helper"
2
3 module Api
4   class ChangesetsControllerTest < ActionDispatch::IntegrationTest
5     ##
6     # test all routes which lead to this controller
7     def test_routes
8       assert_routing(
9         { :path => "/api/0.6/changesets", :method => :get },
10         { :controller => "api/changesets", :action => "index" }
11       )
12       assert_routing(
13         { :path => "/api/0.6/changesets.json", :method => :get },
14         { :controller => "api/changesets", :action => "index", :format => "json" }
15       )
16       assert_routing(
17         { :path => "/api/0.6/changesets", :method => :post },
18         { :controller => "api/changesets", :action => "create" }
19       )
20       assert_routing(
21         { :path => "/api/0.6/changeset/1", :method => :get },
22         { :controller => "api/changesets", :action => "show", :id => "1" }
23       )
24       assert_routing(
25         { :path => "/api/0.6/changeset/1.json", :method => :get },
26         { :controller => "api/changesets", :action => "show", :id => "1", :format => "json" }
27       )
28       assert_routing(
29         { :path => "/api/0.6/changeset/1", :method => :put },
30         { :controller => "api/changesets", :action => "update", :id => "1" }
31       )
32
33       assert_recognizes(
34         { :controller => "api/changesets", :action => "create" },
35         { :path => "/api/0.6/changeset/create", :method => :put }
36       )
37     end
38
39     ##
40     # test the query functionality of changesets
41     def test_index
42       private_user = create(:user, :data_public => false)
43       private_user_changeset = create(:changeset, :user => private_user)
44       private_user_closed_changeset = create(:changeset, :closed, :user => private_user)
45       user = create(:user)
46       changeset = create(:changeset, :user => user)
47       closed_changeset = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 1, 1, 0, 0, 0), :closed_at => Time.utc(2008, 1, 2, 0, 0, 0))
48       changeset2 = create(:changeset, :bbox => [5, 5, 15, 15])
49       changeset3 = create(:changeset, :bbox => [4.5, 4.5, 5, 5])
50
51       get api_changesets_path(:bbox => "-10,-10, 10, 10")
52       assert_response :success, "can't get changesets in bbox"
53       assert_changesets_in_order [changeset3, changeset2]
54
55       get api_changesets_path(:bbox => "4.5,4.5,4.6,4.6")
56       assert_response :success, "can't get changesets in bbox"
57       assert_changesets_in_order [changeset3]
58
59       # not found when looking for changesets of non-existing users
60       get api_changesets_path(:user => User.maximum(:id) + 1)
61       assert_response :not_found
62       assert_equal "text/plain", @response.media_type
63       get api_changesets_path(:display_name => " ")
64       assert_response :not_found
65       assert_equal "text/plain", @response.media_type
66
67       # can't get changesets of user 1 without authenticating
68       get api_changesets_path(:user => private_user.id)
69       assert_response :not_found, "shouldn't be able to get changesets by non-public user (ID)"
70       get api_changesets_path(:display_name => private_user.display_name)
71       assert_response :not_found, "shouldn't be able to get changesets by non-public user (name)"
72
73       # but this should work
74       auth_header = bearer_authorization_header private_user
75       get api_changesets_path(:user => private_user.id), :headers => auth_header
76       assert_response :success, "can't get changesets by user ID"
77       assert_changesets_in_order [private_user_changeset, private_user_closed_changeset]
78
79       get api_changesets_path(:display_name => private_user.display_name), :headers => auth_header
80       assert_response :success, "can't get changesets by user name"
81       assert_changesets_in_order [private_user_changeset, private_user_closed_changeset]
82
83       # test json endpoint
84       get api_changesets_path(:display_name => private_user.display_name), :headers => auth_header, :params => { :format => "json" }
85       assert_response :success, "can't get changesets by user name"
86
87       js = ActiveSupport::JSON.decode(@response.body)
88       assert_not_nil js
89
90       assert_equal Settings.api_version, js["version"]
91       assert_equal Settings.generator, js["generator"]
92       assert_equal 2, js["changesets"].count
93
94       # check that the correct error is given when we provide both UID and name
95       get api_changesets_path(:user => private_user.id,
96                               :display_name => private_user.display_name), :headers => auth_header
97       assert_response :bad_request, "should be a bad request to have both ID and name specified"
98
99       get api_changesets_path(:user => private_user.id, :open => true), :headers => auth_header
100       assert_response :success, "can't get changesets by user and open"
101       assert_changesets_in_order [private_user_changeset]
102
103       get api_changesets_path(:time => "2007-12-31"), :headers => auth_header
104       assert_response :success, "can't get changesets by time-since"
105       assert_changesets_in_order [changeset3, changeset2, changeset, private_user_changeset, private_user_closed_changeset, closed_changeset]
106
107       get api_changesets_path(:time => "2008-01-01T12:34Z"), :headers => auth_header
108       assert_response :success, "can't get changesets by time-since with hour"
109       assert_changesets_in_order [changeset3, changeset2, changeset, private_user_changeset, private_user_closed_changeset, closed_changeset]
110
111       get api_changesets_path(:time => "2007-12-31T23:59Z,2008-01-02T00:01Z"), :headers => auth_header
112       assert_response :success, "can't get changesets by time-range"
113       assert_changesets_in_order [closed_changeset]
114
115       get api_changesets_path(:open => "true"), :headers => auth_header
116       assert_response :success, "can't get changesets by open-ness"
117       assert_changesets_in_order [changeset3, changeset2, changeset, private_user_changeset]
118
119       get api_changesets_path(:closed => "true"), :headers => auth_header
120       assert_response :success, "can't get changesets by closed-ness"
121       assert_changesets_in_order [private_user_closed_changeset, closed_changeset]
122
123       get api_changesets_path(:closed => "true", :user => private_user.id), :headers => auth_header
124       assert_response :success, "can't get changesets by closed-ness and user"
125       assert_changesets_in_order [private_user_closed_changeset]
126
127       get api_changesets_path(:closed => "true", :user => user.id), :headers => auth_header
128       assert_response :success, "can't get changesets by closed-ness and user"
129       assert_changesets_in_order [closed_changeset]
130
131       get api_changesets_path(:changesets => "#{private_user_changeset.id},#{changeset.id},#{closed_changeset.id}"), :headers => auth_header
132       assert_response :success, "can't get changesets by id (as comma-separated string)"
133       assert_changesets_in_order [changeset, private_user_changeset, closed_changeset]
134
135       get api_changesets_path(:changesets => ""), :headers => auth_header
136       assert_response :bad_request, "should be a bad request since changesets is empty"
137     end
138
139     ##
140     # test the query functionality of changesets with the limit parameter
141     def test_index_limit
142       user = create(:user)
143       changeset1 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 1, 1, 0, 0, 0), :closed_at => Time.utc(2008, 1, 2, 0, 0, 0))
144       changeset2 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 2, 1, 0, 0, 0), :closed_at => Time.utc(2008, 2, 2, 0, 0, 0))
145       changeset3 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 3, 1, 0, 0, 0), :closed_at => Time.utc(2008, 3, 2, 0, 0, 0))
146       changeset4 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 4, 1, 0, 0, 0), :closed_at => Time.utc(2008, 4, 2, 0, 0, 0))
147       changeset5 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 5, 1, 0, 0, 0), :closed_at => Time.utc(2008, 5, 2, 0, 0, 0))
148
149       get api_changesets_path
150       assert_response :success
151       assert_changesets_in_order [changeset5, changeset4, changeset3, changeset2, changeset1]
152
153       get api_changesets_path(:limit => "3")
154       assert_response :success
155       assert_changesets_in_order [changeset5, changeset4, changeset3]
156
157       get api_changesets_path(:limit => "0")
158       assert_response :bad_request
159
160       get api_changesets_path(:limit => Settings.max_changeset_query_limit)
161       assert_response :success
162       assert_changesets_in_order [changeset5, changeset4, changeset3, changeset2, changeset1]
163
164       get api_changesets_path(:limit => Settings.max_changeset_query_limit + 1)
165       assert_response :bad_request
166     end
167
168     ##
169     # test the query functionality of sequential changesets with order and time parameters
170     def test_index_order
171       user = create(:user)
172       changeset1 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 1, 1, 0, 0, 0), :closed_at => Time.utc(2008, 1, 2, 0, 0, 0))
173       changeset2 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 2, 1, 0, 0, 0), :closed_at => Time.utc(2008, 2, 2, 0, 0, 0))
174       changeset3 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 3, 1, 0, 0, 0), :closed_at => Time.utc(2008, 3, 2, 0, 0, 0))
175       changeset4 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 4, 1, 0, 0, 0), :closed_at => Time.utc(2008, 4, 2, 0, 0, 0))
176       changeset5 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 5, 1, 0, 0, 0), :closed_at => Time.utc(2008, 5, 2, 0, 0, 0))
177       changeset6 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 6, 1, 0, 0, 0), :closed_at => Time.utc(2008, 6, 2, 0, 0, 0))
178
179       get api_changesets_path
180       assert_response :success
181       assert_changesets_in_order [changeset6, changeset5, changeset4, changeset3, changeset2, changeset1]
182
183       get api_changesets_path(:order => "oldest")
184       assert_response :success
185       assert_changesets_in_order [changeset1, changeset2, changeset3, changeset4, changeset5, changeset6]
186
187       [
188         # lower time bound at the opening time of a changeset
189         ["2008-02-01T00:00:00Z", "2008-05-15T00:00:00Z", [changeset5, changeset4, changeset3, changeset2], [changeset5, changeset4, changeset3, changeset2]],
190         # lower time bound in the middle of a changeset
191         ["2008-02-01T12:00:00Z", "2008-05-15T00:00:00Z", [changeset5, changeset4, changeset3, changeset2], [changeset5, changeset4, changeset3]],
192         # lower time bound at the closing time of a changeset
193         ["2008-02-02T00:00:00Z", "2008-05-15T00:00:00Z", [changeset5, changeset4, changeset3, changeset2], [changeset5, changeset4, changeset3]],
194         # lower time bound after the closing time of a changeset
195         ["2008-02-02T00:00:01Z", "2008-05-15T00:00:00Z", [changeset5, changeset4, changeset3], [changeset5, changeset4, changeset3]],
196         # upper time bound in the middle of a changeset
197         ["2007-09-09T12:00:00Z", "2008-04-01T12:00:00Z", [changeset4, changeset3, changeset2, changeset1], [changeset4, changeset3, changeset2, changeset1]],
198         # empty range
199         ["2009-02-02T00:00:01Z", "2018-05-15T00:00:00Z", [], []]
200       ].each do |from, to, interval_changesets, point_changesets|
201         get api_changesets_path(:time => "#{from},#{to}")
202         assert_response :success
203         assert_changesets_in_order interval_changesets
204
205         get api_changesets_path(:from => from, :to => to)
206         assert_response :success
207         assert_changesets_in_order point_changesets
208
209         get api_changesets_path(:from => from, :to => to, :order => "oldest")
210         assert_response :success
211         assert_changesets_in_order point_changesets.reverse
212       end
213     end
214
215     ##
216     # test the query functionality of overlapping changesets with order and time parameters
217     def test_index_order_overlapping
218       user = create(:user)
219       changeset1 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2015, 6, 4, 17, 0, 0), :closed_at => Time.utc(2015, 6, 4, 17, 0, 0))
220       changeset2 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2015, 6, 4, 16, 0, 0), :closed_at => Time.utc(2015, 6, 4, 18, 0, 0))
221       changeset3 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2015, 6, 4, 14, 0, 0), :closed_at => Time.utc(2015, 6, 4, 20, 0, 0))
222       changeset4 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2015, 6, 3, 23, 0, 0), :closed_at => Time.utc(2015, 6, 4, 23, 0, 0))
223       create(:changeset, :closed, :user => user, :created_at => Time.utc(2015, 6, 2, 23, 0, 0), :closed_at => Time.utc(2015, 6, 3, 23, 0, 0))
224
225       get api_changesets_path(:time => "2015-06-04T00:00:00Z")
226       assert_response :success
227       assert_changesets_in_order [changeset1, changeset2, changeset3, changeset4]
228
229       get api_changesets_path(:from => "2015-06-04T00:00:00Z")
230       assert_response :success
231       assert_changesets_in_order [changeset1, changeset2, changeset3]
232
233       get api_changesets_path(:from => "2015-06-04T00:00:00Z", :order => "oldest")
234       assert_response :success
235       assert_changesets_in_order [changeset3, changeset2, changeset1]
236
237       get api_changesets_path(:time => "2015-06-04T16:00:00Z,2015-06-04T17:30:00Z")
238       assert_response :success
239       assert_changesets_in_order [changeset1, changeset2, changeset3, changeset4]
240
241       get api_changesets_path(:from => "2015-06-04T16:00:00Z", :to => "2015-06-04T17:30:00Z")
242       assert_response :success
243       assert_changesets_in_order [changeset1, changeset2]
244
245       get api_changesets_path(:from => "2015-06-04T16:00:00Z", :to => "2015-06-04T17:30:00Z", :order => "oldest")
246       assert_response :success
247       assert_changesets_in_order [changeset2, changeset1]
248     end
249
250     ##
251     # check that errors are returned if garbage is inserted
252     # into query strings
253     def test_index_invalid
254       ["abracadabra!",
255        "1,2,3,F",
256        ";drop table users;"].each do |bbox|
257         get api_changesets_path(:bbox => bbox)
258         assert_response :bad_request, "'#{bbox}' isn't a bbox"
259       end
260
261       ["now()",
262        "00-00-00",
263        ";drop table users;",
264        ",",
265        "-,-"].each do |time|
266         get api_changesets_path(:time => time)
267         assert_response :bad_request, "'#{time}' isn't a valid time range"
268       end
269
270       ["me",
271        "foobar",
272        "-1",
273        "0"].each do |uid|
274         get api_changesets_path(:user => uid)
275         assert_response :bad_request, "'#{uid}' isn't a valid user ID"
276       end
277
278       get api_changesets_path(:order => "oldest", :time => "2008-01-01T00:00Z,2018-01-01T00:00Z")
279       assert_response :bad_request, "cannot use order=oldest with time"
280     end
281
282     # -----------------------
283     # Test simple changeset creation
284     # -----------------------
285
286     def test_create
287       auth_header = bearer_authorization_header create(:user, :data_public => false)
288       # Create the first user's changeset
289       xml = "<osm><changeset>" \
290             "<tag k='created_by' v='osm test suite checking changesets'/>" \
291             "</changeset></osm>"
292       post api_changesets_path, :params => xml, :headers => auth_header
293       assert_require_public_data
294
295       auth_header = bearer_authorization_header
296       # Create the first user's changeset
297       xml = "<osm><changeset>" \
298             "<tag k='created_by' v='osm test suite checking changesets'/>" \
299             "</changeset></osm>"
300       post api_changesets_path, :params => xml, :headers => auth_header
301
302       assert_response :success, "Creation of changeset did not return success status"
303       newid = @response.body.to_i
304
305       # check end time, should be an hour ahead of creation time
306       cs = Changeset.find(newid)
307       duration = cs.closed_at - cs.created_at
308       # the difference can either be a rational, or a floating point number
309       # of seconds, depending on the code path taken :-(
310       if duration.instance_of?(Rational)
311         assert_equal Rational(1, 24), duration, "initial idle timeout should be an hour (#{cs.created_at} -> #{cs.closed_at})"
312       else
313         # must be number of seconds...
314         assert_equal 3600, duration.round, "initial idle timeout should be an hour (#{cs.created_at} -> #{cs.closed_at})"
315       end
316
317       # checks if uploader was subscribed
318       assert_equal 1, cs.subscribers.length
319     end
320
321     def test_create_invalid
322       auth_header = bearer_authorization_header create(:user, :data_public => false)
323       xml = "<osm><changeset></osm>"
324       post api_changesets_path, :params => xml, :headers => auth_header
325       assert_require_public_data
326
327       ## Try the public user
328       auth_header = bearer_authorization_header
329       xml = "<osm><changeset></osm>"
330       post api_changesets_path, :params => xml, :headers => auth_header
331       assert_response :bad_request, "creating a invalid changeset should fail"
332     end
333
334     def test_create_invalid_no_content
335       ## First check with no auth
336       post api_changesets_path
337       assert_response :unauthorized, "shouldn't be able to create a changeset with no auth"
338
339       ## Now try to with a non-public user
340       auth_header = bearer_authorization_header create(:user, :data_public => false)
341       post api_changesets_path, :headers => auth_header
342       assert_require_public_data
343
344       ## Try an inactive user
345       auth_header = bearer_authorization_header create(:user, :pending)
346       post api_changesets_path, :headers => auth_header
347       assert_inactive_user
348
349       ## Now try to use a normal user
350       auth_header = bearer_authorization_header
351       post api_changesets_path, :headers => auth_header
352       assert_response :bad_request, "creating a changeset with no content should fail"
353     end
354
355     def test_create_wrong_method
356       auth_header = bearer_authorization_header
357
358       put api_changesets_path, :headers => auth_header
359       assert_response :not_found
360       assert_template "rescues/routing_error"
361     end
362
363     def test_create_legacy_path
364       auth_header = bearer_authorization_header
365       xml = "<osm><changeset></changeset></osm>"
366
367       assert_difference "Changeset.count", 1 do
368         put "/api/0.6/changeset/create", :params => xml, :headers => auth_header
369       end
370
371       assert_response :success, "Creation of changeset did not return success status"
372       assert_equal Changeset.last.id, @response.body.to_i
373     end
374
375     ##
376     # check that the changeset can be shown and returns the correct
377     # document structure.
378     def test_show
379       changeset = create(:changeset)
380
381       get api_changeset_path(changeset)
382       assert_response :success, "cannot get first changeset"
383
384       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
385       assert_single_changeset changeset do
386         assert_dom "> discussion", 0
387       end
388
389       get api_changeset_path(changeset, :include_discussion => true)
390       assert_response :success, "cannot get first changeset with comments"
391
392       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
393       assert_single_changeset changeset do
394         assert_dom "> discussion", 1
395         assert_dom "> discussion > comment", 0
396       end
397     end
398
399     def test_show_comments
400       # all comments visible
401       changeset = create(:changeset, :closed)
402       comment1, comment2, comment3 = create_list(:changeset_comment, 3, :changeset_id => changeset.id)
403
404       get api_changeset_path(changeset, :include_discussion => true)
405       assert_response :success, "cannot get closed changeset with comments"
406
407       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1 do
408         assert_single_changeset changeset do
409           assert_dom "> discussion", 1 do
410             assert_dom "> comment", 3 do |dom_comments|
411               assert_dom dom_comments[0], "> @id", comment1.id.to_s
412               assert_dom dom_comments[0], "> @visible", "true"
413               assert_dom dom_comments[1], "> @id", comment2.id.to_s
414               assert_dom dom_comments[1], "> @visible", "true"
415               assert_dom dom_comments[2], "> @id", comment3.id.to_s
416               assert_dom dom_comments[2], "> @visible", "true"
417             end
418           end
419         end
420       end
421
422       # one hidden comment not included because not asked for
423       comment2.update(:visible => false)
424       changeset.reload
425
426       get api_changeset_path(changeset, :include_discussion => true)
427       assert_response :success, "cannot get closed changeset with comments"
428
429       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
430       assert_single_changeset changeset do
431         assert_dom "> discussion", 1 do
432           assert_dom "> comment", 2 do |dom_comments|
433             assert_dom dom_comments[0], "> @id", comment1.id.to_s
434             assert_dom dom_comments[0], "> @visible", "true"
435             assert_dom dom_comments[1], "> @id", comment3.id.to_s
436             assert_dom dom_comments[1], "> @visible", "true"
437           end
438         end
439       end
440
441       # one hidden comment not included because no permissions
442       get api_changeset_path(changeset, :include_discussion => true, :show_hidden_comments => true)
443       assert_response :success, "cannot get closed changeset with comments"
444
445       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
446       assert_single_changeset changeset do
447         assert_dom "> discussion", 1 do
448           assert_dom "> comment", 2 do |dom_comments|
449             assert_dom dom_comments[0], "> @id", comment1.id.to_s
450             assert_dom dom_comments[0], "> @visible", "true"
451             # maybe will show an empty comment element with visible=false in the future
452             assert_dom dom_comments[1], "> @id", comment3.id.to_s
453             assert_dom dom_comments[1], "> @visible", "true"
454           end
455         end
456       end
457
458       # one hidden comment shown to moderators
459       moderator_user = create(:moderator_user)
460       auth_header = bearer_authorization_header moderator_user
461       get api_changeset_path(changeset, :include_discussion => true, :show_hidden_comments => true), :headers => auth_header
462       assert_response :success, "cannot get closed changeset with comments"
463
464       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
465       assert_single_changeset changeset do
466         assert_dom "> discussion", 1 do
467           assert_dom "> comment", 3 do |dom_comments|
468             assert_dom dom_comments[0], "> @id", comment1.id.to_s
469             assert_dom dom_comments[0], "> @visible", "true"
470             assert_dom dom_comments[1], "> @id", comment2.id.to_s
471             assert_dom dom_comments[1], "> @visible", "false"
472             assert_dom dom_comments[2], "> @id", comment3.id.to_s
473             assert_dom dom_comments[2], "> @visible", "true"
474           end
475         end
476       end
477     end
478
479     def test_show_tags
480       changeset = create(:changeset, :closed)
481       create(:changeset_tag, :changeset => changeset, :k => "created_by", :v => "JOSM/1.5 (18364)")
482       create(:changeset_tag, :changeset => changeset, :k => "comment", :v => "changeset comment")
483
484       get api_changeset_path(changeset)
485
486       assert_response :success
487       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
488       assert_single_changeset changeset do
489         assert_dom "> tag", 2
490         assert_dom "> tag[k='created_by'][v='JOSM/1.5 (18364)']", 1
491         assert_dom "> tag[k='comment'][v='changeset comment']", 1
492       end
493     end
494
495     def test_show_json
496       changeset = create(:changeset)
497
498       get api_changeset_path(changeset, :format => "json")
499       assert_response :success, "cannot get first changeset"
500
501       js = ActiveSupport::JSON.decode(@response.body)
502       assert_not_nil js
503
504       assert_equal Settings.api_version, js["version"]
505       assert_equal Settings.generator, js["generator"]
506       assert_single_changeset_json changeset, js
507       assert_nil js["changeset"]["tags"]
508       assert_nil js["changeset"]["comments"]
509       assert_equal changeset.user.id, js["changeset"]["uid"]
510       assert_equal changeset.user.display_name, js["changeset"]["user"]
511
512       get api_changeset_path(changeset, :format => "json", :include_discussion => true)
513       assert_response :success, "cannot get first changeset with comments"
514
515       js = ActiveSupport::JSON.decode(@response.body)
516       assert_not_nil js
517       assert_equal Settings.api_version, js["version"]
518       assert_equal Settings.generator, js["generator"]
519       assert_single_changeset_json changeset, js
520       assert_nil js["changeset"]["tags"]
521       assert_nil js["changeset"]["min_lat"]
522       assert_nil js["changeset"]["min_lon"]
523       assert_nil js["changeset"]["max_lat"]
524       assert_nil js["changeset"]["max_lon"]
525       assert_equal 0, js["changeset"]["comments"].count
526     end
527
528     def test_show_comments_json
529       # all comments visible
530       changeset = create(:changeset, :closed)
531       comment0, comment1, comment2 = create_list(:changeset_comment, 3, :changeset_id => changeset.id)
532
533       get api_changeset_path(changeset, :format => "json", :include_discussion => true)
534       assert_response :success, "cannot get closed changeset with comments"
535
536       js = ActiveSupport::JSON.decode(@response.body)
537       assert_not_nil js
538       assert_equal Settings.api_version, js["version"]
539       assert_equal Settings.generator, js["generator"]
540       assert_single_changeset_json changeset, js
541       assert_equal 3, js["changeset"]["comments"].count
542       assert_equal comment0.id, js["changeset"]["comments"][0]["id"]
543       assert js["changeset"]["comments"][0]["visible"]
544       assert_equal comment1.id, js["changeset"]["comments"][1]["id"]
545       assert js["changeset"]["comments"][1]["visible"]
546       assert_equal comment2.id, js["changeset"]["comments"][2]["id"]
547       assert js["changeset"]["comments"][2]["visible"]
548
549       # one hidden comment not included because not asked for
550       comment1.update(:visible => false)
551       changeset.reload
552
553       get api_changeset_path(changeset, :format => "json", :include_discussion => true)
554       assert_response :success, "cannot get closed changeset with comments"
555
556       js = ActiveSupport::JSON.decode(@response.body)
557       assert_not_nil js
558       assert_equal Settings.api_version, js["version"]
559       assert_equal Settings.generator, js["generator"]
560       assert_single_changeset_json changeset, js
561       assert_equal 2, js["changeset"]["comments"].count
562       assert_equal comment0.id, js["changeset"]["comments"][0]["id"]
563       assert js["changeset"]["comments"][0]["visible"]
564       assert_equal comment2.id, js["changeset"]["comments"][1]["id"]
565       assert js["changeset"]["comments"][1]["visible"]
566
567       # one hidden comment not included because no permissions
568       get api_changeset_path(changeset, :format => "json", :include_discussion => true, :show_hidden_comments => true)
569       assert_response :success, "cannot get closed changeset with comments"
570
571       js = ActiveSupport::JSON.decode(@response.body)
572       assert_not_nil js
573       assert_equal Settings.api_version, js["version"]
574       assert_equal Settings.generator, js["generator"]
575       assert_single_changeset_json changeset, js
576       assert_equal 2, js["changeset"]["comments"].count
577       assert_equal comment0.id, js["changeset"]["comments"][0]["id"]
578       assert js["changeset"]["comments"][0]["visible"]
579       # maybe will show an empty comment element with visible=false in the future
580       assert_equal comment2.id, js["changeset"]["comments"][1]["id"]
581       assert js["changeset"]["comments"][1]["visible"]
582
583       # one hidden comment shown to moderators
584       moderator_user = create(:moderator_user)
585       auth_header = bearer_authorization_header moderator_user
586       get api_changeset_path(changeset, :format => "json", :include_discussion => true, :show_hidden_comments => true), :headers => auth_header
587       assert_response :success, "cannot get closed changeset with comments"
588
589       js = ActiveSupport::JSON.decode(@response.body)
590       assert_not_nil js
591       assert_equal Settings.api_version, js["version"]
592       assert_equal Settings.generator, js["generator"]
593       assert_single_changeset_json changeset, js
594       assert_equal 3, js["changeset"]["comments"].count
595       assert_equal comment0.id, js["changeset"]["comments"][0]["id"]
596       assert js["changeset"]["comments"][0]["visible"]
597       assert_equal comment1.id, js["changeset"]["comments"][1]["id"]
598       assert_not js["changeset"]["comments"][1]["visible"]
599       assert_equal comment2.id, js["changeset"]["comments"][2]["id"]
600       assert js["changeset"]["comments"][2]["visible"]
601     end
602
603     def test_show_tags_json
604       changeset = create(:changeset, :closed)
605       create(:changeset_tag, :changeset => changeset, :k => "created_by", :v => "JOSM/1.5 (18364)")
606       create(:changeset_tag, :changeset => changeset, :k => "comment", :v => "changeset comment")
607
608       get api_changeset_path(changeset, :format => "json")
609
610       assert_response :success
611       js = ActiveSupport::JSON.decode(@response.body)
612       assert_not_nil js
613       assert_equal Settings.api_version, js["version"]
614       assert_equal Settings.generator, js["generator"]
615       assert_single_changeset_json changeset, js
616       assert_equal 2, js["changeset"]["tags"].count
617       assert_equal "JOSM/1.5 (18364)", js["changeset"]["tags"]["created_by"]
618       assert_equal "changeset comment", js["changeset"]["tags"]["comment"]
619     end
620
621     def test_show_bbox_json
622       changeset = create(:changeset, :bbox => [5, -5, 12, 15])
623
624       get api_changeset_path(changeset, :format => "json")
625       assert_response :success, "cannot get first changeset"
626
627       js = ActiveSupport::JSON.decode(@response.body)
628       assert_not_nil js
629       assert_equal(-5, js["changeset"]["min_lat"])
630       assert_equal 5, js["changeset"]["min_lon"]
631       assert_equal 15, js["changeset"]["max_lat"]
632       assert_equal 12, js["changeset"]["max_lon"]
633     end
634
635     ##
636     # check that a changeset that doesn't exist returns an appropriate message
637     def test_show_not_found
638       [0, -32, 233455644, "afg", "213"].each do |id|
639         get api_changeset_path(id)
640         assert_response :not_found, "should get a not found"
641       rescue ActionController::UrlGenerationError => e
642         assert_match(/No route matches/, e.to_s)
643       end
644     end
645
646     def test_repeated_changeset_create
647       3.times do
648         auth_header = bearer_authorization_header
649
650         # create a temporary changeset
651         xml = "<osm><changeset>" \
652               "<tag k='created_by' v='osm test suite checking changesets'/>" \
653               "</changeset></osm>"
654         assert_difference "Changeset.count", 1 do
655           post api_changesets_path, :params => xml, :headers => auth_header
656         end
657         assert_response :success
658       end
659     end
660
661     def test_upload_large_changeset
662       user = create(:user)
663       auth_header = bearer_authorization_header user
664
665       # create an old changeset to ensure we have the maximum rate limit
666       create(:changeset, :user => user, :created_at => Time.now.utc - 28.days)
667
668       # create a changeset
669       post api_changesets_path, :params => "<osm><changeset/></osm>", :headers => auth_header
670       assert_response :success, "Should be able to create a changeset: #{@response.body}"
671       changeset_id = @response.body.to_i
672
673       # upload some widely-spaced nodes, spiralling positive and negative
674       diff = <<~CHANGESET
675         <osmChange>
676          <create>
677           <node id='-1' lon='-20' lat='-10' changeset='#{changeset_id}'/>
678           <node id='-10' lon='20'  lat='10' changeset='#{changeset_id}'/>
679           <node id='-2' lon='-40' lat='-20' changeset='#{changeset_id}'/>
680           <node id='-11' lon='40'  lat='20' changeset='#{changeset_id}'/>
681           <node id='-3' lon='-60' lat='-30' changeset='#{changeset_id}'/>
682           <node id='-12' lon='60'  lat='30' changeset='#{changeset_id}'/>
683           <node id='-4' lon='-80' lat='-40' changeset='#{changeset_id}'/>
684           <node id='-13' lon='80'  lat='40' changeset='#{changeset_id}'/>
685           <node id='-5' lon='-100' lat='-50' changeset='#{changeset_id}'/>
686           <node id='-14' lon='100'  lat='50' changeset='#{changeset_id}'/>
687           <node id='-6' lon='-120' lat='-60' changeset='#{changeset_id}'/>
688           <node id='-15' lon='120'  lat='60' changeset='#{changeset_id}'/>
689           <node id='-7' lon='-140' lat='-70' changeset='#{changeset_id}'/>
690           <node id='-16' lon='140'  lat='70' changeset='#{changeset_id}'/>
691           <node id='-8' lon='-160' lat='-80' changeset='#{changeset_id}'/>
692           <node id='-17' lon='160'  lat='80' changeset='#{changeset_id}'/>
693           <node id='-9' lon='-179.9' lat='-89.9' changeset='#{changeset_id}'/>
694           <node id='-18' lon='179.9'  lat='89.9' changeset='#{changeset_id}'/>
695          </create>
696         </osmChange>
697       CHANGESET
698
699       # upload it, which used to cause an error like "PGError: ERROR:
700       # integer out of range" (bug #2152). but shouldn't any more.
701       post api_changeset_upload_path(changeset_id), :params => diff, :headers => auth_header
702       assert_response :success,
703                       "can't upload a spatially-large diff to changeset: #{@response.body}"
704
705       # check that the changeset bbox is within bounds
706       cs = Changeset.find(changeset_id)
707       assert_operator cs.min_lon, :>=, -180 * GeoRecord::SCALE, "Minimum longitude (#{cs.min_lon / GeoRecord::SCALE}) should be >= -180 to be valid."
708       assert_operator cs.max_lon, :<=, 180 * GeoRecord::SCALE, "Maximum longitude (#{cs.max_lon / GeoRecord::SCALE}) should be <= 180 to be valid."
709       assert_operator cs.min_lat, :>=, -90 * GeoRecord::SCALE, "Minimum latitude (#{cs.min_lat / GeoRecord::SCALE}) should be >= -90 to be valid."
710       assert_operator cs.max_lat, :<=, 90 * GeoRecord::SCALE, "Maximum latitude (#{cs.max_lat / GeoRecord::SCALE}) should be <= 90 to be valid."
711     end
712
713     ##
714     # upload something which creates new objects and inserts them into
715     # existing containers using placeholders.
716     def test_upload_complex
717       way = create(:way)
718       node = create(:node)
719       relation = create(:relation)
720       create(:way_node, :way => way, :node => node)
721
722       changeset = create(:changeset)
723
724       auth_header = bearer_authorization_header changeset.user
725
726       # simple diff to create a node way and relation using placeholders
727       diff = <<~CHANGESET
728         <osmChange>
729          <create>
730           <node id='-1' lon='0' lat='0' changeset='#{changeset.id}'>
731            <tag k='foo' v='bar'/>
732            <tag k='baz' v='bat'/>
733           </node>
734          </create>
735          <modify>
736           <way id='#{way.id}' changeset='#{changeset.id}' version='1'>
737            <nd ref='-1'/>
738            <nd ref='#{node.id}'/>
739           </way>
740           <relation id='#{relation.id}' changeset='#{changeset.id}' version='1'>
741            <member type='way' role='some' ref='#{way.id}'/>
742            <member type='node' role='some' ref='-1'/>
743            <member type='relation' role='some' ref='#{relation.id}'/>
744           </relation>
745          </modify>
746         </osmChange>
747       CHANGESET
748
749       # upload it
750       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
751       assert_response :success,
752                       "can't upload a complex diff to changeset: #{@response.body}"
753
754       # check the returned payload
755       new_node_id = nil
756       assert_dom "diffResult[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1 do
757         assert_dom "> node", 1 do |(node_el)|
758           new_node_id = node_el["new_id"].to_i
759         end
760         assert_dom "> way", 1
761         assert_dom "> relation", 1
762       end
763
764       # check that the changes made it into the database
765       assert_equal 2, Node.find(new_node_id).tags.size, "new node should have two tags"
766       assert_equal [new_node_id, node.id], Way.find(way.id).nds, "way nodes should match"
767       Relation.find(relation.id).members.each do |type, id, _role|
768         assert_equal new_node_id, id, "relation should contain new node" if type == "node"
769       end
770     end
771
772     ##
773     # try to upload with commands other than create, modify, or delete
774     def test_action_upload_invalid
775       changeset = create(:changeset)
776
777       auth_header = bearer_authorization_header changeset.user
778
779       diff = <<~CHANGESET
780         <osmChange>
781           <ping>
782            <node id='1' lon='1' lat='1' changeset='#{changeset.id}' />
783           </ping>
784         </osmChange>
785       CHANGESET
786       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
787       assert_response :bad_request, "Shouldn't be able to upload a diff with the action ping"
788       assert_equal("Unknown action ping, choices are create, modify, delete", @response.body)
789     end
790
791     ##
792     # test that a placeholder can be reused within the same upload.
793     def test_upload_reuse_placeholder_valid
794       changeset = create(:changeset)
795
796       auth_header = bearer_authorization_header changeset.user
797
798       diff = <<~CHANGESET
799         <osmChange>
800          <create>
801           <node id='-1' lon='0' lat='0' changeset='#{changeset.id}'>
802            <tag k="foo" v="bar"/>
803           </node>
804          </create>
805          <modify>
806           <node id='-1' lon='1' lat='1' changeset='#{changeset.id}' version='1'/>
807          </modify>
808          <delete>
809           <node id='-1' lon='2' lat='2' changeset='#{changeset.id}' version='2'/>
810          </delete>
811         </osmChange>
812       CHANGESET
813
814       # upload it
815       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
816       assert_response :success,
817                       "can't upload a valid diff with re-used placeholders to changeset: #{@response.body}"
818
819       # check the response is well-formed
820       assert_select "diffResult>node", 3
821       assert_select "diffResult>node[old_id='-1']", 3
822     end
823
824     def test_upload_duplicate_delete
825       changeset = create(:changeset)
826
827       auth_header = bearer_authorization_header changeset.user
828
829       diff = <<~CHANGESET
830         <osmChange>
831           <create>
832             <node id="-1" lat="39" lon="116" changeset="#{changeset.id}" />
833           </create>
834           <delete>
835             <node id="-1" version="1" changeset="#{changeset.id}" />
836             <node id="-1" version="1" changeset="#{changeset.id}" />
837           </delete>
838         </osmChange>
839       CHANGESET
840
841       # upload it
842       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
843       assert_response :gone,
844                       "transaction should be cancelled by second deletion"
845
846       diff = <<~CHANGESET
847         <osmChange>
848           <create>
849             <node id="-1" lat="39" lon="116" changeset="#{changeset.id}" />
850           </create>
851           <delete if-unused="true">
852             <node id="-1" version="1" changeset="#{changeset.id}" />
853             <node id="-1" version="1" changeset="#{changeset.id}" />
854           </delete>
855         </osmChange>
856       CHANGESET
857
858       # upload it
859       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
860
861       assert_select "diffResult>node", 3
862       assert_select "diffResult>node[old_id='-1']", 3
863       assert_select "diffResult>node[new_version='1']", 1
864       assert_select "diffResult>node[new_version='2']", 1
865     end
866
867     ##
868     # test what happens if a diff is uploaded containing only a node
869     # move.
870     def test_upload_node_move
871       auth_header = bearer_authorization_header
872
873       xml = "<osm><changeset>" \
874             "<tag k='created_by' v='osm test suite checking changesets'/>" \
875             "</changeset></osm>"
876       post api_changesets_path, :params => xml, :headers => auth_header
877       assert_response :success
878       changeset_id = @response.body.to_i
879
880       old_node = create(:node, :lat => 1, :lon => 1)
881
882       diff = XML::Document.new
883       diff.root = XML::Node.new "osmChange"
884       modify = XML::Node.new "modify"
885       xml_old_node = xml_node_for_node(old_node)
886       xml_old_node["lat"] = 2.0.to_s
887       xml_old_node["lon"] = 2.0.to_s
888       xml_old_node["changeset"] = changeset_id.to_s
889       modify << xml_old_node
890       diff.root << modify
891
892       # upload it
893       post api_changeset_upload_path(changeset_id), :params => diff.to_s, :headers => auth_header
894       assert_response :success,
895                       "diff should have uploaded OK"
896
897       # check the bbox
898       changeset = Changeset.find(changeset_id)
899       assert_equal 1 * GeoRecord::SCALE, changeset.min_lon, "min_lon should be 1 degree"
900       assert_equal 2 * GeoRecord::SCALE, changeset.max_lon, "max_lon should be 2 degrees"
901       assert_equal 1 * GeoRecord::SCALE, changeset.min_lat, "min_lat should be 1 degree"
902       assert_equal 2 * GeoRecord::SCALE, changeset.max_lat, "max_lat should be 2 degrees"
903     end
904
905     ##
906     # test what happens if a diff is uploaded adding a node to a way.
907     def test_upload_way_extend
908       auth_header = bearer_authorization_header
909
910       xml = "<osm><changeset>" \
911             "<tag k='created_by' v='osm test suite checking changesets'/>" \
912             "</changeset></osm>"
913       post api_changesets_path, :params => xml, :headers => auth_header
914       assert_response :success
915       changeset_id = @response.body.to_i
916
917       old_way = create(:way)
918       create(:way_node, :way => old_way, :node => create(:node, :lat => 0.1, :lon => 0.1))
919
920       diff = XML::Document.new
921       diff.root = XML::Node.new "osmChange"
922       modify = XML::Node.new "modify"
923       xml_old_way = xml_node_for_way(old_way)
924       nd_ref = XML::Node.new "nd"
925       nd_ref["ref"] = create(:node, :lat => 0.3, :lon => 0.3).id.to_s
926       xml_old_way << nd_ref
927       xml_old_way["changeset"] = changeset_id.to_s
928       modify << xml_old_way
929       diff.root << modify
930
931       # upload it
932       post api_changeset_upload_path(changeset_id), :params => diff.to_s, :headers => auth_header
933       assert_response :success,
934                       "diff should have uploaded OK"
935
936       # check the bbox
937       changeset = Changeset.find(changeset_id)
938       assert_equal 0.1 * GeoRecord::SCALE, changeset.min_lon, "min_lon should be 0.1 degree"
939       assert_equal 0.3 * GeoRecord::SCALE, changeset.max_lon, "max_lon should be 0.3 degrees"
940       assert_equal 0.1 * GeoRecord::SCALE, changeset.min_lat, "min_lat should be 0.1 degree"
941       assert_equal 0.3 * GeoRecord::SCALE, changeset.max_lat, "max_lat should be 0.3 degrees"
942     end
943
944     ##
945     # test for more issues in #1568
946     def test_upload_empty_invalid
947       changeset = create(:changeset)
948
949       auth_header = bearer_authorization_header changeset.user
950
951       ["<osmChange/>",
952        "<osmChange></osmChange>",
953        "<osmChange><modify/></osmChange>",
954        "<osmChange><modify></modify></osmChange>"].each do |diff|
955         # upload it
956         post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
957         assert_response(:success, "should be able to upload " \
958                                   "empty changeset: " + diff)
959       end
960     end
961
962     ##
963     # test that the X-Error-Format header works to request XML errors
964     def test_upload_xml_errors
965       changeset = create(:changeset)
966       node = create(:node)
967       create(:relation_member, :member => node)
968
969       auth_header = bearer_authorization_header changeset.user
970
971       # try and delete a node that is in use
972       diff = XML::Document.new
973       diff.root = XML::Node.new "osmChange"
974       delete = XML::Node.new "delete"
975       diff.root << delete
976       delete << xml_node_for_node(node)
977
978       # upload it
979       error_header = error_format_header "xml"
980       post api_changeset_upload_path(changeset), :params => diff.to_s, :headers => auth_header.merge(error_header)
981       assert_response :success,
982                       "failed to return error in XML format"
983
984       # check the returned payload
985       assert_select "osmError[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
986       assert_select "osmError>status", 1
987       assert_select "osmError>message", 1
988     end
989
990     def test_upload_not_found
991       changeset = create(:changeset)
992
993       auth_header = bearer_authorization_header changeset.user
994
995       # modify node
996       diff = <<~CHANGESET
997         <osmChange>
998         <modify>
999           <node id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
1000         </modify>
1001         </osmChange>
1002       CHANGESET
1003
1004       # upload it
1005       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1006       assert_response :not_found, "Node should not be found"
1007
1008       # modify way
1009       diff = <<~CHANGESET
1010         <osmChange>
1011         <modify>
1012           <way id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
1013         </modify>
1014         </osmChange>
1015       CHANGESET
1016
1017       # upload it
1018       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1019       assert_response :not_found, "Way should not be found"
1020
1021       # modify relation
1022       diff = <<~CHANGESET
1023         <osmChange>
1024         <modify>
1025           <relation id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
1026         </modify>
1027         </osmChange>
1028       CHANGESET
1029
1030       # upload it
1031       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1032       assert_response :not_found, "Relation should not be found"
1033
1034       # delete node
1035       diff = <<~CHANGESET
1036         <osmChange>
1037         <delete>
1038           <node id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
1039         </delete>
1040         </osmChange>
1041       CHANGESET
1042
1043       # upload it
1044       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1045       assert_response :not_found, "Node should not be deleted"
1046
1047       # delete way
1048       diff = <<~CHANGESET
1049         <osmChange>
1050         <delete>
1051           <way id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
1052         </delete>
1053         </osmChange>
1054       CHANGESET
1055
1056       # upload it
1057       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1058       assert_response :not_found, "Way should not be deleted"
1059
1060       # delete relation
1061       diff = <<~CHANGESET
1062         <osmChange>
1063         <delete>
1064           <relation id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
1065         </delete>
1066         </osmChange>
1067       CHANGESET
1068
1069       # upload it
1070       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1071       assert_response :not_found, "Relation should not be deleted"
1072     end
1073
1074     ##
1075     # test initial rate limit
1076     def test_upload_initial_rate_limit
1077       # create a user
1078       user = create(:user)
1079
1080       # create some objects to use
1081       node = create(:node)
1082       way = create(:way_with_nodes, :nodes_count => 2)
1083       relation = create(:relation)
1084
1085       # create a changeset that puts us near the initial rate limit
1086       changeset = create(:changeset, :user => user,
1087                                      :created_at => Time.now.utc - 5.minutes,
1088                                      :num_changes => Settings.initial_changes_per_hour - 2)
1089
1090       # create authentication header
1091       auth_header = bearer_authorization_header user
1092
1093       # simple diff to create a node way and relation using placeholders
1094       diff = <<~CHANGESET
1095         <osmChange>
1096          <create>
1097           <node id='-1' lon='0' lat='0' changeset='#{changeset.id}'>
1098            <tag k='foo' v='bar'/>
1099            <tag k='baz' v='bat'/>
1100           </node>
1101           <way id='-1' changeset='#{changeset.id}'>
1102            <nd ref='#{node.id}'/>
1103           </way>
1104          </create>
1105          <create>
1106           <relation id='-1' changeset='#{changeset.id}'>
1107            <member type='way' role='some' ref='#{way.id}'/>
1108            <member type='node' role='some' ref='#{node.id}'/>
1109            <member type='relation' role='some' ref='#{relation.id}'/>
1110           </relation>
1111          </create>
1112         </osmChange>
1113       CHANGESET
1114
1115       # upload it
1116       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1117       assert_response :too_many_requests, "upload did not hit rate limit"
1118     end
1119
1120     ##
1121     # test maximum rate limit
1122     def test_upload_maximum_rate_limit
1123       # create a user
1124       user = create(:user)
1125
1126       # create some objects to use
1127       node = create(:node)
1128       way = create(:way_with_nodes, :nodes_count => 2)
1129       relation = create(:relation)
1130
1131       # create a changeset to establish our initial edit time
1132       changeset = create(:changeset, :user => user,
1133                                      :created_at => Time.now.utc - 28.days)
1134
1135       # create changeset to put us near the maximum rate limit
1136       total_changes = Settings.max_changes_per_hour - 2
1137       while total_changes.positive?
1138         changes = [total_changes, Changeset::MAX_ELEMENTS].min
1139         changeset = create(:changeset, :user => user,
1140                                        :created_at => Time.now.utc - 5.minutes,
1141                                        :num_changes => changes)
1142         total_changes -= changes
1143       end
1144
1145       # create authentication header
1146       auth_header = bearer_authorization_header user
1147
1148       # simple diff to create a node way and relation using placeholders
1149       diff = <<~CHANGESET
1150         <osmChange>
1151          <create>
1152           <node id='-1' lon='0' lat='0' changeset='#{changeset.id}'>
1153            <tag k='foo' v='bar'/>
1154            <tag k='baz' v='bat'/>
1155           </node>
1156           <way id='-1' changeset='#{changeset.id}'>
1157            <nd ref='#{node.id}'/>
1158           </way>
1159          </create>
1160          <create>
1161           <relation id='-1' changeset='#{changeset.id}'>
1162            <member type='way' role='some' ref='#{way.id}'/>
1163            <member type='node' role='some' ref='#{node.id}'/>
1164            <member type='relation' role='some' ref='#{relation.id}'/>
1165           </relation>
1166          </create>
1167         </osmChange>
1168       CHANGESET
1169
1170       # upload it
1171       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1172       assert_response :too_many_requests, "upload did not hit rate limit"
1173     end
1174
1175     ##
1176     # test initial size limit
1177     def test_upload_initial_size_limit
1178       # create a user
1179       user = create(:user)
1180
1181       # create a changeset that puts us near the initial size limit
1182       changeset = create(:changeset, :user => user,
1183                                      :min_lat => (-0.5 * GeoRecord::SCALE).round, :min_lon => (0.5 * GeoRecord::SCALE).round,
1184                                      :max_lat => (0.5 * GeoRecord::SCALE).round, :max_lon => (2.5 * GeoRecord::SCALE).round)
1185
1186       # create authentication header
1187       auth_header = bearer_authorization_header user
1188
1189       # simple diff to create a node
1190       diff = <<~CHANGESET
1191         <osmChange>
1192          <create>
1193           <node id='-1' lon='0.9' lat='2.9' changeset='#{changeset.id}'>
1194            <tag k='foo' v='bar'/>
1195            <tag k='baz' v='bat'/>
1196           </node>
1197          </create>
1198         </osmChange>
1199       CHANGESET
1200
1201       # upload it
1202       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1203       assert_response :payload_too_large, "upload did not hit size limit"
1204     end
1205
1206     ##
1207     # test size limit after one week
1208     def test_upload_week_size_limit
1209       # create a user
1210       user = create(:user)
1211
1212       # create a changeset to establish our initial edit time
1213       create(:changeset, :user => user, :created_at => Time.now.utc - 7.days)
1214
1215       # create a changeset that puts us near the initial size limit
1216       changeset = create(:changeset, :user => user, :bbox => [0.5, -0.5, 2.5, 0.5])
1217
1218       # create authentication header
1219       auth_header = bearer_authorization_header user
1220
1221       # simple diff to create a node way and relation using placeholders
1222       diff = <<~CHANGESET
1223         <osmChange>
1224          <create>
1225           <node id='-1' lon='35' lat='35' changeset='#{changeset.id}'>
1226            <tag k='foo' v='bar'/>
1227            <tag k='baz' v='bat'/>
1228           </node>
1229          </create>
1230         </osmChange>
1231       CHANGESET
1232
1233       # upload it
1234       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1235       assert_response :payload_too_large, "upload did not hit size limit"
1236     end
1237
1238     ##
1239     # when we make some simple changes we get the same changes back from the
1240     # diff download.
1241     def test_diff_download_simple
1242       node = create(:node)
1243
1244       ## First try with a non-public user, which should get a forbidden
1245       auth_header = bearer_authorization_header create(:user, :data_public => false)
1246
1247       # create a temporary changeset
1248       xml = "<osm><changeset>" \
1249             "<tag k='created_by' v='osm test suite checking changesets'/>" \
1250             "</changeset></osm>"
1251       post api_changesets_path, :params => xml, :headers => auth_header
1252       assert_response :forbidden
1253
1254       ## Now try with a normal user
1255       auth_header = bearer_authorization_header
1256
1257       # create a temporary changeset
1258       xml = "<osm><changeset>" \
1259             "<tag k='created_by' v='osm test suite checking changesets'/>" \
1260             "</changeset></osm>"
1261       post api_changesets_path, :params => xml, :headers => auth_header
1262       assert_response :success
1263       changeset_id = @response.body.to_i
1264
1265       # add a diff to it
1266       diff = <<~CHANGESET
1267         <osmChange>
1268          <modify>
1269           <node id='#{node.id}' lon='0.0' lat='0.0' changeset='#{changeset_id}' version='1'/>
1270           <node id='#{node.id}' lon='0.1' lat='0.0' changeset='#{changeset_id}' version='2'/>
1271           <node id='#{node.id}' lon='0.1' lat='0.1' changeset='#{changeset_id}' version='3'/>
1272           <node id='#{node.id}' lon='0.1' lat='0.2' changeset='#{changeset_id}' version='4'/>
1273           <node id='#{node.id}' lon='0.2' lat='0.2' changeset='#{changeset_id}' version='5'/>
1274           <node id='#{node.id}' lon='0.3' lat='0.2' changeset='#{changeset_id}' version='6'/>
1275           <node id='#{node.id}' lon='0.3' lat='0.3' changeset='#{changeset_id}' version='7'/>
1276           <node id='#{node.id}' lon='0.9' lat='0.9' changeset='#{changeset_id}' version='8'/>
1277          </modify>
1278         </osmChange>
1279       CHANGESET
1280
1281       # upload it
1282       post api_changeset_upload_path(changeset_id), :params => diff, :headers => auth_header
1283       assert_response :success,
1284                       "can't upload multiple versions of an element in a diff: #{@response.body}"
1285
1286       get api_changeset_download_path(changeset_id)
1287       assert_response :success
1288
1289       assert_select "osmChange", 1
1290       assert_select "osmChange>modify", 8
1291       assert_select "osmChange>modify>node", 8
1292     end
1293
1294     ##
1295     # culled this from josm to ensure that nothing in the way that josm
1296     # is formatting the request is causing it to fail.
1297     #
1298     # NOTE: the error turned out to be something else completely!
1299     def test_josm_upload
1300       auth_header = bearer_authorization_header
1301
1302       # create a temporary changeset
1303       xml = "<osm><changeset>" \
1304             "<tag k='created_by' v='osm test suite checking changesets'/>" \
1305             "</changeset></osm>"
1306       post api_changesets_path, :params => xml, :headers => auth_header
1307       assert_response :success
1308       changeset_id = @response.body.to_i
1309
1310       diff = <<~OSMFILE
1311         <osmChange version="0.6" generator="JOSM">
1312         <create version="0.6" generator="JOSM">
1313           <node id='-1' visible='true' changeset='#{changeset_id}' lat='51.49619982187321' lon='-0.18722061869438314' />
1314           <node id='-2' visible='true' changeset='#{changeset_id}' lat='51.496359883909605' lon='-0.18653093576241928' />
1315           <node id='-3' visible='true' changeset='#{changeset_id}' lat='51.49598132358285' lon='-0.18719613290981638' />
1316           <node id='-4' visible='true' changeset='#{changeset_id}' lat='51.4961591711078' lon='-0.18629015888084607' />
1317           <node id='-5' visible='true' changeset='#{changeset_id}' lat='51.49582126021711' lon='-0.18708186591517145' />
1318           <node id='-6' visible='true' changeset='#{changeset_id}' lat='51.49591018437858' lon='-0.1861432441734455' />
1319           <node id='-7' visible='true' changeset='#{changeset_id}' lat='51.49560784152179' lon='-0.18694719410005425' />
1320           <node id='-8' visible='true' changeset='#{changeset_id}' lat='51.49567389979617' lon='-0.1860289771788006' />
1321           <node id='-9' visible='true' changeset='#{changeset_id}' lat='51.49543761398892' lon='-0.186820684213126' />
1322           <way id='-10' action='modify' visible='true' changeset='#{changeset_id}'>
1323             <nd ref='-1' />
1324             <nd ref='-2' />
1325             <nd ref='-3' />
1326             <nd ref='-4' />
1327             <nd ref='-5' />
1328             <nd ref='-6' />
1329             <nd ref='-7' />
1330             <nd ref='-8' />
1331             <nd ref='-9' />
1332             <tag k='highway' v='residential' />
1333             <tag k='name' v='Foobar Street' />
1334           </way>
1335         </create>
1336         </osmChange>
1337       OSMFILE
1338
1339       # upload it
1340       post api_changeset_upload_path(changeset_id), :params => diff, :headers => auth_header
1341       assert_response :success,
1342                       "can't upload a diff from JOSM: #{@response.body}"
1343
1344       get api_changeset_download_path(changeset_id)
1345       assert_response :success
1346
1347       assert_select "osmChange", 1
1348       assert_select "osmChange>create>node", 9
1349       assert_select "osmChange>create>way", 1
1350       assert_select "osmChange>create>way>nd", 9
1351       assert_select "osmChange>create>way>tag", 2
1352     end
1353
1354     ##
1355     # when we make some complex changes we get the same changes back from the
1356     # diff download.
1357     def test_diff_download_complex
1358       node = create(:node)
1359       node2 = create(:node)
1360       way = create(:way)
1361       auth_header = bearer_authorization_header
1362
1363       # create a temporary changeset
1364       xml = "<osm><changeset>" \
1365             "<tag k='created_by' v='osm test suite checking changesets'/>" \
1366             "</changeset></osm>"
1367       post api_changesets_path, :params => xml, :headers => auth_header
1368       assert_response :success
1369       changeset_id = @response.body.to_i
1370
1371       # add a diff to it
1372       diff = <<~CHANGESET
1373         <osmChange>
1374          <delete>
1375           <node id='#{node.id}' lon='0.0' lat='0.0' changeset='#{changeset_id}' version='1'/>
1376          </delete>
1377          <create>
1378           <node id='-1' lon='0.9' lat='0.9' changeset='#{changeset_id}' version='0'/>
1379           <node id='-2' lon='0.8' lat='0.9' changeset='#{changeset_id}' version='0'/>
1380           <node id='-3' lon='0.7' lat='0.9' changeset='#{changeset_id}' version='0'/>
1381          </create>
1382          <modify>
1383           <node id='#{node2.id}' lon='2.0' lat='1.5' changeset='#{changeset_id}' version='1'/>
1384           <way id='#{way.id}' changeset='#{changeset_id}' version='1'>
1385            <nd ref='#{node2.id}'/>
1386            <nd ref='-1'/>
1387            <nd ref='-2'/>
1388            <nd ref='-3'/>
1389           </way>
1390          </modify>
1391         </osmChange>
1392       CHANGESET
1393
1394       # upload it
1395       post api_changeset_upload_path(changeset_id), :params => diff, :headers => auth_header
1396       assert_response :success,
1397                       "can't upload multiple versions of an element in a diff: #{@response.body}"
1398
1399       get api_changeset_download_path(changeset_id)
1400       assert_response :success
1401
1402       assert_select "osmChange", 1
1403       assert_select "osmChange>create", 3
1404       assert_select "osmChange>delete", 1
1405       assert_select "osmChange>modify", 2
1406       assert_select "osmChange>create>node", 3
1407       assert_select "osmChange>delete>node", 1
1408       assert_select "osmChange>modify>node", 1
1409       assert_select "osmChange>modify>way", 1
1410     end
1411
1412     ##
1413     # check that the bounding box of a changeset gets updated correctly
1414     # FIXME: This should really be moded to a integration test due to the with_controller
1415     def test_changeset_bbox
1416       way = create(:way)
1417       create(:way_node, :way => way, :node => create(:node, :lat => 0.3, :lon => 0.3))
1418
1419       auth_header = bearer_authorization_header
1420
1421       # create a new changeset
1422       xml = "<osm><changeset/></osm>"
1423       post api_changesets_path, :params => xml, :headers => auth_header
1424       assert_response :success, "Creating of changeset failed."
1425       changeset_id = @response.body.to_i
1426
1427       # add a single node to it
1428       with_controller(NodesController.new) do
1429         xml = "<osm><node lon='0.1' lat='0.2' changeset='#{changeset_id}'/></osm>"
1430         post api_nodes_path, :params => xml, :headers => auth_header
1431         assert_response :success, "Couldn't create node."
1432       end
1433
1434       # get the bounding box back from the changeset
1435       get api_changeset_path(changeset_id)
1436       assert_response :success, "Couldn't read back changeset."
1437       assert_select "osm>changeset[min_lon='0.1000000']", 1
1438       assert_select "osm>changeset[max_lon='0.1000000']", 1
1439       assert_select "osm>changeset[min_lat='0.2000000']", 1
1440       assert_select "osm>changeset[max_lat='0.2000000']", 1
1441
1442       # add another node to it
1443       with_controller(NodesController.new) do
1444         xml = "<osm><node lon='0.2' lat='0.1' changeset='#{changeset_id}'/></osm>"
1445         post api_nodes_path, :params => xml, :headers => auth_header
1446         assert_response :success, "Couldn't create second node."
1447       end
1448
1449       # get the bounding box back from the changeset
1450       get api_changeset_path(changeset_id)
1451       assert_response :success, "Couldn't read back changeset for the second time."
1452       assert_select "osm>changeset[min_lon='0.1000000']", 1
1453       assert_select "osm>changeset[max_lon='0.2000000']", 1
1454       assert_select "osm>changeset[min_lat='0.1000000']", 1
1455       assert_select "osm>changeset[max_lat='0.2000000']", 1
1456
1457       # add (delete) a way to it, which contains a point at (3,3)
1458       with_controller(WaysController.new) do
1459         xml = update_changeset(xml_for_way(way), changeset_id)
1460         delete api_way_path(way), :params => xml.to_s, :headers => auth_header
1461         assert_response :success, "Couldn't delete a way."
1462       end
1463
1464       # get the bounding box back from the changeset
1465       get api_changeset_path(changeset_id)
1466       assert_response :success, "Couldn't read back changeset for the third time."
1467       assert_select "osm>changeset[min_lon='0.1000000']", 1
1468       assert_select "osm>changeset[max_lon='0.3000000']", 1
1469       assert_select "osm>changeset[min_lat='0.1000000']", 1
1470       assert_select "osm>changeset[max_lat='0.3000000']", 1
1471     end
1472
1473     ##
1474     # check updating tags on a changeset
1475     def test_changeset_update
1476       private_user = create(:user, :data_public => false)
1477       private_changeset = create(:changeset, :user => private_user)
1478       user = create(:user)
1479       changeset = create(:changeset, :user => user)
1480
1481       ## First try with a non-public user
1482       new_changeset = create_changeset_xml(:user => private_user)
1483       new_tag = XML::Node.new "tag"
1484       new_tag["k"] = "tagtesting"
1485       new_tag["v"] = "valuetesting"
1486       new_changeset.find("//osm/changeset").first << new_tag
1487
1488       # try without any authorization
1489       put api_changeset_path(private_changeset), :params => new_changeset.to_s
1490       assert_response :unauthorized
1491
1492       # try with the wrong authorization
1493       auth_header = bearer_authorization_header
1494       put api_changeset_path(private_changeset), :params => new_changeset.to_s, :headers => auth_header
1495       assert_response :conflict
1496
1497       # now this should get an unauthorized
1498       auth_header = bearer_authorization_header private_user
1499       put api_changeset_path(private_changeset), :params => new_changeset.to_s, :headers => auth_header
1500       assert_require_public_data "user with their data non-public, shouldn't be able to edit their changeset"
1501
1502       ## Now try with the public user
1503       new_changeset = create_changeset_xml(:id => 1)
1504       new_tag = XML::Node.new "tag"
1505       new_tag["k"] = "tagtesting"
1506       new_tag["v"] = "valuetesting"
1507       new_changeset.find("//osm/changeset").first << new_tag
1508
1509       # try without any authorization
1510       put api_changeset_path(changeset), :params => new_changeset.to_s
1511       assert_response :unauthorized
1512
1513       # try with the wrong authorization
1514       auth_header = bearer_authorization_header
1515       put api_changeset_path(changeset), :params => new_changeset.to_s, :headers => auth_header
1516       assert_response :conflict
1517
1518       # now this should work...
1519       auth_header = bearer_authorization_header user
1520       put api_changeset_path(changeset), :params => new_changeset.to_s, :headers => auth_header
1521       assert_response :success
1522
1523       assert_select "osm>changeset[id='#{changeset.id}']", 1
1524       assert_select "osm>changeset>tag", 1
1525       assert_select "osm>changeset>tag[k='tagtesting'][v='valuetesting']", 1
1526     end
1527
1528     ##
1529     # check that a user different from the one who opened the changeset
1530     # can't modify it.
1531     def test_changeset_update_invalid
1532       auth_header = bearer_authorization_header
1533
1534       changeset = create(:changeset)
1535       new_changeset = create_changeset_xml(:user => changeset.user, :id => changeset.id)
1536       new_tag = XML::Node.new "tag"
1537       new_tag["k"] = "testing"
1538       new_tag["v"] = "testing"
1539       new_changeset.find("//osm/changeset").first << new_tag
1540
1541       put api_changeset_path(changeset), :params => new_changeset.to_s, :headers => auth_header
1542       assert_response :conflict
1543     end
1544
1545     ##
1546     # check that a changeset can contain a certain max number of changes.
1547     ## FIXME should be changed to an integration test due to the with_controller
1548     def test_changeset_limits
1549       user = create(:user)
1550       auth_header = bearer_authorization_header user
1551
1552       # create an old changeset to ensure we have the maximum rate limit
1553       create(:changeset, :user => user, :created_at => Time.now.utc - 28.days)
1554
1555       # open a new changeset
1556       xml = "<osm><changeset/></osm>"
1557       post api_changesets_path, :params => xml, :headers => auth_header
1558       assert_response :success, "can't create a new changeset"
1559       cs_id = @response.body.to_i
1560
1561       # start the counter just short of where the changeset should finish.
1562       offset = 10
1563       # alter the database to set the counter on the changeset directly,
1564       # otherwise it takes about 6 minutes to fill all of them.
1565       changeset = Changeset.find(cs_id)
1566       changeset.num_changes = Changeset::MAX_ELEMENTS - offset
1567       changeset.save!
1568
1569       with_controller(NodesController.new) do
1570         # create a new node
1571         xml = "<osm><node changeset='#{cs_id}' lat='0.0' lon='0.0'/></osm>"
1572         post api_nodes_path, :params => xml, :headers => auth_header
1573         assert_response :success, "can't create a new node"
1574         node_id = @response.body.to_i
1575
1576         get api_node_path(node_id)
1577         assert_response :success, "can't read back new node"
1578         node_doc = XML::Parser.string(@response.body).parse
1579         node_xml = node_doc.find("//osm/node").first
1580
1581         # loop until we fill the changeset with nodes
1582         offset.times do |i|
1583           node_xml["lat"] = rand.to_s
1584           node_xml["lon"] = rand.to_s
1585           node_xml["version"] = (i + 1).to_s
1586
1587           put api_node_path(node_id), :params => node_doc.to_s, :headers => auth_header
1588           assert_response :success, "attempt #{i} should have succeeded"
1589         end
1590
1591         # trying again should fail
1592         node_xml["lat"] = rand.to_s
1593         node_xml["lon"] = rand.to_s
1594         node_xml["version"] = offset.to_s
1595
1596         put api_node_path(node_id), :params => node_doc.to_s, :headers => auth_header
1597         assert_response :conflict, "final attempt should have failed"
1598       end
1599
1600       changeset = Changeset.find(cs_id)
1601       assert_equal Changeset::MAX_ELEMENTS + 1, changeset.num_changes
1602
1603       # check that the changeset is now closed as well
1604       assert_not(changeset.open?,
1605                  "changeset should have been auto-closed by exceeding " \
1606                  "element limit.")
1607     end
1608
1609     private
1610
1611     ##
1612     # check that the output consists of one specific changeset
1613     def assert_single_changeset(changeset, &)
1614       assert_dom "> changeset", 1 do
1615         assert_dom "> @id", changeset.id.to_s
1616         assert_dom "> @created_at", changeset.created_at.xmlschema
1617         if changeset.open?
1618           assert_dom "> @open", "true"
1619           assert_dom "> @closed_at", 0
1620         else
1621           assert_dom "> @open", "false"
1622           assert_dom "> @closed_at", changeset.closed_at.xmlschema
1623         end
1624         assert_dom "> @comments_count", changeset.comments.length.to_s
1625         assert_dom "> @changes_count", changeset.num_changes.to_s
1626         yield if block_given?
1627       end
1628     end
1629
1630     def assert_single_changeset_json(changeset, js)
1631       assert_equal changeset.id, js["changeset"]["id"]
1632       assert_equal changeset.created_at.xmlschema, js["changeset"]["created_at"]
1633       if changeset.open?
1634         assert js["changeset"]["open"]
1635         assert_nil js["changeset"]["closed_at"]
1636       else
1637         assert_not js["changeset"]["open"]
1638         assert_equal changeset.closed_at.xmlschema, js["changeset"]["closed_at"]
1639       end
1640       assert_equal changeset.comments.length, js["changeset"]["comments_count"]
1641       assert_equal changeset.num_changes, js["changeset"]["changes_count"]
1642     end
1643
1644     ##
1645     # check that certain changesets exist in the output in the specified order
1646     def assert_changesets_in_order(changesets)
1647       assert_select "osm>changeset", changesets.size
1648       changesets.each_with_index do |changeset, index|
1649         assert_select "osm>changeset:nth-child(#{index + 1})[id='#{changeset.id}']", 1
1650       end
1651     end
1652
1653     ##
1654     # update the changeset_id of a way element
1655     def update_changeset(xml, changeset_id)
1656       xml_attr_rewrite(xml, "changeset", changeset_id)
1657     end
1658
1659     ##
1660     # update an attribute in a way element
1661     def xml_attr_rewrite(xml, name, value)
1662       xml.find("//osm/way").first[name] = value.to_s
1663       xml
1664     end
1665
1666     ##
1667     # build XML for changesets
1668     def create_changeset_xml(user: nil, id: nil)
1669       root = XML::Document.new
1670       root.root = XML::Node.new "osm"
1671       cs = XML::Node.new "changeset"
1672       if user
1673         cs["user"] = user.display_name
1674         cs["uid"] = user.id.to_s
1675       end
1676       cs["id"] = id.to_s if id
1677       root.root << cs
1678       root
1679     end
1680   end
1681 end