test/controllers/api/changesets_controller_test.rb

   1 require "test_helper"
   2
   3 module Api
   4   class ChangesetsControllerTest < ActionDispatch::IntegrationTest
   5     ##
   6     # test all routes which lead to this controller
   7     def test_routes
   8       assert_routing(
   9         { :path => "/api/0.6/changesets", :method => :get },
  10         { :controller => "api/changesets", :action => "index" }
  11       )
  12       assert_routing(
  13         { :path => "/api/0.6/changesets.json", :method => :get },
  14         { :controller => "api/changesets", :action => "index", :format => "json" }
  15       )
  16       assert_routing(
  17         { :path => "/api/0.6/changesets", :method => :post },
  18         { :controller => "api/changesets", :action => "create" }
  19       )
  20       assert_routing(
  21         { :path => "/api/0.6/changeset/1", :method => :get },
  22         { :controller => "api/changesets", :action => "show", :id => "1" }
  23       )
  24       assert_routing(
  25         { :path => "/api/0.6/changeset/1.json", :method => :get },
  26         { :controller => "api/changesets", :action => "show", :id => "1", :format => "json" }
  27       )
  28       assert_routing(
  29         { :path => "/api/0.6/changeset/1", :method => :put },
  30         { :controller => "api/changesets", :action => "update", :id => "1" }
  31       )
  32
  33       assert_recognizes(
  34         { :controller => "api/changesets", :action => "create" },
  35         { :path => "/api/0.6/changeset/create", :method => :put }
  36       )
  37     end
  38
  39     ##
  40     # test the query functionality of changesets
  41     def test_index
  42       private_user = create(:user, :data_public => false)
  43       private_user_changeset = create(:changeset, :user => private_user)
  44       private_user_closed_changeset = create(:changeset, :closed, :user => private_user)
  45       user = create(:user)
  46       changeset = create(:changeset, :user => user)
  47       closed_changeset = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 1, 1, 0, 0, 0), :closed_at => Time.utc(2008, 1, 2, 0, 0, 0))
  48       changeset2 = create(:changeset, :bbox => [5, 5, 15, 15])
  49       changeset3 = create(:changeset, :bbox => [4.5, 4.5, 5, 5])
  50
  51       get api_changesets_path(:bbox => "-10,-10, 10, 10")
  52       assert_response :success, "can't get changesets in bbox"
  53       assert_changesets_in_order [changeset3, changeset2]
  54
  55       get api_changesets_path(:bbox => "4.5,4.5,4.6,4.6")
  56       assert_response :success, "can't get changesets in bbox"
  57       assert_changesets_in_order [changeset3]
  58
  59       # not found when looking for changesets of non-existing users
  60       get api_changesets_path(:user => User.maximum(:id) + 1)
  61       assert_response :not_found
  62       assert_equal "text/plain", @response.media_type
  63       get api_changesets_path(:display_name => " ")
  64       assert_response :not_found
  65       assert_equal "text/plain", @response.media_type
  66
  67       # can't get changesets of user 1 without authenticating
  68       get api_changesets_path(:user => private_user.id)
  69       assert_response :not_found, "shouldn't be able to get changesets by non-public user (ID)"
  70       get api_changesets_path(:display_name => private_user.display_name)
  71       assert_response :not_found, "shouldn't be able to get changesets by non-public user (name)"
  72
  73       # but this should work
  74       auth_header = bearer_authorization_header private_user
  75       get api_changesets_path(:user => private_user.id), :headers => auth_header
  76       assert_response :success, "can't get changesets by user ID"
  77       assert_changesets_in_order [private_user_changeset, private_user_closed_changeset]
  78
  79       get api_changesets_path(:display_name => private_user.display_name), :headers => auth_header
  80       assert_response :success, "can't get changesets by user name"
  81       assert_changesets_in_order [private_user_changeset, private_user_closed_changeset]
  82
  83       # test json endpoint
  84       get api_changesets_path(:display_name => private_user.display_name), :headers => auth_header, :params => { :format => "json" }
  85       assert_response :success, "can't get changesets by user name"
  86
  87       js = ActiveSupport::JSON.decode(@response.body)
  88       assert_not_nil js
  89
  90       assert_equal Settings.api_version, js["version"]
  91       assert_equal Settings.generator, js["generator"]
  92       assert_equal 2, js["changesets"].count
  93
  94       # check that the correct error is given when we provide both UID and name
  95       get api_changesets_path(:user => private_user.id,
  96                               :display_name => private_user.display_name), :headers => auth_header
  97       assert_response :bad_request, "should be a bad request to have both ID and name specified"
  98
  99       get api_changesets_path(:user => private_user.id, :open => true), :headers => auth_header
 100       assert_response :success, "can't get changesets by user and open"
 101       assert_changesets_in_order [private_user_changeset]
 102
 103       get api_changesets_path(:time => "2007-12-31"), :headers => auth_header
 104       assert_response :success, "can't get changesets by time-since"
 105       assert_changesets_in_order [changeset3, changeset2, changeset, private_user_changeset, private_user_closed_changeset, closed_changeset]
 106
 107       get api_changesets_path(:time => "2008-01-01T12:34Z"), :headers => auth_header
 108       assert_response :success, "can't get changesets by time-since with hour"
 109       assert_changesets_in_order [changeset3, changeset2, changeset, private_user_changeset, private_user_closed_changeset, closed_changeset]
 110
 111       get api_changesets_path(:time => "2007-12-31T23:59Z,2008-01-02T00:01Z"), :headers => auth_header
 112       assert_response :success, "can't get changesets by time-range"
 113       assert_changesets_in_order [closed_changeset]
 114
 115       get api_changesets_path(:open => "true"), :headers => auth_header
 116       assert_response :success, "can't get changesets by open-ness"
 117       assert_changesets_in_order [changeset3, changeset2, changeset, private_user_changeset]
 118
 119       get api_changesets_path(:closed => "true"), :headers => auth_header
 120       assert_response :success, "can't get changesets by closed-ness"
 121       assert_changesets_in_order [private_user_closed_changeset, closed_changeset]
 122
 123       get api_changesets_path(:closed => "true", :user => private_user.id), :headers => auth_header
 124       assert_response :success, "can't get changesets by closed-ness and user"
 125       assert_changesets_in_order [private_user_closed_changeset]
 126
 127       get api_changesets_path(:closed => "true", :user => user.id), :headers => auth_header
 128       assert_response :success, "can't get changesets by closed-ness and user"
 129       assert_changesets_in_order [closed_changeset]
 130
 131       get api_changesets_path(:changesets => "#{private_user_changeset.id},#{changeset.id},#{closed_changeset.id}"), :headers => auth_header
 132       assert_response :success, "can't get changesets by id (as comma-separated string)"
 133       assert_changesets_in_order [changeset, private_user_changeset, closed_changeset]
 134
 135       get api_changesets_path(:changesets => ""), :headers => auth_header
 136       assert_response :bad_request, "should be a bad request since changesets is empty"
 137     end
 138
 139     ##
 140     # test the query functionality of changesets with the limit parameter
 141     def test_index_limit
 142       user = create(:user)
 143       changeset1 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 1, 1, 0, 0, 0), :closed_at => Time.utc(2008, 1, 2, 0, 0, 0))
 144       changeset2 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 2, 1, 0, 0, 0), :closed_at => Time.utc(2008, 2, 2, 0, 0, 0))
 145       changeset3 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 3, 1, 0, 0, 0), :closed_at => Time.utc(2008, 3, 2, 0, 0, 0))
 146       changeset4 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 4, 1, 0, 0, 0), :closed_at => Time.utc(2008, 4, 2, 0, 0, 0))
 147       changeset5 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 5, 1, 0, 0, 0), :closed_at => Time.utc(2008, 5, 2, 0, 0, 0))
 148
 149       get api_changesets_path
 150       assert_response :success
 151       assert_changesets_in_order [changeset5, changeset4, changeset3, changeset2, changeset1]
 152
 153       get api_changesets_path(:limit => "3")
 154       assert_response :success
 155       assert_changesets_in_order [changeset5, changeset4, changeset3]
 156
 157       get api_changesets_path(:limit => "0")
 158       assert_response :bad_request
 159
 160       get api_changesets_path(:limit => Settings.max_changeset_query_limit)
 161       assert_response :success
 162       assert_changesets_in_order [changeset5, changeset4, changeset3, changeset2, changeset1]
 163
 164       get api_changesets_path(:limit => Settings.max_changeset_query_limit + 1)
 165       assert_response :bad_request
 166     end
 167
 168     ##
 169     # test the query functionality of sequential changesets with order and time parameters
 170     def test_index_order
 171       user = create(:user)
 172       changeset1 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 1, 1, 0, 0, 0), :closed_at => Time.utc(2008, 1, 2, 0, 0, 0))
 173       changeset2 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 2, 1, 0, 0, 0), :closed_at => Time.utc(2008, 2, 2, 0, 0, 0))
 174       changeset3 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 3, 1, 0, 0, 0), :closed_at => Time.utc(2008, 3, 2, 0, 0, 0))
 175       changeset4 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 4, 1, 0, 0, 0), :closed_at => Time.utc(2008, 4, 2, 0, 0, 0))
 176       changeset5 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 5, 1, 0, 0, 0), :closed_at => Time.utc(2008, 5, 2, 0, 0, 0))
 177       changeset6 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 6, 1, 0, 0, 0), :closed_at => Time.utc(2008, 6, 2, 0, 0, 0))
 178
 179       get api_changesets_path
 180       assert_response :success
 181       assert_changesets_in_order [changeset6, changeset5, changeset4, changeset3, changeset2, changeset1]
 182
 183       get api_changesets_path(:order => "oldest")
 184       assert_response :success
 185       assert_changesets_in_order [changeset1, changeset2, changeset3, changeset4, changeset5, changeset6]
 186
 187       [
 188         # lower time bound at the opening time of a changeset
 189         ["2008-02-01T00:00:00Z", "2008-05-15T00:00:00Z", [changeset5, changeset4, changeset3, changeset2], [changeset5, changeset4, changeset3, changeset2]],
 190         # lower time bound in the middle of a changeset
 191         ["2008-02-01T12:00:00Z", "2008-05-15T00:00:00Z", [changeset5, changeset4, changeset3, changeset2], [changeset5, changeset4, changeset3]],
 192         # lower time bound at the closing time of a changeset
 193         ["2008-02-02T00:00:00Z", "2008-05-15T00:00:00Z", [changeset5, changeset4, changeset3, changeset2], [changeset5, changeset4, changeset3]],
 194         # lower time bound after the closing time of a changeset
 195         ["2008-02-02T00:00:01Z", "2008-05-15T00:00:00Z", [changeset5, changeset4, changeset3], [changeset5, changeset4, changeset3]],
 196         # upper time bound in the middle of a changeset
 197         ["2007-09-09T12:00:00Z", "2008-04-01T12:00:00Z", [changeset4, changeset3, changeset2, changeset1], [changeset4, changeset3, changeset2, changeset1]],
 198         # empty range
 199         ["2009-02-02T00:00:01Z", "2018-05-15T00:00:00Z", [], []]
 200       ].each do |from, to, interval_changesets, point_changesets|
 201         get api_changesets_path(:time => "#{from},#{to}")
 202         assert_response :success
 203         assert_changesets_in_order interval_changesets
 204
 205         get api_changesets_path(:from => from, :to => to)
 206         assert_response :success
 207         assert_changesets_in_order point_changesets
 208
 209         get api_changesets_path(:from => from, :to => to, :order => "oldest")
 210         assert_response :success
 211         assert_changesets_in_order point_changesets.reverse
 212       end
 213     end
 214
 215     ##
 216     # test the query functionality of overlapping changesets with order and time parameters
 217     def test_index_order_overlapping
 218       user = create(:user)
 219       changeset1 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2015, 6, 4, 17, 0, 0), :closed_at => Time.utc(2015, 6, 4, 17, 0, 0))
 220       changeset2 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2015, 6, 4, 16, 0, 0), :closed_at => Time.utc(2015, 6, 4, 18, 0, 0))
 221       changeset3 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2015, 6, 4, 14, 0, 0), :closed_at => Time.utc(2015, 6, 4, 20, 0, 0))
 222       changeset4 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2015, 6, 3, 23, 0, 0), :closed_at => Time.utc(2015, 6, 4, 23, 0, 0))
 223       create(:changeset, :closed, :user => user, :created_at => Time.utc(2015, 6, 2, 23, 0, 0), :closed_at => Time.utc(2015, 6, 3, 23, 0, 0))
 224
 225       get api_changesets_path(:time => "2015-06-04T00:00:00Z")
 226       assert_response :success
 227       assert_changesets_in_order [changeset1, changeset2, changeset3, changeset4]
 228
 229       get api_changesets_path(:from => "2015-06-04T00:00:00Z")
 230       assert_response :success
 231       assert_changesets_in_order [changeset1, changeset2, changeset3]
 232
 233       get api_changesets_path(:from => "2015-06-04T00:00:00Z", :order => "oldest")
 234       assert_response :success
 235       assert_changesets_in_order [changeset3, changeset2, changeset1]
 236
 237       get api_changesets_path(:time => "2015-06-04T16:00:00Z,2015-06-04T17:30:00Z")
 238       assert_response :success
 239       assert_changesets_in_order [changeset1, changeset2, changeset3, changeset4]
 240
 241       get api_changesets_path(:from => "2015-06-04T16:00:00Z", :to => "2015-06-04T17:30:00Z")
 242       assert_response :success
 243       assert_changesets_in_order [changeset1, changeset2]
 244
 245       get api_changesets_path(:from => "2015-06-04T16:00:00Z", :to => "2015-06-04T17:30:00Z", :order => "oldest")
 246       assert_response :success
 247       assert_changesets_in_order [changeset2, changeset1]
 248     end
 249
 250     ##
 251     # check that errors are returned if garbage is inserted
 252     # into query strings
 253     def test_index_invalid
 254       ["abracadabra!",
 255        "1,2,3,F",
 256        ";drop table users;"].each do |bbox|
 257         get api_changesets_path(:bbox => bbox)
 258         assert_response :bad_request, "'#{bbox}' isn't a bbox"
 259       end
 260
 261       ["now()",
 262        "00-00-00",
 263        ";drop table users;",
 264        ",",
 265        "-,-"].each do |time|
 266         get api_changesets_path(:time => time)
 267         assert_response :bad_request, "'#{time}' isn't a valid time range"
 268       end
 269
 270       ["me",
 271        "foobar",
 272        "-1",
 273        "0"].each do |uid|
 274         get api_changesets_path(:user => uid)
 275         assert_response :bad_request, "'#{uid}' isn't a valid user ID"
 276       end
 277
 278       get api_changesets_path(:order => "oldest", :time => "2008-01-01T00:00Z,2018-01-01T00:00Z")
 279       assert_response :bad_request, "cannot use order=oldest with time"
 280     end
 281
 282     # -----------------------
 283     # Test simple changeset creation
 284     # -----------------------
 285
 286     def test_create
 287       auth_header = bearer_authorization_header create(:user, :data_public => false)
 288       # Create the first user's changeset
 289       xml = "<osm><changeset>" \
 290             "<tag k='created_by' v='osm test suite checking changesets'/>" \
 291             "</changeset></osm>"
 292       post api_changesets_path, :params => xml, :headers => auth_header
 293       assert_require_public_data
 294
 295       auth_header = bearer_authorization_header
 296       # Create the first user's changeset
 297       xml = "<osm><changeset>" \
 298             "<tag k='created_by' v='osm test suite checking changesets'/>" \
 299             "</changeset></osm>"
 300       post api_changesets_path, :params => xml, :headers => auth_header
 301
 302       assert_response :success, "Creation of changeset did not return success status"
 303       newid = @response.body.to_i
 304
 305       # check end time, should be an hour ahead of creation time
 306       cs = Changeset.find(newid)
 307       duration = cs.closed_at - cs.created_at
 308       # the difference can either be a rational, or a floating point number
 309       # of seconds, depending on the code path taken :-(
 310       if duration.instance_of?(Rational)
 311         assert_equal Rational(1, 24), duration, "initial idle timeout should be an hour (#{cs.created_at} -> #{cs.closed_at})"
 312       else
 313         # must be number of seconds...
 314         assert_equal 3600, duration.round, "initial idle timeout should be an hour (#{cs.created_at} -> #{cs.closed_at})"
 315       end
 316
 317       # checks if uploader was subscribed
 318       assert_equal 1, cs.subscribers.length
 319     end
 320
 321     def test_create_invalid
 322       auth_header = bearer_authorization_header create(:user, :data_public => false)
 323       xml = "<osm><changeset></osm>"
 324       post api_changesets_path, :params => xml, :headers => auth_header
 325       assert_require_public_data
 326
 327       ## Try the public user
 328       auth_header = bearer_authorization_header
 329       xml = "<osm><changeset></osm>"
 330       post api_changesets_path, :params => xml, :headers => auth_header
 331       assert_response :bad_request, "creating a invalid changeset should fail"
 332     end
 333
 334     def test_create_invalid_no_content
 335       ## First check with no auth
 336       post api_changesets_path
 337       assert_response :unauthorized, "shouldn't be able to create a changeset with no auth"
 338
 339       ## Now try to with a non-public user
 340       auth_header = bearer_authorization_header create(:user, :data_public => false)
 341       post api_changesets_path, :headers => auth_header
 342       assert_require_public_data
 343
 344       ## Try an inactive user
 345       auth_header = bearer_authorization_header create(:user, :pending)
 346       post api_changesets_path, :headers => auth_header
 347       assert_inactive_user
 348
 349       ## Now try to use a normal user
 350       auth_header = bearer_authorization_header
 351       post api_changesets_path, :headers => auth_header
 352       assert_response :bad_request, "creating a changeset with no content should fail"
 353     end
 354
 355     def test_create_wrong_method
 356       auth_header = bearer_authorization_header
 357
 358       put api_changesets_path, :headers => auth_header
 359       assert_response :not_found
 360       assert_template "rescues/routing_error"
 361     end
 362
 363     def test_create_legacy_path
 364       auth_header = bearer_authorization_header
 365       xml = "<osm><changeset></changeset></osm>"
 366
 367       assert_difference "Changeset.count", 1 do
 368         put "/api/0.6/changeset/create", :params => xml, :headers => auth_header
 369       end
 370
 371       assert_response :success, "Creation of changeset did not return success status"
 372       assert_equal Changeset.last.id, @response.body.to_i
 373     end
 374
 375     ##
 376     # check that the changeset can be shown and returns the correct
 377     # document structure.
 378     def test_show
 379       changeset = create(:changeset)
 380
 381       get api_changeset_path(changeset)
 382       assert_response :success, "cannot get first changeset"
 383
 384       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
 385       assert_single_changeset changeset do
 386         assert_dom "> discussion", 0
 387       end
 388
 389       get api_changeset_path(changeset, :include_discussion => true)
 390       assert_response :success, "cannot get first changeset with comments"
 391
 392       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
 393       assert_single_changeset changeset do
 394         assert_dom "> discussion", 1
 395         assert_dom "> discussion > comment", 0
 396       end
 397     end
 398
 399     def test_show_comments
 400       # all comments visible
 401       changeset = create(:changeset, :closed)
 402       comment1, comment2, comment3 = create_list(:changeset_comment, 3, :changeset_id => changeset.id)
 403
 404       get api_changeset_path(changeset, :include_discussion => true)
 405       assert_response :success, "cannot get closed changeset with comments"
 406
 407       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1 do
 408         assert_single_changeset changeset do
 409           assert_dom "> discussion", 1 do
 410             assert_dom "> comment", 3 do |dom_comments|
 411               assert_dom dom_comments[0], "> @id", comment1.id.to_s
 412               assert_dom dom_comments[0], "> @visible", "true"
 413               assert_dom dom_comments[1], "> @id", comment2.id.to_s
 414               assert_dom dom_comments[1], "> @visible", "true"
 415               assert_dom dom_comments[2], "> @id", comment3.id.to_s
 416               assert_dom dom_comments[2], "> @visible", "true"
 417             end
 418           end
 419         end
 420       end
 421
 422       # one hidden comment not included because not asked for
 423       comment2.update(:visible => false)
 424       changeset.reload
 425
 426       get api_changeset_path(changeset, :include_discussion => true)
 427       assert_response :success, "cannot get closed changeset with comments"
 428
 429       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
 430       assert_single_changeset changeset do
 431         assert_dom "> discussion", 1 do
 432           assert_dom "> comment", 2 do |dom_comments|
 433             assert_dom dom_comments[0], "> @id", comment1.id.to_s
 434             assert_dom dom_comments[0], "> @visible", "true"
 435             assert_dom dom_comments[1], "> @id", comment3.id.to_s
 436             assert_dom dom_comments[1], "> @visible", "true"
 437           end
 438         end
 439       end
 440
 441       # one hidden comment not included because no permissions
 442       get api_changeset_path(changeset, :include_discussion => true, :show_hidden_comments => true)
 443       assert_response :success, "cannot get closed changeset with comments"
 444
 445       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
 446       assert_single_changeset changeset do
 447         assert_dom "> discussion", 1 do
 448           assert_dom "> comment", 2 do |dom_comments|
 449             assert_dom dom_comments[0], "> @id", comment1.id.to_s
 450             assert_dom dom_comments[0], "> @visible", "true"
 451             # maybe will show an empty comment element with visible=false in the future
 452             assert_dom dom_comments[1], "> @id", comment3.id.to_s
 453             assert_dom dom_comments[1], "> @visible", "true"
 454           end
 455         end
 456       end
 457
 458       # one hidden comment shown to moderators
 459       moderator_user = create(:moderator_user)
 460       auth_header = bearer_authorization_header moderator_user
 461       get api_changeset_path(changeset, :include_discussion => true, :show_hidden_comments => true), :headers => auth_header
 462       assert_response :success, "cannot get closed changeset with comments"
 463
 464       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
 465       assert_single_changeset changeset do
 466         assert_dom "> discussion", 1 do
 467           assert_dom "> comment", 3 do |dom_comments|
 468             assert_dom dom_comments[0], "> @id", comment1.id.to_s
 469             assert_dom dom_comments[0], "> @visible", "true"
 470             assert_dom dom_comments[1], "> @id", comment2.id.to_s
 471             assert_dom dom_comments[1], "> @visible", "false"
 472             assert_dom dom_comments[2], "> @id", comment3.id.to_s
 473             assert_dom dom_comments[2], "> @visible", "true"
 474           end
 475         end
 476       end
 477     end
 478
 479     def test_show_tags
 480       changeset = create(:changeset, :closed)
 481       create(:changeset_tag, :changeset => changeset, :k => "created_by", :v => "JOSM/1.5 (18364)")
 482       create(:changeset_tag, :changeset => changeset, :k => "comment", :v => "changeset comment")
 483
 484       get api_changeset_path(changeset)
 485
 486       assert_response :success
 487       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
 488       assert_single_changeset changeset do
 489         assert_dom "> tag", 2
 490         assert_dom "> tag[k='created_by'][v='JOSM/1.5 (18364)']", 1
 491         assert_dom "> tag[k='comment'][v='changeset comment']", 1
 492       end
 493     end
 494
 495     def test_show_json
 496       changeset = create(:changeset)
 497
 498       get api_changeset_path(changeset, :format => "json")
 499       assert_response :success, "cannot get first changeset"
 500
 501       js = ActiveSupport::JSON.decode(@response.body)
 502       assert_not_nil js
 503
 504       assert_equal Settings.api_version, js["version"]
 505       assert_equal Settings.generator, js["generator"]
 506       assert_single_changeset_json changeset, js
 507       assert_nil js["changeset"]["tags"]
 508       assert_nil js["changeset"]["comments"]
 509       assert_equal changeset.user.id, js["changeset"]["uid"]
 510       assert_equal changeset.user.display_name, js["changeset"]["user"]
 511
 512       get api_changeset_path(changeset, :format => "json", :include_discussion => true)
 513       assert_response :success, "cannot get first changeset with comments"
 514
 515       js = ActiveSupport::JSON.decode(@response.body)
 516       assert_not_nil js
 517       assert_equal Settings.api_version, js["version"]
 518       assert_equal Settings.generator, js["generator"]
 519       assert_single_changeset_json changeset, js
 520       assert_nil js["changeset"]["tags"]
 521       assert_nil js["changeset"]["min_lat"]
 522       assert_nil js["changeset"]["min_lon"]
 523       assert_nil js["changeset"]["max_lat"]
 524       assert_nil js["changeset"]["max_lon"]
 525       assert_equal 0, js["changeset"]["comments"].count
 526     end
 527
 528     def test_show_comments_json
 529       # all comments visible
 530       changeset = create(:changeset, :closed)
 531       comment0, comment1, comment2 = create_list(:changeset_comment, 3, :changeset_id => changeset.id)
 532
 533       get api_changeset_path(changeset, :format => "json", :include_discussion => true)
 534       assert_response :success, "cannot get closed changeset with comments"
 535
 536       js = ActiveSupport::JSON.decode(@response.body)
 537       assert_not_nil js
 538       assert_equal Settings.api_version, js["version"]
 539       assert_equal Settings.generator, js["generator"]
 540       assert_single_changeset_json changeset, js
 541       assert_equal 3, js["changeset"]["comments"].count
 542       assert_equal comment0.id, js["changeset"]["comments"][0]["id"]
 543       assert js["changeset"]["comments"][0]["visible"]
 544       assert_equal comment1.id, js["changeset"]["comments"][1]["id"]
 545       assert js["changeset"]["comments"][1]["visible"]
 546       assert_equal comment2.id, js["changeset"]["comments"][2]["id"]
 547       assert js["changeset"]["comments"][2]["visible"]
 548
 549       # one hidden comment not included because not asked for
 550       comment1.update(:visible => false)
 551       changeset.reload
 552
 553       get api_changeset_path(changeset, :format => "json", :include_discussion => true)
 554       assert_response :success, "cannot get closed changeset with comments"
 555
 556       js = ActiveSupport::JSON.decode(@response.body)
 557       assert_not_nil js
 558       assert_equal Settings.api_version, js["version"]
 559       assert_equal Settings.generator, js["generator"]
 560       assert_single_changeset_json changeset, js
 561       assert_equal 2, js["changeset"]["comments"].count
 562       assert_equal comment0.id, js["changeset"]["comments"][0]["id"]
 563       assert js["changeset"]["comments"][0]["visible"]
 564       assert_equal comment2.id, js["changeset"]["comments"][1]["id"]
 565       assert js["changeset"]["comments"][1]["visible"]
 566
 567       # one hidden comment not included because no permissions
 568       get api_changeset_path(changeset, :format => "json", :include_discussion => true, :show_hidden_comments => true)
 569       assert_response :success, "cannot get closed changeset with comments"
 570
 571       js = ActiveSupport::JSON.decode(@response.body)
 572       assert_not_nil js
 573       assert_equal Settings.api_version, js["version"]
 574       assert_equal Settings.generator, js["generator"]
 575       assert_single_changeset_json changeset, js
 576       assert_equal 2, js["changeset"]["comments"].count
 577       assert_equal comment0.id, js["changeset"]["comments"][0]["id"]
 578       assert js["changeset"]["comments"][0]["visible"]
 579       # maybe will show an empty comment element with visible=false in the future
 580       assert_equal comment2.id, js["changeset"]["comments"][1]["id"]
 581       assert js["changeset"]["comments"][1]["visible"]
 582
 583       # one hidden comment shown to moderators
 584       moderator_user = create(:moderator_user)
 585       auth_header = bearer_authorization_header moderator_user
 586       get api_changeset_path(changeset, :format => "json", :include_discussion => true, :show_hidden_comments => true), :headers => auth_header
 587       assert_response :success, "cannot get closed changeset with comments"
 588
 589       js = ActiveSupport::JSON.decode(@response.body)
 590       assert_not_nil js
 591       assert_equal Settings.api_version, js["version"]
 592       assert_equal Settings.generator, js["generator"]
 593       assert_single_changeset_json changeset, js
 594       assert_equal 3, js["changeset"]["comments"].count
 595       assert_equal comment0.id, js["changeset"]["comments"][0]["id"]
 596       assert js["changeset"]["comments"][0]["visible"]
 597       assert_equal comment1.id, js["changeset"]["comments"][1]["id"]
 598       assert_not js["changeset"]["comments"][1]["visible"]
 599       assert_equal comment2.id, js["changeset"]["comments"][2]["id"]
 600       assert js["changeset"]["comments"][2]["visible"]
 601     end
 602
 603     def test_show_tags_json
 604       changeset = create(:changeset, :closed)
 605       create(:changeset_tag, :changeset => changeset, :k => "created_by", :v => "JOSM/1.5 (18364)")
 606       create(:changeset_tag, :changeset => changeset, :k => "comment", :v => "changeset comment")
 607
 608       get api_changeset_path(changeset, :format => "json")
 609
 610       assert_response :success
 611       js = ActiveSupport::JSON.decode(@response.body)
 612       assert_not_nil js
 613       assert_equal Settings.api_version, js["version"]
 614       assert_equal Settings.generator, js["generator"]
 615       assert_single_changeset_json changeset, js
 616       assert_equal 2, js["changeset"]["tags"].count
 617       assert_equal "JOSM/1.5 (18364)", js["changeset"]["tags"]["created_by"]
 618       assert_equal "changeset comment", js["changeset"]["tags"]["comment"]
 619     end
 620
 621     def test_show_bbox_json
 622       changeset = create(:changeset, :bbox => [5, -5, 12, 15])
 623
 624       get api_changeset_path(changeset, :format => "json")
 625       assert_response :success, "cannot get first changeset"
 626
 627       js = ActiveSupport::JSON.decode(@response.body)
 628       assert_not_nil js
 629       assert_equal(-5, js["changeset"]["min_lat"])
 630       assert_equal 5, js["changeset"]["min_lon"]
 631       assert_equal 15, js["changeset"]["max_lat"]
 632       assert_equal 12, js["changeset"]["max_lon"]
 633     end
 634
 635     ##
 636     # check that a changeset that doesn't exist returns an appropriate message
 637     def test_show_not_found
 638       [0, -32, 233455644, "afg", "213"].each do |id|
 639         get api_changeset_path(id)
 640         assert_response :not_found, "should get a not found"
 641       rescue ActionController::UrlGenerationError => e
 642         assert_match(/No route matches/, e.to_s)
 643       end
 644     end
 645
 646     ##
 647     # test a complex delete where we delete elements which rely on eachother
 648     # in the same transaction.
 649     def test_upload_delete
 650       changeset = create(:changeset)
 651       super_relation = create(:relation)
 652       used_relation = create(:relation)
 653       used_way = create(:way)
 654       used_node = create(:node)
 655       create(:relation_member, :relation => super_relation, :member => used_relation)
 656       create(:relation_member, :relation => super_relation, :member => used_way)
 657       create(:relation_member, :relation => super_relation, :member => used_node)
 658
 659       auth_header = bearer_authorization_header changeset.user
 660
 661       diff = XML::Document.new
 662       diff.root = XML::Node.new "osmChange"
 663       delete = XML::Node.new "delete"
 664       diff.root << delete
 665       delete << xml_node_for_relation(super_relation)
 666       delete << xml_node_for_relation(used_relation)
 667       delete << xml_node_for_way(used_way)
 668       delete << xml_node_for_node(used_node)
 669
 670       # update the changeset to one that this user owns
 671       %w[node way relation].each do |type|
 672         delete.find("//osmChange/delete/#{type}").each do |n|
 673           n["changeset"] = changeset.id.to_s
 674         end
 675       end
 676
 677       # upload it
 678       post api_changeset_upload_path(changeset), :params => diff.to_s, :headers => auth_header
 679       assert_response :success,
 680                       "can't upload a deletion diff to changeset: #{@response.body}"
 681
 682       # check the response is well-formed
 683       assert_select "diffResult>node", 1
 684       assert_select "diffResult>way", 1
 685       assert_select "diffResult>relation", 2
 686
 687       # check that everything was deleted
 688       assert_not Node.find(used_node.id).visible
 689       assert_not Way.find(used_way.id).visible
 690       assert_not Relation.find(super_relation.id).visible
 691       assert_not Relation.find(used_relation.id).visible
 692     end
 693
 694     ##
 695     # test uploading a delete with no lat/lon, as they are optional in
 696     # the osmChange spec.
 697     def test_upload_nolatlon_delete
 698       node = create(:node)
 699       changeset = create(:changeset)
 700
 701       auth_header = bearer_authorization_header changeset.user
 702       diff = "<osmChange><delete><node id='#{node.id}' version='#{node.version}' changeset='#{changeset.id}'/></delete></osmChange>"
 703
 704       # upload it
 705       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
 706       assert_response :success,
 707                       "can't upload a deletion diff to changeset: #{@response.body}"
 708
 709       # check the response is well-formed
 710       assert_select "diffResult>node", 1
 711
 712       # check that everything was deleted
 713       assert_not Node.find(node.id).visible
 714     end
 715
 716     def test_repeated_changeset_create
 717       3.times do
 718         auth_header = bearer_authorization_header
 719
 720         # create a temporary changeset
 721         xml = "<osm><changeset>" \
 722               "<tag k='created_by' v='osm test suite checking changesets'/>" \
 723               "</changeset></osm>"
 724         assert_difference "Changeset.count", 1 do
 725           post api_changesets_path, :params => xml, :headers => auth_header
 726         end
 727         assert_response :success
 728       end
 729     end
 730
 731     def test_upload_large_changeset
 732       user = create(:user)
 733       auth_header = bearer_authorization_header user
 734
 735       # create an old changeset to ensure we have the maximum rate limit
 736       create(:changeset, :user => user, :created_at => Time.now.utc - 28.days)
 737
 738       # create a changeset
 739       post api_changesets_path, :params => "<osm><changeset/></osm>", :headers => auth_header
 740       assert_response :success, "Should be able to create a changeset: #{@response.body}"
 741       changeset_id = @response.body.to_i
 742
 743       # upload some widely-spaced nodes, spiralling positive and negative
 744       diff = <<~CHANGESET
 745         <osmChange>
 746          <create>
 747           <node id='-1' lon='-20' lat='-10' changeset='#{changeset_id}'/>
 748           <node id='-10' lon='20'  lat='10' changeset='#{changeset_id}'/>
 749           <node id='-2' lon='-40' lat='-20' changeset='#{changeset_id}'/>
 750           <node id='-11' lon='40'  lat='20' changeset='#{changeset_id}'/>
 751           <node id='-3' lon='-60' lat='-30' changeset='#{changeset_id}'/>
 752           <node id='-12' lon='60'  lat='30' changeset='#{changeset_id}'/>
 753           <node id='-4' lon='-80' lat='-40' changeset='#{changeset_id}'/>
 754           <node id='-13' lon='80'  lat='40' changeset='#{changeset_id}'/>
 755           <node id='-5' lon='-100' lat='-50' changeset='#{changeset_id}'/>
 756           <node id='-14' lon='100'  lat='50' changeset='#{changeset_id}'/>
 757           <node id='-6' lon='-120' lat='-60' changeset='#{changeset_id}'/>
 758           <node id='-15' lon='120'  lat='60' changeset='#{changeset_id}'/>
 759           <node id='-7' lon='-140' lat='-70' changeset='#{changeset_id}'/>
 760           <node id='-16' lon='140'  lat='70' changeset='#{changeset_id}'/>
 761           <node id='-8' lon='-160' lat='-80' changeset='#{changeset_id}'/>
 762           <node id='-17' lon='160'  lat='80' changeset='#{changeset_id}'/>
 763           <node id='-9' lon='-179.9' lat='-89.9' changeset='#{changeset_id}'/>
 764           <node id='-18' lon='179.9'  lat='89.9' changeset='#{changeset_id}'/>
 765          </create>
 766         </osmChange>
 767       CHANGESET
 768
 769       # upload it, which used to cause an error like "PGError: ERROR:
 770       # integer out of range" (bug #2152). but shouldn't any more.
 771       post api_changeset_upload_path(changeset_id), :params => diff, :headers => auth_header
 772       assert_response :success,
 773                       "can't upload a spatially-large diff to changeset: #{@response.body}"
 774
 775       # check that the changeset bbox is within bounds
 776       cs = Changeset.find(changeset_id)
 777       assert_operator cs.min_lon, :>=, -180 * GeoRecord::SCALE, "Minimum longitude (#{cs.min_lon / GeoRecord::SCALE}) should be >= -180 to be valid."
 778       assert_operator cs.max_lon, :<=, 180 * GeoRecord::SCALE, "Maximum longitude (#{cs.max_lon / GeoRecord::SCALE}) should be <= 180 to be valid."
 779       assert_operator cs.min_lat, :>=, -90 * GeoRecord::SCALE, "Minimum latitude (#{cs.min_lat / GeoRecord::SCALE}) should be >= -90 to be valid."
 780       assert_operator cs.max_lat, :<=, 90 * GeoRecord::SCALE, "Maximum latitude (#{cs.max_lat / GeoRecord::SCALE}) should be <= 90 to be valid."
 781     end
 782
 783     ##
 784     # test that deleting stuff in a transaction doesn't bypass the checks
 785     # to ensure that used elements are not deleted.
 786     def test_upload_delete_invalid
 787       changeset = create(:changeset)
 788       relation = create(:relation)
 789       other_relation = create(:relation)
 790       used_way = create(:way)
 791       used_node = create(:node)
 792       create(:relation_member, :relation => relation, :member => used_way)
 793       create(:relation_member, :relation => relation, :member => used_node)
 794
 795       auth_header = bearer_authorization_header changeset.user
 796
 797       diff = XML::Document.new
 798       diff.root = XML::Node.new "osmChange"
 799       delete = XML::Node.new "delete"
 800       diff.root << delete
 801       delete << xml_node_for_relation(other_relation)
 802       delete << xml_node_for_way(used_way)
 803       delete << xml_node_for_node(used_node)
 804
 805       # update the changeset to one that this user owns
 806       %w[node way relation].each do |type|
 807         delete.find("//osmChange/delete/#{type}").each do |n|
 808           n["changeset"] = changeset.id.to_s
 809         end
 810       end
 811
 812       # upload it
 813       post api_changeset_upload_path(changeset), :params => diff.to_s, :headers => auth_header
 814       assert_response :precondition_failed,
 815                       "shouldn't be able to upload a invalid deletion diff: #{@response.body}"
 816       assert_equal "Precondition failed: Way #{used_way.id} is still used by relations #{relation.id}.", @response.body
 817
 818       # check that nothing was, in fact, deleted
 819       assert Node.find(used_node.id).visible
 820       assert Way.find(used_way.id).visible
 821       assert Relation.find(relation.id).visible
 822       assert Relation.find(other_relation.id).visible
 823     end
 824
 825     ##
 826     # test that a conditional delete of an in use object works.
 827     def test_upload_delete_if_unused
 828       changeset = create(:changeset)
 829       super_relation = create(:relation)
 830       used_relation = create(:relation)
 831       used_way = create(:way)
 832       used_node = create(:node)
 833       create(:relation_member, :relation => super_relation, :member => used_relation)
 834       create(:relation_member, :relation => super_relation, :member => used_way)
 835       create(:relation_member, :relation => super_relation, :member => used_node)
 836
 837       auth_header = bearer_authorization_header changeset.user
 838
 839       diff = XML::Document.new
 840       diff.root = XML::Node.new "osmChange"
 841       delete = XML::Node.new "delete"
 842       diff.root << delete
 843       delete["if-unused"] = ""
 844       delete << xml_node_for_relation(used_relation)
 845       delete << xml_node_for_way(used_way)
 846       delete << xml_node_for_node(used_node)
 847
 848       # update the changeset to one that this user owns
 849       %w[node way relation].each do |type|
 850         delete.find("//osmChange/delete/#{type}").each do |n|
 851           n["changeset"] = changeset.id.to_s
 852         end
 853       end
 854
 855       # upload it
 856       post api_changeset_upload_path(changeset), :params => diff.to_s, :headers => auth_header
 857       assert_response :success,
 858                       "can't do a conditional delete of in use objects: #{@response.body}"
 859
 860       # check the returned payload
 861       assert_dom "diffResult[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1 do
 862         # check the old IDs are all present and what we expect
 863         # check the new IDs are all present and unchanged
 864         # check the new versions are all present and unchanged
 865         assert_dom "> node", 1 do
 866           assert_dom "> @old_id", used_node.id.to_s
 867           assert_dom "> @new_id", used_node.id.to_s
 868           assert_dom "> @new_version", used_node.version.to_s
 869         end
 870         assert_dom "> way", 1 do
 871           assert_dom "> @old_id", used_way.id.to_s
 872           assert_dom "> @new_id", used_way.id.to_s
 873           assert_dom "> @new_version", used_way.version.to_s
 874         end
 875         assert_dom "> relation", 1 do
 876           assert_dom "> @old_id", used_relation.id.to_s
 877           assert_dom "> @new_id", used_relation.id.to_s
 878           assert_dom "> @new_version", used_relation.version.to_s
 879         end
 880       end
 881
 882       # check that nothing was, in fact, deleted
 883       assert Node.find(used_node.id).visible
 884       assert Way.find(used_way.id).visible
 885       assert Relation.find(used_relation.id).visible
 886     end
 887
 888     ##
 889     # upload something which creates new objects and inserts them into
 890     # existing containers using placeholders.
 891     def test_upload_complex
 892       way = create(:way)
 893       node = create(:node)
 894       relation = create(:relation)
 895       create(:way_node, :way => way, :node => node)
 896
 897       changeset = create(:changeset)
 898
 899       auth_header = bearer_authorization_header changeset.user
 900
 901       # simple diff to create a node way and relation using placeholders
 902       diff = <<~CHANGESET
 903         <osmChange>
 904          <create>
 905           <node id='-1' lon='0' lat='0' changeset='#{changeset.id}'>
 906            <tag k='foo' v='bar'/>
 907            <tag k='baz' v='bat'/>
 908           </node>
 909          </create>
 910          <modify>
 911           <way id='#{way.id}' changeset='#{changeset.id}' version='1'>
 912            <nd ref='-1'/>
 913            <nd ref='#{node.id}'/>
 914           </way>
 915           <relation id='#{relation.id}' changeset='#{changeset.id}' version='1'>
 916            <member type='way' role='some' ref='#{way.id}'/>
 917            <member type='node' role='some' ref='-1'/>
 918            <member type='relation' role='some' ref='#{relation.id}'/>
 919           </relation>
 920          </modify>
 921         </osmChange>
 922       CHANGESET
 923
 924       # upload it
 925       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
 926       assert_response :success,
 927                       "can't upload a complex diff to changeset: #{@response.body}"
 928
 929       # check the returned payload
 930       new_node_id = nil
 931       assert_dom "diffResult[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1 do
 932         assert_dom "> node", 1 do |(node_el)|
 933           new_node_id = node_el["new_id"].to_i
 934         end
 935         assert_dom "> way", 1
 936         assert_dom "> relation", 1
 937       end
 938
 939       # check that the changes made it into the database
 940       assert_equal 2, Node.find(new_node_id).tags.size, "new node should have two tags"
 941       assert_equal [new_node_id, node.id], Way.find(way.id).nds, "way nodes should match"
 942       Relation.find(relation.id).members.each do |type, id, _role|
 943         assert_equal new_node_id, id, "relation should contain new node" if type == "node"
 944       end
 945     end
 946
 947     ##
 948     # create a diff which references several changesets, which should cause
 949     # a rollback and none of the diff gets committed
 950     def test_upload_invalid_changesets
 951       changeset = create(:changeset)
 952       other_changeset = create(:changeset, :user => changeset.user)
 953       node = create(:node)
 954       way = create(:way)
 955       relation = create(:relation)
 956       other_relation = create(:relation)
 957
 958       auth_header = bearer_authorization_header changeset.user
 959
 960       # simple diff to create a node way and relation using placeholders
 961       diff = <<~CHANGESET
 962         <osmChange>
 963          <modify>
 964           <node id='#{node.id}' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
 965           <way id='#{way.id}' changeset='#{changeset.id}' version='1'>
 966            <nd ref='#{node.id}'/>
 967           </way>
 968          </modify>
 969          <modify>
 970           <relation id='#{relation.id}' changeset='#{changeset.id}' version='1'>
 971            <member type='way' role='some' ref='#{way.id}'/>
 972            <member type='node' role='some' ref='#{node.id}'/>
 973            <member type='relation' role='some' ref='#{other_relation.id}'/>
 974           </relation>
 975          </modify>
 976          <create>
 977           <node id='-1' lon='0' lat='0' changeset='#{other_changeset.id}'>
 978            <tag k='foo' v='bar'/>
 979            <tag k='baz' v='bat'/>
 980           </node>
 981          </create>
 982         </osmChange>
 983       CHANGESET
 984
 985       # upload it
 986       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
 987       assert_response :conflict,
 988                       "uploading a diff with multiple changesets should have failed"
 989
 990       # check that objects are unmodified
 991       assert_nodes_are_equal(node, Node.find(node.id))
 992       assert_ways_are_equal(way, Way.find(way.id))
 993       assert_relations_are_equal(relation, Relation.find(relation.id))
 994     end
 995
 996     ##
 997     # upload multiple versions of the same element in the same diff.
 998     def test_upload_multiple_valid
 999       node = create(:node)
1000       changeset = create(:changeset)
1001       auth_header = bearer_authorization_header changeset.user
1002
1003       # change the location of a node multiple times, each time referencing
1004       # the last version. doesn't this depend on version numbers being
1005       # sequential?
1006       diff = <<~CHANGESET
1007         <osmChange>
1008          <modify>
1009           <node id='#{node.id}' lon='0.0' lat='0.0' changeset='#{changeset.id}' version='1'/>
1010           <node id='#{node.id}' lon='0.1' lat='0.0' changeset='#{changeset.id}' version='2'/>
1011           <node id='#{node.id}' lon='0.1' lat='0.1' changeset='#{changeset.id}' version='3'/>
1012           <node id='#{node.id}' lon='0.1' lat='0.2' changeset='#{changeset.id}' version='4'/>
1013           <node id='#{node.id}' lon='0.2' lat='0.2' changeset='#{changeset.id}' version='5'/>
1014           <node id='#{node.id}' lon='0.3' lat='0.2' changeset='#{changeset.id}' version='6'/>
1015           <node id='#{node.id}' lon='0.3' lat='0.3' changeset='#{changeset.id}' version='7'/>
1016           <node id='#{node.id}' lon='0.9' lat='0.9' changeset='#{changeset.id}' version='8'/>
1017          </modify>
1018         </osmChange>
1019       CHANGESET
1020
1021       # upload it
1022       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1023       assert_response :success,
1024                       "can't upload multiple versions of an element in a diff: #{@response.body}"
1025
1026       # check the response is well-formed. its counter-intuitive, but the
1027       # API will return multiple elements with the same ID and different
1028       # version numbers for each change we made.
1029       assert_select "diffResult>node", 8
1030     end
1031
1032     ##
1033     # upload multiple versions of the same element in the same diff, but
1034     # keep the version numbers the same.
1035     def test_upload_multiple_duplicate
1036       node = create(:node)
1037       changeset = create(:changeset)
1038
1039       auth_header = bearer_authorization_header changeset.user
1040
1041       diff = <<~CHANGESET
1042         <osmChange>
1043          <modify>
1044           <node id='#{node.id}' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
1045           <node id='#{node.id}' lon='1' lat='1' changeset='#{changeset.id}' version='1'/>
1046          </modify>
1047         </osmChange>
1048       CHANGESET
1049
1050       # upload it
1051       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1052       assert_response :conflict,
1053                       "shouldn't be able to upload the same element twice in a diff: #{@response.body}"
1054     end
1055
1056     ##
1057     # try to upload some elements without specifying the version
1058     def test_upload_missing_version
1059       changeset = create(:changeset)
1060
1061       auth_header = bearer_authorization_header changeset.user
1062
1063       diff = <<~CHANGESET
1064         <osmChange>
1065          <modify>
1066          <node id='1' lon='1' lat='1' changeset='#{changeset.id}'/>
1067          </modify>
1068         </osmChange>
1069       CHANGESET
1070
1071       # upload it
1072       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1073       assert_response :bad_request,
1074                       "shouldn't be able to upload an element without version: #{@response.body}"
1075     end
1076
1077     ##
1078     # try to upload with commands other than create, modify, or delete
1079     def test_action_upload_invalid
1080       changeset = create(:changeset)
1081
1082       auth_header = bearer_authorization_header changeset.user
1083
1084       diff = <<~CHANGESET
1085         <osmChange>
1086           <ping>
1087            <node id='1' lon='1' lat='1' changeset='#{changeset.id}' />
1088           </ping>
1089         </osmChange>
1090       CHANGESET
1091       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1092       assert_response :bad_request, "Shouldn't be able to upload a diff with the action ping"
1093       assert_equal("Unknown action ping, choices are create, modify, delete", @response.body)
1094     end
1095
1096     ##
1097     # upload a valid changeset which has a mixture of whitespace
1098     # to check a bug reported by ivansanchez (#1565).
1099     def test_upload_whitespace_valid
1100       changeset = create(:changeset)
1101       node = create(:node)
1102       way = create(:way_with_nodes, :nodes_count => 2)
1103       relation = create(:relation)
1104       other_relation = create(:relation)
1105       create(:relation_tag, :relation => relation)
1106
1107       auth_header = bearer_authorization_header changeset.user
1108
1109       diff = <<~CHANGESET
1110         <osmChange>
1111          <modify><node id='#{node.id}' lon='0' lat='0' changeset='#{changeset.id}'
1112           version='1'></node>
1113           <node id='#{node.id}' lon='1' lat='1' changeset='#{changeset.id}' version='2'><tag k='k' v='v'/></node></modify>
1114          <modify>
1115          <relation id='#{relation.id}' changeset='#{changeset.id}' version='1'><member
1116            type='way' role='some' ref='#{way.id}'/><member
1117             type='node' role='some' ref='#{node.id}'/>
1118            <member type='relation' role='some' ref='#{other_relation.id}'/>
1119           </relation>
1120          </modify></osmChange>
1121       CHANGESET
1122
1123       # upload it
1124       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1125       assert_response :success,
1126                       "can't upload a valid diff with whitespace variations to changeset: #{@response.body}"
1127
1128       # check the response is well-formed
1129       assert_select "diffResult>node", 2
1130       assert_select "diffResult>relation", 1
1131
1132       # check that the changes made it into the database
1133       assert_equal 1, Node.find(node.id).tags.size, "node #{node.id} should now have one tag"
1134       assert_equal 0, Relation.find(relation.id).tags.size, "relation #{relation.id} should now have no tags"
1135     end
1136
1137     ##
1138     # test that a placeholder can be reused within the same upload.
1139     def test_upload_reuse_placeholder_valid
1140       changeset = create(:changeset)
1141
1142       auth_header = bearer_authorization_header changeset.user
1143
1144       diff = <<~CHANGESET
1145         <osmChange>
1146          <create>
1147           <node id='-1' lon='0' lat='0' changeset='#{changeset.id}'>
1148            <tag k="foo" v="bar"/>
1149           </node>
1150          </create>
1151          <modify>
1152           <node id='-1' lon='1' lat='1' changeset='#{changeset.id}' version='1'/>
1153          </modify>
1154          <delete>
1155           <node id='-1' lon='2' lat='2' changeset='#{changeset.id}' version='2'/>
1156          </delete>
1157         </osmChange>
1158       CHANGESET
1159
1160       # upload it
1161       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1162       assert_response :success,
1163                       "can't upload a valid diff with re-used placeholders to changeset: #{@response.body}"
1164
1165       # check the response is well-formed
1166       assert_select "diffResult>node", 3
1167       assert_select "diffResult>node[old_id='-1']", 3
1168     end
1169
1170     def test_upload_duplicate_delete
1171       changeset = create(:changeset)
1172
1173       auth_header = bearer_authorization_header changeset.user
1174
1175       diff = <<~CHANGESET
1176         <osmChange>
1177           <create>
1178             <node id="-1" lat="39" lon="116" changeset="#{changeset.id}" />
1179           </create>
1180           <delete>
1181             <node id="-1" version="1" changeset="#{changeset.id}" />
1182             <node id="-1" version="1" changeset="#{changeset.id}" />
1183           </delete>
1184         </osmChange>
1185       CHANGESET
1186
1187       # upload it
1188       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1189       assert_response :gone,
1190                       "transaction should be cancelled by second deletion"
1191
1192       diff = <<~CHANGESET
1193         <osmChange>
1194           <create>
1195             <node id="-1" lat="39" lon="116" changeset="#{changeset.id}" />
1196           </create>
1197           <delete if-unused="true">
1198             <node id="-1" version="1" changeset="#{changeset.id}" />
1199             <node id="-1" version="1" changeset="#{changeset.id}" />
1200           </delete>
1201         </osmChange>
1202       CHANGESET
1203
1204       # upload it
1205       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1206
1207       assert_select "diffResult>node", 3
1208       assert_select "diffResult>node[old_id='-1']", 3
1209       assert_select "diffResult>node[new_version='1']", 1
1210       assert_select "diffResult>node[new_version='2']", 1
1211     end
1212
1213     ##
1214     # test what happens if a diff is uploaded containing only a node
1215     # move.
1216     def test_upload_node_move
1217       auth_header = bearer_authorization_header
1218
1219       xml = "<osm><changeset>" \
1220             "<tag k='created_by' v='osm test suite checking changesets'/>" \
1221             "</changeset></osm>"
1222       post api_changesets_path, :params => xml, :headers => auth_header
1223       assert_response :success
1224       changeset_id = @response.body.to_i
1225
1226       old_node = create(:node, :lat => 1, :lon => 1)
1227
1228       diff = XML::Document.new
1229       diff.root = XML::Node.new "osmChange"
1230       modify = XML::Node.new "modify"
1231       xml_old_node = xml_node_for_node(old_node)
1232       xml_old_node["lat"] = 2.0.to_s
1233       xml_old_node["lon"] = 2.0.to_s
1234       xml_old_node["changeset"] = changeset_id.to_s
1235       modify << xml_old_node
1236       diff.root << modify
1237
1238       # upload it
1239       post api_changeset_upload_path(changeset_id), :params => diff.to_s, :headers => auth_header
1240       assert_response :success,
1241                       "diff should have uploaded OK"
1242
1243       # check the bbox
1244       changeset = Changeset.find(changeset_id)
1245       assert_equal 1 * GeoRecord::SCALE, changeset.min_lon, "min_lon should be 1 degree"
1246       assert_equal 2 * GeoRecord::SCALE, changeset.max_lon, "max_lon should be 2 degrees"
1247       assert_equal 1 * GeoRecord::SCALE, changeset.min_lat, "min_lat should be 1 degree"
1248       assert_equal 2 * GeoRecord::SCALE, changeset.max_lat, "max_lat should be 2 degrees"
1249     end
1250
1251     ##
1252     # test what happens if a diff is uploaded adding a node to a way.
1253     def test_upload_way_extend
1254       auth_header = bearer_authorization_header
1255
1256       xml = "<osm><changeset>" \
1257             "<tag k='created_by' v='osm test suite checking changesets'/>" \
1258             "</changeset></osm>"
1259       post api_changesets_path, :params => xml, :headers => auth_header
1260       assert_response :success
1261       changeset_id = @response.body.to_i
1262
1263       old_way = create(:way)
1264       create(:way_node, :way => old_way, :node => create(:node, :lat => 0.1, :lon => 0.1))
1265
1266       diff = XML::Document.new
1267       diff.root = XML::Node.new "osmChange"
1268       modify = XML::Node.new "modify"
1269       xml_old_way = xml_node_for_way(old_way)
1270       nd_ref = XML::Node.new "nd"
1271       nd_ref["ref"] = create(:node, :lat => 0.3, :lon => 0.3).id.to_s
1272       xml_old_way << nd_ref
1273       xml_old_way["changeset"] = changeset_id.to_s
1274       modify << xml_old_way
1275       diff.root << modify
1276
1277       # upload it
1278       post api_changeset_upload_path(changeset_id), :params => diff.to_s, :headers => auth_header
1279       assert_response :success,
1280                       "diff should have uploaded OK"
1281
1282       # check the bbox
1283       changeset = Changeset.find(changeset_id)
1284       assert_equal 0.1 * GeoRecord::SCALE, changeset.min_lon, "min_lon should be 0.1 degree"
1285       assert_equal 0.3 * GeoRecord::SCALE, changeset.max_lon, "max_lon should be 0.3 degrees"
1286       assert_equal 0.1 * GeoRecord::SCALE, changeset.min_lat, "min_lat should be 0.1 degree"
1287       assert_equal 0.3 * GeoRecord::SCALE, changeset.max_lat, "max_lat should be 0.3 degrees"
1288     end
1289
1290     ##
1291     # test for more issues in #1568
1292     def test_upload_empty_invalid
1293       changeset = create(:changeset)
1294
1295       auth_header = bearer_authorization_header changeset.user
1296
1297       ["<osmChange/>",
1298        "<osmChange></osmChange>",
1299        "<osmChange><modify/></osmChange>",
1300        "<osmChange><modify></modify></osmChange>"].each do |diff|
1301         # upload it
1302         post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1303         assert_response(:success, "should be able to upload " \
1304                                   "empty changeset: " + diff)
1305       end
1306     end
1307
1308     ##
1309     # test that the X-Error-Format header works to request XML errors
1310     def test_upload_xml_errors
1311       changeset = create(:changeset)
1312       node = create(:node)
1313       create(:relation_member, :member => node)
1314
1315       auth_header = bearer_authorization_header changeset.user
1316
1317       # try and delete a node that is in use
1318       diff = XML::Document.new
1319       diff.root = XML::Node.new "osmChange"
1320       delete = XML::Node.new "delete"
1321       diff.root << delete
1322       delete << xml_node_for_node(node)
1323
1324       # upload it
1325       error_header = error_format_header "xml"
1326       post api_changeset_upload_path(changeset), :params => diff.to_s, :headers => auth_header.merge(error_header)
1327       assert_response :success,
1328                       "failed to return error in XML format"
1329
1330       # check the returned payload
1331       assert_select "osmError[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
1332       assert_select "osmError>status", 1
1333       assert_select "osmError>message", 1
1334     end
1335
1336     def test_upload_not_found
1337       changeset = create(:changeset)
1338
1339       auth_header = bearer_authorization_header changeset.user
1340
1341       # modify node
1342       diff = <<~CHANGESET
1343         <osmChange>
1344         <modify>
1345           <node id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
1346         </modify>
1347         </osmChange>
1348       CHANGESET
1349
1350       # upload it
1351       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1352       assert_response :not_found, "Node should not be found"
1353
1354       # modify way
1355       diff = <<~CHANGESET
1356         <osmChange>
1357         <modify>
1358           <way id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
1359         </modify>
1360         </osmChange>
1361       CHANGESET
1362
1363       # upload it
1364       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1365       assert_response :not_found, "Way should not be found"
1366
1367       # modify relation
1368       diff = <<~CHANGESET
1369         <osmChange>
1370         <modify>
1371           <relation id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
1372         </modify>
1373         </osmChange>
1374       CHANGESET
1375
1376       # upload it
1377       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1378       assert_response :not_found, "Relation should not be found"
1379
1380       # delete node
1381       diff = <<~CHANGESET
1382         <osmChange>
1383         <delete>
1384           <node id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
1385         </delete>
1386         </osmChange>
1387       CHANGESET
1388
1389       # upload it
1390       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1391       assert_response :not_found, "Node should not be deleted"
1392
1393       # delete way
1394       diff = <<~CHANGESET
1395         <osmChange>
1396         <delete>
1397           <way id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
1398         </delete>
1399         </osmChange>
1400       CHANGESET
1401
1402       # upload it
1403       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1404       assert_response :not_found, "Way should not be deleted"
1405
1406       # delete relation
1407       diff = <<~CHANGESET
1408         <osmChange>
1409         <delete>
1410           <relation id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
1411         </delete>
1412         </osmChange>
1413       CHANGESET
1414
1415       # upload it
1416       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1417       assert_response :not_found, "Relation should not be deleted"
1418     end
1419
1420     def test_upload_multiple_delete_block
1421       changeset = create(:changeset)
1422
1423       auth_header = bearer_authorization_header changeset.user
1424
1425       node = create(:node)
1426       way = create(:way)
1427       create(:way_node, :way => way, :node => node)
1428       alone_node = create(:node)
1429
1430       # modify node
1431       diff = <<~CHANGESET
1432         <osmChange version='0.6'>
1433           <delete version="0.6">
1434             <node id="#{node.id}" version="#{node.version}" changeset="#{changeset.id}"/>
1435           </delete>
1436           <delete version="0.6" if-unused="true">
1437             <node id="#{alone_node.id}" version="#{alone_node.version}" changeset="#{changeset.id}"/>
1438           </delete>
1439         </osmChange>
1440       CHANGESET
1441
1442       # upload it
1443       post api_changeset_upload_path(changeset), :params => diff.to_s, :headers => auth_header
1444       assert_response :precondition_failed,
1445                       "shouldn't be able to upload a invalid deletion diff: #{@response.body}"
1446       assert_equal "Precondition failed: Node #{node.id} is still used by ways #{way.id}.", @response.body
1447     end
1448
1449     ##
1450     # test initial rate limit
1451     def test_upload_initial_rate_limit
1452       # create a user
1453       user = create(:user)
1454
1455       # create some objects to use
1456       node = create(:node)
1457       way = create(:way_with_nodes, :nodes_count => 2)
1458       relation = create(:relation)
1459
1460       # create a changeset that puts us near the initial rate limit
1461       changeset = create(:changeset, :user => user,
1462                                      :created_at => Time.now.utc - 5.minutes,
1463                                      :num_changes => Settings.initial_changes_per_hour - 2)
1464
1465       # create authentication header
1466       auth_header = bearer_authorization_header user
1467
1468       # simple diff to create a node way and relation using placeholders
1469       diff = <<~CHANGESET
1470         <osmChange>
1471          <create>
1472           <node id='-1' lon='0' lat='0' changeset='#{changeset.id}'>
1473            <tag k='foo' v='bar'/>
1474            <tag k='baz' v='bat'/>
1475           </node>
1476           <way id='-1' changeset='#{changeset.id}'>
1477            <nd ref='#{node.id}'/>
1478           </way>
1479          </create>
1480          <create>
1481           <relation id='-1' changeset='#{changeset.id}'>
1482            <member type='way' role='some' ref='#{way.id}'/>
1483            <member type='node' role='some' ref='#{node.id}'/>
1484            <member type='relation' role='some' ref='#{relation.id}'/>
1485           </relation>
1486          </create>
1487         </osmChange>
1488       CHANGESET
1489
1490       # upload it
1491       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1492       assert_response :too_many_requests, "upload did not hit rate limit"
1493     end
1494
1495     ##
1496     # test maximum rate limit
1497     def test_upload_maximum_rate_limit
1498       # create a user
1499       user = create(:user)
1500
1501       # create some objects to use
1502       node = create(:node)
1503       way = create(:way_with_nodes, :nodes_count => 2)
1504       relation = create(:relation)
1505
1506       # create a changeset to establish our initial edit time
1507       changeset = create(:changeset, :user => user,
1508                                      :created_at => Time.now.utc - 28.days)
1509
1510       # create changeset to put us near the maximum rate limit
1511       total_changes = Settings.max_changes_per_hour - 2
1512       while total_changes.positive?
1513         changes = [total_changes, Changeset::MAX_ELEMENTS].min
1514         changeset = create(:changeset, :user => user,
1515                                        :created_at => Time.now.utc - 5.minutes,
1516                                        :num_changes => changes)
1517         total_changes -= changes
1518       end
1519
1520       # create authentication header
1521       auth_header = bearer_authorization_header user
1522
1523       # simple diff to create a node way and relation using placeholders
1524       diff = <<~CHANGESET
1525         <osmChange>
1526          <create>
1527           <node id='-1' lon='0' lat='0' changeset='#{changeset.id}'>
1528            <tag k='foo' v='bar'/>
1529            <tag k='baz' v='bat'/>
1530           </node>
1531           <way id='-1' changeset='#{changeset.id}'>
1532            <nd ref='#{node.id}'/>
1533           </way>
1534          </create>
1535          <create>
1536           <relation id='-1' changeset='#{changeset.id}'>
1537            <member type='way' role='some' ref='#{way.id}'/>
1538            <member type='node' role='some' ref='#{node.id}'/>
1539            <member type='relation' role='some' ref='#{relation.id}'/>
1540           </relation>
1541          </create>
1542         </osmChange>
1543       CHANGESET
1544
1545       # upload it
1546       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1547       assert_response :too_many_requests, "upload did not hit rate limit"
1548     end
1549
1550     ##
1551     # test initial size limit
1552     def test_upload_initial_size_limit
1553       # create a user
1554       user = create(:user)
1555
1556       # create a changeset that puts us near the initial size limit
1557       changeset = create(:changeset, :user => user,
1558                                      :min_lat => (-0.5 * GeoRecord::SCALE).round, :min_lon => (0.5 * GeoRecord::SCALE).round,
1559                                      :max_lat => (0.5 * GeoRecord::SCALE).round, :max_lon => (2.5 * GeoRecord::SCALE).round)
1560
1561       # create authentication header
1562       auth_header = bearer_authorization_header user
1563
1564       # simple diff to create a node
1565       diff = <<~CHANGESET
1566         <osmChange>
1567          <create>
1568           <node id='-1' lon='0.9' lat='2.9' changeset='#{changeset.id}'>
1569            <tag k='foo' v='bar'/>
1570            <tag k='baz' v='bat'/>
1571           </node>
1572          </create>
1573         </osmChange>
1574       CHANGESET
1575
1576       # upload it
1577       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1578       assert_response :payload_too_large, "upload did not hit size limit"
1579     end
1580
1581     ##
1582     # test size limit after one week
1583     def test_upload_week_size_limit
1584       # create a user
1585       user = create(:user)
1586
1587       # create a changeset to establish our initial edit time
1588       create(:changeset, :user => user, :created_at => Time.now.utc - 7.days)
1589
1590       # create a changeset that puts us near the initial size limit
1591       changeset = create(:changeset, :user => user, :bbox => [0.5, -0.5, 2.5, 0.5])
1592
1593       # create authentication header
1594       auth_header = bearer_authorization_header user
1595
1596       # simple diff to create a node way and relation using placeholders
1597       diff = <<~CHANGESET
1598         <osmChange>
1599          <create>
1600           <node id='-1' lon='35' lat='35' changeset='#{changeset.id}'>
1601            <tag k='foo' v='bar'/>
1602            <tag k='baz' v='bat'/>
1603           </node>
1604          </create>
1605         </osmChange>
1606       CHANGESET
1607
1608       # upload it
1609       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1610       assert_response :payload_too_large, "upload did not hit size limit"
1611     end
1612
1613     ##
1614     # when we make some simple changes we get the same changes back from the
1615     # diff download.
1616     def test_diff_download_simple
1617       node = create(:node)
1618
1619       ## First try with a non-public user, which should get a forbidden
1620       auth_header = bearer_authorization_header create(:user, :data_public => false)
1621
1622       # create a temporary changeset
1623       xml = "<osm><changeset>" \
1624             "<tag k='created_by' v='osm test suite checking changesets'/>" \
1625             "</changeset></osm>"
1626       post api_changesets_path, :params => xml, :headers => auth_header
1627       assert_response :forbidden
1628
1629       ## Now try with a normal user
1630       auth_header = bearer_authorization_header
1631
1632       # create a temporary changeset
1633       xml = "<osm><changeset>" \
1634             "<tag k='created_by' v='osm test suite checking changesets'/>" \
1635             "</changeset></osm>"
1636       post api_changesets_path, :params => xml, :headers => auth_header
1637       assert_response :success
1638       changeset_id = @response.body.to_i
1639
1640       # add a diff to it
1641       diff = <<~CHANGESET
1642         <osmChange>
1643          <modify>
1644           <node id='#{node.id}' lon='0.0' lat='0.0' changeset='#{changeset_id}' version='1'/>
1645           <node id='#{node.id}' lon='0.1' lat='0.0' changeset='#{changeset_id}' version='2'/>
1646           <node id='#{node.id}' lon='0.1' lat='0.1' changeset='#{changeset_id}' version='3'/>
1647           <node id='#{node.id}' lon='0.1' lat='0.2' changeset='#{changeset_id}' version='4'/>
1648           <node id='#{node.id}' lon='0.2' lat='0.2' changeset='#{changeset_id}' version='5'/>
1649           <node id='#{node.id}' lon='0.3' lat='0.2' changeset='#{changeset_id}' version='6'/>
1650           <node id='#{node.id}' lon='0.3' lat='0.3' changeset='#{changeset_id}' version='7'/>
1651           <node id='#{node.id}' lon='0.9' lat='0.9' changeset='#{changeset_id}' version='8'/>
1652          </modify>
1653         </osmChange>
1654       CHANGESET
1655
1656       # upload it
1657       post api_changeset_upload_path(changeset_id), :params => diff, :headers => auth_header
1658       assert_response :success,
1659                       "can't upload multiple versions of an element in a diff: #{@response.body}"
1660
1661       get api_changeset_download_path(changeset_id)
1662       assert_response :success
1663
1664       assert_select "osmChange", 1
1665       assert_select "osmChange>modify", 8
1666       assert_select "osmChange>modify>node", 8
1667     end
1668
1669     ##
1670     # culled this from josm to ensure that nothing in the way that josm
1671     # is formatting the request is causing it to fail.
1672     #
1673     # NOTE: the error turned out to be something else completely!
1674     def test_josm_upload
1675       auth_header = bearer_authorization_header
1676
1677       # create a temporary changeset
1678       xml = "<osm><changeset>" \
1679             "<tag k='created_by' v='osm test suite checking changesets'/>" \
1680             "</changeset></osm>"
1681       post api_changesets_path, :params => xml, :headers => auth_header
1682       assert_response :success
1683       changeset_id = @response.body.to_i
1684
1685       diff = <<~OSMFILE
1686         <osmChange version="0.6" generator="JOSM">
1687         <create version="0.6" generator="JOSM">
1688           <node id='-1' visible='true' changeset='#{changeset_id}' lat='51.49619982187321' lon='-0.18722061869438314' />
1689           <node id='-2' visible='true' changeset='#{changeset_id}' lat='51.496359883909605' lon='-0.18653093576241928' />
1690           <node id='-3' visible='true' changeset='#{changeset_id}' lat='51.49598132358285' lon='-0.18719613290981638' />
1691           <node id='-4' visible='true' changeset='#{changeset_id}' lat='51.4961591711078' lon='-0.18629015888084607' />
1692           <node id='-5' visible='true' changeset='#{changeset_id}' lat='51.49582126021711' lon='-0.18708186591517145' />
1693           <node id='-6' visible='true' changeset='#{changeset_id}' lat='51.49591018437858' lon='-0.1861432441734455' />
1694           <node id='-7' visible='true' changeset='#{changeset_id}' lat='51.49560784152179' lon='-0.18694719410005425' />
1695           <node id='-8' visible='true' changeset='#{changeset_id}' lat='51.49567389979617' lon='-0.1860289771788006' />
1696           <node id='-9' visible='true' changeset='#{changeset_id}' lat='51.49543761398892' lon='-0.186820684213126' />
1697           <way id='-10' action='modify' visible='true' changeset='#{changeset_id}'>
1698             <nd ref='-1' />
1699             <nd ref='-2' />
1700             <nd ref='-3' />
1701             <nd ref='-4' />
1702             <nd ref='-5' />
1703             <nd ref='-6' />
1704             <nd ref='-7' />
1705             <nd ref='-8' />
1706             <nd ref='-9' />
1707             <tag k='highway' v='residential' />
1708             <tag k='name' v='Foobar Street' />
1709           </way>
1710         </create>
1711         </osmChange>
1712       OSMFILE
1713
1714       # upload it
1715       post api_changeset_upload_path(changeset_id), :params => diff, :headers => auth_header
1716       assert_response :success,
1717                       "can't upload a diff from JOSM: #{@response.body}"
1718
1719       get api_changeset_download_path(changeset_id)
1720       assert_response :success
1721
1722       assert_select "osmChange", 1
1723       assert_select "osmChange>create>node", 9
1724       assert_select "osmChange>create>way", 1
1725       assert_select "osmChange>create>way>nd", 9
1726       assert_select "osmChange>create>way>tag", 2
1727     end
1728
1729     ##
1730     # when we make some complex changes we get the same changes back from the
1731     # diff download.
1732     def test_diff_download_complex
1733       node = create(:node)
1734       node2 = create(:node)
1735       way = create(:way)
1736       auth_header = bearer_authorization_header
1737
1738       # create a temporary changeset
1739       xml = "<osm><changeset>" \
1740             "<tag k='created_by' v='osm test suite checking changesets'/>" \
1741             "</changeset></osm>"
1742       post api_changesets_path, :params => xml, :headers => auth_header
1743       assert_response :success
1744       changeset_id = @response.body.to_i
1745
1746       # add a diff to it
1747       diff = <<~CHANGESET
1748         <osmChange>
1749          <delete>
1750           <node id='#{node.id}' lon='0.0' lat='0.0' changeset='#{changeset_id}' version='1'/>
1751          </delete>
1752          <create>
1753           <node id='-1' lon='0.9' lat='0.9' changeset='#{changeset_id}' version='0'/>
1754           <node id='-2' lon='0.8' lat='0.9' changeset='#{changeset_id}' version='0'/>
1755           <node id='-3' lon='0.7' lat='0.9' changeset='#{changeset_id}' version='0'/>
1756          </create>
1757          <modify>
1758           <node id='#{node2.id}' lon='2.0' lat='1.5' changeset='#{changeset_id}' version='1'/>
1759           <way id='#{way.id}' changeset='#{changeset_id}' version='1'>
1760            <nd ref='#{node2.id}'/>
1761            <nd ref='-1'/>
1762            <nd ref='-2'/>
1763            <nd ref='-3'/>
1764           </way>
1765          </modify>
1766         </osmChange>
1767       CHANGESET
1768
1769       # upload it
1770       post api_changeset_upload_path(changeset_id), :params => diff, :headers => auth_header
1771       assert_response :success,
1772                       "can't upload multiple versions of an element in a diff: #{@response.body}"
1773
1774       get api_changeset_download_path(changeset_id)
1775       assert_response :success
1776
1777       assert_select "osmChange", 1
1778       assert_select "osmChange>create", 3
1779       assert_select "osmChange>delete", 1
1780       assert_select "osmChange>modify", 2
1781       assert_select "osmChange>create>node", 3
1782       assert_select "osmChange>delete>node", 1
1783       assert_select "osmChange>modify>node", 1
1784       assert_select "osmChange>modify>way", 1
1785     end
1786
1787     ##
1788     # check that the bounding box of a changeset gets updated correctly
1789     # FIXME: This should really be moded to a integration test due to the with_controller
1790     def test_changeset_bbox
1791       way = create(:way)
1792       create(:way_node, :way => way, :node => create(:node, :lat => 0.3, :lon => 0.3))
1793
1794       auth_header = bearer_authorization_header
1795
1796       # create a new changeset
1797       xml = "<osm><changeset/></osm>"
1798       post api_changesets_path, :params => xml, :headers => auth_header
1799       assert_response :success, "Creating of changeset failed."
1800       changeset_id = @response.body.to_i
1801
1802       # add a single node to it
1803       with_controller(NodesController.new) do
1804         xml = "<osm><node lon='0.1' lat='0.2' changeset='#{changeset_id}'/></osm>"
1805         post api_nodes_path, :params => xml, :headers => auth_header
1806         assert_response :success, "Couldn't create node."
1807       end
1808
1809       # get the bounding box back from the changeset
1810       get api_changeset_path(changeset_id)
1811       assert_response :success, "Couldn't read back changeset."
1812       assert_select "osm>changeset[min_lon='0.1000000']", 1
1813       assert_select "osm>changeset[max_lon='0.1000000']", 1
1814       assert_select "osm>changeset[min_lat='0.2000000']", 1
1815       assert_select "osm>changeset[max_lat='0.2000000']", 1
1816
1817       # add another node to it
1818       with_controller(NodesController.new) do
1819         xml = "<osm><node lon='0.2' lat='0.1' changeset='#{changeset_id}'/></osm>"
1820         post api_nodes_path, :params => xml, :headers => auth_header
1821         assert_response :success, "Couldn't create second node."
1822       end
1823
1824       # get the bounding box back from the changeset
1825       get api_changeset_path(changeset_id)
1826       assert_response :success, "Couldn't read back changeset for the second time."
1827       assert_select "osm>changeset[min_lon='0.1000000']", 1
1828       assert_select "osm>changeset[max_lon='0.2000000']", 1
1829       assert_select "osm>changeset[min_lat='0.1000000']", 1
1830       assert_select "osm>changeset[max_lat='0.2000000']", 1
1831
1832       # add (delete) a way to it, which contains a point at (3,3)
1833       with_controller(WaysController.new) do
1834         xml = update_changeset(xml_for_way(way), changeset_id)
1835         delete api_way_path(way), :params => xml.to_s, :headers => auth_header
1836         assert_response :success, "Couldn't delete a way."
1837       end
1838
1839       # get the bounding box back from the changeset
1840       get api_changeset_path(changeset_id)
1841       assert_response :success, "Couldn't read back changeset for the third time."
1842       assert_select "osm>changeset[min_lon='0.1000000']", 1
1843       assert_select "osm>changeset[max_lon='0.3000000']", 1
1844       assert_select "osm>changeset[min_lat='0.1000000']", 1
1845       assert_select "osm>changeset[max_lat='0.3000000']", 1
1846     end
1847
1848     ##
1849     # check updating tags on a changeset
1850     def test_changeset_update
1851       private_user = create(:user, :data_public => false)
1852       private_changeset = create(:changeset, :user => private_user)
1853       user = create(:user)
1854       changeset = create(:changeset, :user => user)
1855
1856       ## First try with a non-public user
1857       new_changeset = create_changeset_xml(:user => private_user)
1858       new_tag = XML::Node.new "tag"
1859       new_tag["k"] = "tagtesting"
1860       new_tag["v"] = "valuetesting"
1861       new_changeset.find("//osm/changeset").first << new_tag
1862
1863       # try without any authorization
1864       put api_changeset_path(private_changeset), :params => new_changeset.to_s
1865       assert_response :unauthorized
1866
1867       # try with the wrong authorization
1868       auth_header = bearer_authorization_header
1869       put api_changeset_path(private_changeset), :params => new_changeset.to_s, :headers => auth_header
1870       assert_response :conflict
1871
1872       # now this should get an unauthorized
1873       auth_header = bearer_authorization_header private_user
1874       put api_changeset_path(private_changeset), :params => new_changeset.to_s, :headers => auth_header
1875       assert_require_public_data "user with their data non-public, shouldn't be able to edit their changeset"
1876
1877       ## Now try with the public user
1878       new_changeset = create_changeset_xml(:id => 1)
1879       new_tag = XML::Node.new "tag"
1880       new_tag["k"] = "tagtesting"
1881       new_tag["v"] = "valuetesting"
1882       new_changeset.find("//osm/changeset").first << new_tag
1883
1884       # try without any authorization
1885       put api_changeset_path(changeset), :params => new_changeset.to_s
1886       assert_response :unauthorized
1887
1888       # try with the wrong authorization
1889       auth_header = bearer_authorization_header
1890       put api_changeset_path(changeset), :params => new_changeset.to_s, :headers => auth_header
1891       assert_response :conflict
1892
1893       # now this should work...
1894       auth_header = bearer_authorization_header user
1895       put api_changeset_path(changeset), :params => new_changeset.to_s, :headers => auth_header
1896       assert_response :success
1897
1898       assert_select "osm>changeset[id='#{changeset.id}']", 1
1899       assert_select "osm>changeset>tag", 1
1900       assert_select "osm>changeset>tag[k='tagtesting'][v='valuetesting']", 1
1901     end
1902
1903     ##
1904     # check that a user different from the one who opened the changeset
1905     # can't modify it.
1906     def test_changeset_update_invalid
1907       auth_header = bearer_authorization_header
1908
1909       changeset = create(:changeset)
1910       new_changeset = create_changeset_xml(:user => changeset.user, :id => changeset.id)
1911       new_tag = XML::Node.new "tag"
1912       new_tag["k"] = "testing"
1913       new_tag["v"] = "testing"
1914       new_changeset.find("//osm/changeset").first << new_tag
1915
1916       put api_changeset_path(changeset), :params => new_changeset.to_s, :headers => auth_header
1917       assert_response :conflict
1918     end
1919
1920     ##
1921     # check that a changeset can contain a certain max number of changes.
1922     ## FIXME should be changed to an integration test due to the with_controller
1923     def test_changeset_limits
1924       user = create(:user)
1925       auth_header = bearer_authorization_header user
1926
1927       # create an old changeset to ensure we have the maximum rate limit
1928       create(:changeset, :user => user, :created_at => Time.now.utc - 28.days)
1929
1930       # open a new changeset
1931       xml = "<osm><changeset/></osm>"
1932       post api_changesets_path, :params => xml, :headers => auth_header
1933       assert_response :success, "can't create a new changeset"
1934       cs_id = @response.body.to_i
1935
1936       # start the counter just short of where the changeset should finish.
1937       offset = 10
1938       # alter the database to set the counter on the changeset directly,
1939       # otherwise it takes about 6 minutes to fill all of them.
1940       changeset = Changeset.find(cs_id)
1941       changeset.num_changes = Changeset::MAX_ELEMENTS - offset
1942       changeset.save!
1943
1944       with_controller(NodesController.new) do
1945         # create a new node
1946         xml = "<osm><node changeset='#{cs_id}' lat='0.0' lon='0.0'/></osm>"
1947         post api_nodes_path, :params => xml, :headers => auth_header
1948         assert_response :success, "can't create a new node"
1949         node_id = @response.body.to_i
1950
1951         get api_node_path(node_id)
1952         assert_response :success, "can't read back new node"
1953         node_doc = XML::Parser.string(@response.body).parse
1954         node_xml = node_doc.find("//osm/node").first
1955
1956         # loop until we fill the changeset with nodes
1957         offset.times do |i|
1958           node_xml["lat"] = rand.to_s
1959           node_xml["lon"] = rand.to_s
1960           node_xml["version"] = (i + 1).to_s
1961
1962           put api_node_path(node_id), :params => node_doc.to_s, :headers => auth_header
1963           assert_response :success, "attempt #{i} should have succeeded"
1964         end
1965
1966         # trying again should fail
1967         node_xml["lat"] = rand.to_s
1968         node_xml["lon"] = rand.to_s
1969         node_xml["version"] = offset.to_s
1970
1971         put api_node_path(node_id), :params => node_doc.to_s, :headers => auth_header
1972         assert_response :conflict, "final attempt should have failed"
1973       end
1974
1975       changeset = Changeset.find(cs_id)
1976       assert_equal Changeset::MAX_ELEMENTS + 1, changeset.num_changes
1977
1978       # check that the changeset is now closed as well
1979       assert_not(changeset.open?,
1980                  "changeset should have been auto-closed by exceeding " \
1981                  "element limit.")
1982     end
1983
1984     private
1985
1986     ##
1987     # check that the output consists of one specific changeset
1988     def assert_single_changeset(changeset, &)
1989       assert_dom "> changeset", 1 do
1990         assert_dom "> @id", changeset.id.to_s
1991         assert_dom "> @created_at", changeset.created_at.xmlschema
1992         if changeset.open?
1993           assert_dom "> @open", "true"
1994           assert_dom "> @closed_at", 0
1995         else
1996           assert_dom "> @open", "false"
1997           assert_dom "> @closed_at", changeset.closed_at.xmlschema
1998         end
1999         assert_dom "> @comments_count", changeset.comments.length.to_s
2000         assert_dom "> @changes_count", changeset.num_changes.to_s
2001         yield if block_given?
2002       end
2003     end
2004
2005     def assert_single_changeset_json(changeset, js)
2006       assert_equal changeset.id, js["changeset"]["id"]
2007       assert_equal changeset.created_at.xmlschema, js["changeset"]["created_at"]
2008       if changeset.open?
2009         assert js["changeset"]["open"]
2010         assert_nil js["changeset"]["closed_at"]
2011       else
2012         assert_not js["changeset"]["open"]
2013         assert_equal changeset.closed_at.xmlschema, js["changeset"]["closed_at"]
2014       end
2015       assert_equal changeset.comments.length, js["changeset"]["comments_count"]
2016       assert_equal changeset.num_changes, js["changeset"]["changes_count"]
2017     end
2018
2019     ##
2020     # check that certain changesets exist in the output in the specified order
2021     def assert_changesets_in_order(changesets)
2022       assert_select "osm>changeset", changesets.size
2023       changesets.each_with_index do |changeset, index|
2024         assert_select "osm>changeset:nth-child(#{index + 1})[id='#{changeset.id}']", 1
2025       end
2026     end
2027
2028     ##
2029     # update the changeset_id of a way element
2030     def update_changeset(xml, changeset_id)
2031       xml_attr_rewrite(xml, "changeset", changeset_id)
2032     end
2033
2034     ##
2035     # update an attribute in a way element
2036     def xml_attr_rewrite(xml, name, value)
2037       xml.find("//osm/way").first[name] = value.to_s
2038       xml
2039     end
2040
2041     ##
2042     # build XML for changesets
2043     def create_changeset_xml(user: nil, id: nil)
2044       root = XML::Document.new
2045       root.root = XML::Node.new "osm"
2046       cs = XML::Node.new "changeset"
2047       if user
2048         cs["user"] = user.display_name
2049         cs["uid"] = user.id.to_s
2050       end
2051       cs["id"] = id.to_s if id
2052       root.root << cs
2053       root
2054     end
2055   end
2056 end