test/controllers/api/changesets_controller_test.rb

   1 require "test_helper"
   2
   3 module Api
   4   class ChangesetsControllerTest < ActionDispatch::IntegrationTest
   5     ##
   6     # test all routes which lead to this controller
   7     def test_routes
   8       assert_routing(
   9         { :path => "/api/0.6/changesets", :method => :get },
  10         { :controller => "api/changesets", :action => "index" }
  11       )
  12       assert_routing(
  13         { :path => "/api/0.6/changesets.json", :method => :get },
  14         { :controller => "api/changesets", :action => "index", :format => "json" }
  15       )
  16       assert_routing(
  17         { :path => "/api/0.6/changesets", :method => :post },
  18         { :controller => "api/changesets", :action => "create" }
  19       )
  20       assert_routing(
  21         { :path => "/api/0.6/changeset/1", :method => :get },
  22         { :controller => "api/changesets", :action => "show", :id => "1" }
  23       )
  24       assert_routing(
  25         { :path => "/api/0.6/changeset/1.json", :method => :get },
  26         { :controller => "api/changesets", :action => "show", :id => "1", :format => "json" }
  27       )
  28       assert_routing(
  29         { :path => "/api/0.6/changeset/1", :method => :put },
  30         { :controller => "api/changesets", :action => "update", :id => "1" }
  31       )
  32
  33       assert_recognizes(
  34         { :controller => "api/changesets", :action => "create" },
  35         { :path => "/api/0.6/changeset/create", :method => :put }
  36       )
  37     end
  38
  39     ##
  40     # test the query functionality of changesets
  41     def test_index
  42       private_user = create(:user, :data_public => false)
  43       private_user_changeset = create(:changeset, :user => private_user)
  44       private_user_closed_changeset = create(:changeset, :closed, :user => private_user)
  45       user = create(:user)
  46       changeset = create(:changeset, :user => user)
  47       closed_changeset = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 1, 1, 0, 0, 0), :closed_at => Time.utc(2008, 1, 2, 0, 0, 0))
  48       changeset2 = create(:changeset, :bbox => [5, 5, 15, 15])
  49       changeset3 = create(:changeset, :bbox => [4.5, 4.5, 5, 5])
  50
  51       get api_changesets_path(:bbox => "-10,-10, 10, 10")
  52       assert_response :success, "can't get changesets in bbox"
  53       assert_changesets_in_order [changeset3, changeset2]
  54
  55       get api_changesets_path(:bbox => "4.5,4.5,4.6,4.6")
  56       assert_response :success, "can't get changesets in bbox"
  57       assert_changesets_in_order [changeset3]
  58
  59       # not found when looking for changesets of non-existing users
  60       get api_changesets_path(:user => User.maximum(:id) + 1)
  61       assert_response :not_found
  62       assert_equal "text/plain", @response.media_type
  63       get api_changesets_path(:display_name => " ")
  64       assert_response :not_found
  65       assert_equal "text/plain", @response.media_type
  66
  67       # can't get changesets of user 1 without authenticating
  68       get api_changesets_path(:user => private_user.id)
  69       assert_response :not_found, "shouldn't be able to get changesets by non-public user (ID)"
  70       get api_changesets_path(:display_name => private_user.display_name)
  71       assert_response :not_found, "shouldn't be able to get changesets by non-public user (name)"
  72
  73       # but this should work
  74       auth_header = bearer_authorization_header private_user
  75       get api_changesets_path(:user => private_user.id), :headers => auth_header
  76       assert_response :success, "can't get changesets by user ID"
  77       assert_changesets_in_order [private_user_changeset, private_user_closed_changeset]
  78
  79       get api_changesets_path(:display_name => private_user.display_name), :headers => auth_header
  80       assert_response :success, "can't get changesets by user name"
  81       assert_changesets_in_order [private_user_changeset, private_user_closed_changeset]
  82
  83       # test json endpoint
  84       get api_changesets_path(:display_name => private_user.display_name), :headers => auth_header, :params => { :format => "json" }
  85       assert_response :success, "can't get changesets by user name"
  86
  87       js = ActiveSupport::JSON.decode(@response.body)
  88       assert_not_nil js
  89
  90       assert_equal Settings.api_version, js["version"]
  91       assert_equal Settings.generator, js["generator"]
  92       assert_equal 2, js["changesets"].count
  93
  94       # check that the correct error is given when we provide both UID and name
  95       get api_changesets_path(:user => private_user.id,
  96                               :display_name => private_user.display_name), :headers => auth_header
  97       assert_response :bad_request, "should be a bad request to have both ID and name specified"
  98
  99       get api_changesets_path(:user => private_user.id, :open => true), :headers => auth_header
 100       assert_response :success, "can't get changesets by user and open"
 101       assert_changesets_in_order [private_user_changeset]
 102
 103       get api_changesets_path(:time => "2007-12-31"), :headers => auth_header
 104       assert_response :success, "can't get changesets by time-since"
 105       assert_changesets_in_order [changeset3, changeset2, changeset, private_user_changeset, private_user_closed_changeset, closed_changeset]
 106
 107       get api_changesets_path(:time => "2008-01-01T12:34Z"), :headers => auth_header
 108       assert_response :success, "can't get changesets by time-since with hour"
 109       assert_changesets_in_order [changeset3, changeset2, changeset, private_user_changeset, private_user_closed_changeset, closed_changeset]
 110
 111       get api_changesets_path(:time => "2007-12-31T23:59Z,2008-01-02T00:01Z"), :headers => auth_header
 112       assert_response :success, "can't get changesets by time-range"
 113       assert_changesets_in_order [closed_changeset]
 114
 115       get api_changesets_path(:open => "true"), :headers => auth_header
 116       assert_response :success, "can't get changesets by open-ness"
 117       assert_changesets_in_order [changeset3, changeset2, changeset, private_user_changeset]
 118
 119       get api_changesets_path(:closed => "true"), :headers => auth_header
 120       assert_response :success, "can't get changesets by closed-ness"
 121       assert_changesets_in_order [private_user_closed_changeset, closed_changeset]
 122
 123       get api_changesets_path(:closed => "true", :user => private_user.id), :headers => auth_header
 124       assert_response :success, "can't get changesets by closed-ness and user"
 125       assert_changesets_in_order [private_user_closed_changeset]
 126
 127       get api_changesets_path(:closed => "true", :user => user.id), :headers => auth_header
 128       assert_response :success, "can't get changesets by closed-ness and user"
 129       assert_changesets_in_order [closed_changeset]
 130
 131       get api_changesets_path(:changesets => "#{private_user_changeset.id},#{changeset.id},#{closed_changeset.id}"), :headers => auth_header
 132       assert_response :success, "can't get changesets by id (as comma-separated string)"
 133       assert_changesets_in_order [changeset, private_user_changeset, closed_changeset]
 134
 135       get api_changesets_path(:changesets => ""), :headers => auth_header
 136       assert_response :bad_request, "should be a bad request since changesets is empty"
 137     end
 138
 139     ##
 140     # test the query functionality of changesets with the limit parameter
 141     def test_index_limit
 142       user = create(:user)
 143       changeset1 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 1, 1, 0, 0, 0), :closed_at => Time.utc(2008, 1, 2, 0, 0, 0))
 144       changeset2 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 2, 1, 0, 0, 0), :closed_at => Time.utc(2008, 2, 2, 0, 0, 0))
 145       changeset3 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 3, 1, 0, 0, 0), :closed_at => Time.utc(2008, 3, 2, 0, 0, 0))
 146       changeset4 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 4, 1, 0, 0, 0), :closed_at => Time.utc(2008, 4, 2, 0, 0, 0))
 147       changeset5 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 5, 1, 0, 0, 0), :closed_at => Time.utc(2008, 5, 2, 0, 0, 0))
 148
 149       get api_changesets_path
 150       assert_response :success
 151       assert_changesets_in_order [changeset5, changeset4, changeset3, changeset2, changeset1]
 152
 153       get api_changesets_path(:limit => "3")
 154       assert_response :success
 155       assert_changesets_in_order [changeset5, changeset4, changeset3]
 156
 157       get api_changesets_path(:limit => "0")
 158       assert_response :bad_request
 159
 160       get api_changesets_path(:limit => Settings.max_changeset_query_limit)
 161       assert_response :success
 162       assert_changesets_in_order [changeset5, changeset4, changeset3, changeset2, changeset1]
 163
 164       get api_changesets_path(:limit => Settings.max_changeset_query_limit + 1)
 165       assert_response :bad_request
 166     end
 167
 168     ##
 169     # test the query functionality of sequential changesets with order and time parameters
 170     def test_index_order
 171       user = create(:user)
 172       changeset1 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 1, 1, 0, 0, 0), :closed_at => Time.utc(2008, 1, 2, 0, 0, 0))
 173       changeset2 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 2, 1, 0, 0, 0), :closed_at => Time.utc(2008, 2, 2, 0, 0, 0))
 174       changeset3 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 3, 1, 0, 0, 0), :closed_at => Time.utc(2008, 3, 2, 0, 0, 0))
 175       changeset4 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 4, 1, 0, 0, 0), :closed_at => Time.utc(2008, 4, 2, 0, 0, 0))
 176       changeset5 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 5, 1, 0, 0, 0), :closed_at => Time.utc(2008, 5, 2, 0, 0, 0))
 177       changeset6 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 6, 1, 0, 0, 0), :closed_at => Time.utc(2008, 6, 2, 0, 0, 0))
 178
 179       get api_changesets_path
 180       assert_response :success
 181       assert_changesets_in_order [changeset6, changeset5, changeset4, changeset3, changeset2, changeset1]
 182
 183       get api_changesets_path(:order => "oldest")
 184       assert_response :success
 185       assert_changesets_in_order [changeset1, changeset2, changeset3, changeset4, changeset5, changeset6]
 186
 187       [
 188         # lower time bound at the opening time of a changeset
 189         ["2008-02-01T00:00:00Z", "2008-05-15T00:00:00Z", [changeset5, changeset4, changeset3, changeset2], [changeset5, changeset4, changeset3, changeset2]],
 190         # lower time bound in the middle of a changeset
 191         ["2008-02-01T12:00:00Z", "2008-05-15T00:00:00Z", [changeset5, changeset4, changeset3, changeset2], [changeset5, changeset4, changeset3]],
 192         # lower time bound at the closing time of a changeset
 193         ["2008-02-02T00:00:00Z", "2008-05-15T00:00:00Z", [changeset5, changeset4, changeset3, changeset2], [changeset5, changeset4, changeset3]],
 194         # lower time bound after the closing time of a changeset
 195         ["2008-02-02T00:00:01Z", "2008-05-15T00:00:00Z", [changeset5, changeset4, changeset3], [changeset5, changeset4, changeset3]],
 196         # upper time bound in the middle of a changeset
 197         ["2007-09-09T12:00:00Z", "2008-04-01T12:00:00Z", [changeset4, changeset3, changeset2, changeset1], [changeset4, changeset3, changeset2, changeset1]],
 198         # empty range
 199         ["2009-02-02T00:00:01Z", "2018-05-15T00:00:00Z", [], []]
 200       ].each do |from, to, interval_changesets, point_changesets|
 201         get api_changesets_path(:time => "#{from},#{to}")
 202         assert_response :success
 203         assert_changesets_in_order interval_changesets
 204
 205         get api_changesets_path(:from => from, :to => to)
 206         assert_response :success
 207         assert_changesets_in_order point_changesets
 208
 209         get api_changesets_path(:from => from, :to => to, :order => "oldest")
 210         assert_response :success
 211         assert_changesets_in_order point_changesets.reverse
 212       end
 213     end
 214
 215     ##
 216     # test the query functionality of overlapping changesets with order and time parameters
 217     def test_index_order_overlapping
 218       user = create(:user)
 219       changeset1 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2015, 6, 4, 17, 0, 0), :closed_at => Time.utc(2015, 6, 4, 17, 0, 0))
 220       changeset2 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2015, 6, 4, 16, 0, 0), :closed_at => Time.utc(2015, 6, 4, 18, 0, 0))
 221       changeset3 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2015, 6, 4, 14, 0, 0), :closed_at => Time.utc(2015, 6, 4, 20, 0, 0))
 222       changeset4 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2015, 6, 3, 23, 0, 0), :closed_at => Time.utc(2015, 6, 4, 23, 0, 0))
 223       create(:changeset, :closed, :user => user, :created_at => Time.utc(2015, 6, 2, 23, 0, 0), :closed_at => Time.utc(2015, 6, 3, 23, 0, 0))
 224
 225       get api_changesets_path(:time => "2015-06-04T00:00:00Z")
 226       assert_response :success
 227       assert_changesets_in_order [changeset1, changeset2, changeset3, changeset4]
 228
 229       get api_changesets_path(:from => "2015-06-04T00:00:00Z")
 230       assert_response :success
 231       assert_changesets_in_order [changeset1, changeset2, changeset3]
 232
 233       get api_changesets_path(:from => "2015-06-04T00:00:00Z", :order => "oldest")
 234       assert_response :success
 235       assert_changesets_in_order [changeset3, changeset2, changeset1]
 236
 237       get api_changesets_path(:time => "2015-06-04T16:00:00Z,2015-06-04T17:30:00Z")
 238       assert_response :success
 239       assert_changesets_in_order [changeset1, changeset2, changeset3, changeset4]
 240
 241       get api_changesets_path(:from => "2015-06-04T16:00:00Z", :to => "2015-06-04T17:30:00Z")
 242       assert_response :success
 243       assert_changesets_in_order [changeset1, changeset2]
 244
 245       get api_changesets_path(:from => "2015-06-04T16:00:00Z", :to => "2015-06-04T17:30:00Z", :order => "oldest")
 246       assert_response :success
 247       assert_changesets_in_order [changeset2, changeset1]
 248     end
 249
 250     ##
 251     # check that errors are returned if garbage is inserted
 252     # into query strings
 253     def test_index_invalid
 254       ["abracadabra!",
 255        "1,2,3,F",
 256        ";drop table users;"].each do |bbox|
 257         get api_changesets_path(:bbox => bbox)
 258         assert_response :bad_request, "'#{bbox}' isn't a bbox"
 259       end
 260
 261       ["now()",
 262        "00-00-00",
 263        ";drop table users;",
 264        ",",
 265        "-,-"].each do |time|
 266         get api_changesets_path(:time => time)
 267         assert_response :bad_request, "'#{time}' isn't a valid time range"
 268       end
 269
 270       ["me",
 271        "foobar",
 272        "-1",
 273        "0"].each do |uid|
 274         get api_changesets_path(:user => uid)
 275         assert_response :bad_request, "'#{uid}' isn't a valid user ID"
 276       end
 277
 278       get api_changesets_path(:order => "oldest", :time => "2008-01-01T00:00Z,2018-01-01T00:00Z")
 279       assert_response :bad_request, "cannot use order=oldest with time"
 280     end
 281
 282     # -----------------------
 283     # Test simple changeset creation
 284     # -----------------------
 285
 286     def test_create
 287       auth_header = bearer_authorization_header create(:user, :data_public => false)
 288       # Create the first user's changeset
 289       xml = "<osm><changeset>" \
 290             "<tag k='created_by' v='osm test suite checking changesets'/>" \
 291             "</changeset></osm>"
 292       post api_changesets_path, :params => xml, :headers => auth_header
 293       assert_require_public_data
 294
 295       auth_header = bearer_authorization_header
 296       # Create the first user's changeset
 297       xml = "<osm><changeset>" \
 298             "<tag k='created_by' v='osm test suite checking changesets'/>" \
 299             "</changeset></osm>"
 300       post api_changesets_path, :params => xml, :headers => auth_header
 301
 302       assert_response :success, "Creation of changeset did not return success status"
 303       newid = @response.body.to_i
 304
 305       # check end time, should be an hour ahead of creation time
 306       cs = Changeset.find(newid)
 307       duration = cs.closed_at - cs.created_at
 308       # the difference can either be a rational, or a floating point number
 309       # of seconds, depending on the code path taken :-(
 310       if duration.instance_of?(Rational)
 311         assert_equal Rational(1, 24), duration, "initial idle timeout should be an hour (#{cs.created_at} -> #{cs.closed_at})"
 312       else
 313         # must be number of seconds...
 314         assert_equal 3600, duration.round, "initial idle timeout should be an hour (#{cs.created_at} -> #{cs.closed_at})"
 315       end
 316
 317       # checks if uploader was subscribed
 318       assert_equal 1, cs.subscribers.length
 319     end
 320
 321     def test_create_invalid
 322       auth_header = bearer_authorization_header create(:user, :data_public => false)
 323       xml = "<osm><changeset></osm>"
 324       post api_changesets_path, :params => xml, :headers => auth_header
 325       assert_require_public_data
 326
 327       ## Try the public user
 328       auth_header = bearer_authorization_header
 329       xml = "<osm><changeset></osm>"
 330       post api_changesets_path, :params => xml, :headers => auth_header
 331       assert_response :bad_request, "creating a invalid changeset should fail"
 332     end
 333
 334     def test_create_invalid_no_content
 335       ## First check with no auth
 336       post api_changesets_path
 337       assert_response :unauthorized, "shouldn't be able to create a changeset with no auth"
 338
 339       ## Now try to with a non-public user
 340       auth_header = bearer_authorization_header create(:user, :data_public => false)
 341       post api_changesets_path, :headers => auth_header
 342       assert_require_public_data
 343
 344       ## Try an inactive user
 345       auth_header = bearer_authorization_header create(:user, :pending)
 346       post api_changesets_path, :headers => auth_header
 347       assert_inactive_user
 348
 349       ## Now try to use a normal user
 350       auth_header = bearer_authorization_header
 351       post api_changesets_path, :headers => auth_header
 352       assert_response :bad_request, "creating a changeset with no content should fail"
 353     end
 354
 355     def test_create_wrong_method
 356       auth_header = bearer_authorization_header
 357
 358       put api_changesets_path, :headers => auth_header
 359       assert_response :not_found
 360       assert_template "rescues/routing_error"
 361     end
 362
 363     def test_create_legacy_path
 364       auth_header = bearer_authorization_header
 365       xml = "<osm><changeset></changeset></osm>"
 366
 367       assert_difference "Changeset.count", 1 do
 368         put "/api/0.6/changeset/create", :params => xml, :headers => auth_header
 369       end
 370
 371       assert_response :success, "Creation of changeset did not return success status"
 372       assert_equal Changeset.last.id, @response.body.to_i
 373     end
 374
 375     ##
 376     # check that the changeset can be shown and returns the correct
 377     # document structure.
 378     def test_show
 379       changeset = create(:changeset)
 380
 381       get api_changeset_path(changeset)
 382       assert_response :success, "cannot get first changeset"
 383
 384       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
 385       assert_single_changeset changeset do
 386         assert_dom "> discussion", 0
 387       end
 388
 389       get api_changeset_path(changeset, :include_discussion => true)
 390       assert_response :success, "cannot get first changeset with comments"
 391
 392       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
 393       assert_single_changeset changeset do
 394         assert_dom "> discussion", 1
 395         assert_dom "> discussion > comment", 0
 396       end
 397     end
 398
 399     def test_show_comments
 400       # all comments visible
 401       changeset = create(:changeset, :closed)
 402       comment1, comment2, comment3 = create_list(:changeset_comment, 3, :changeset_id => changeset.id)
 403
 404       get api_changeset_path(changeset, :include_discussion => true)
 405       assert_response :success, "cannot get closed changeset with comments"
 406
 407       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1 do
 408         assert_single_changeset changeset do
 409           assert_dom "> discussion", 1 do
 410             assert_dom "> comment", 3 do |dom_comments|
 411               assert_dom dom_comments[0], "> @id", comment1.id.to_s
 412               assert_dom dom_comments[0], "> @visible", "true"
 413               assert_dom dom_comments[1], "> @id", comment2.id.to_s
 414               assert_dom dom_comments[1], "> @visible", "true"
 415               assert_dom dom_comments[2], "> @id", comment3.id.to_s
 416               assert_dom dom_comments[2], "> @visible", "true"
 417             end
 418           end
 419         end
 420       end
 421
 422       # one hidden comment not included because not asked for
 423       comment2.update(:visible => false)
 424       changeset.reload
 425
 426       get api_changeset_path(changeset, :include_discussion => true)
 427       assert_response :success, "cannot get closed changeset with comments"
 428
 429       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
 430       assert_single_changeset changeset do
 431         assert_dom "> discussion", 1 do
 432           assert_dom "> comment", 2 do |dom_comments|
 433             assert_dom dom_comments[0], "> @id", comment1.id.to_s
 434             assert_dom dom_comments[0], "> @visible", "true"
 435             assert_dom dom_comments[1], "> @id", comment3.id.to_s
 436             assert_dom dom_comments[1], "> @visible", "true"
 437           end
 438         end
 439       end
 440
 441       # one hidden comment not included because no permissions
 442       get api_changeset_path(changeset, :include_discussion => true, :show_hidden_comments => true)
 443       assert_response :success, "cannot get closed changeset with comments"
 444
 445       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
 446       assert_single_changeset changeset do
 447         assert_dom "> discussion", 1 do
 448           assert_dom "> comment", 2 do |dom_comments|
 449             assert_dom dom_comments[0], "> @id", comment1.id.to_s
 450             assert_dom dom_comments[0], "> @visible", "true"
 451             # maybe will show an empty comment element with visible=false in the future
 452             assert_dom dom_comments[1], "> @id", comment3.id.to_s
 453             assert_dom dom_comments[1], "> @visible", "true"
 454           end
 455         end
 456       end
 457
 458       # one hidden comment shown to moderators
 459       moderator_user = create(:moderator_user)
 460       auth_header = bearer_authorization_header moderator_user
 461       get api_changeset_path(changeset, :include_discussion => true, :show_hidden_comments => true), :headers => auth_header
 462       assert_response :success, "cannot get closed changeset with comments"
 463
 464       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
 465       assert_single_changeset changeset do
 466         assert_dom "> discussion", 1 do
 467           assert_dom "> comment", 3 do |dom_comments|
 468             assert_dom dom_comments[0], "> @id", comment1.id.to_s
 469             assert_dom dom_comments[0], "> @visible", "true"
 470             assert_dom dom_comments[1], "> @id", comment2.id.to_s
 471             assert_dom dom_comments[1], "> @visible", "false"
 472             assert_dom dom_comments[2], "> @id", comment3.id.to_s
 473             assert_dom dom_comments[2], "> @visible", "true"
 474           end
 475         end
 476       end
 477     end
 478
 479     def test_show_tags
 480       changeset = create(:changeset, :closed)
 481       create(:changeset_tag, :changeset => changeset, :k => "created_by", :v => "JOSM/1.5 (18364)")
 482       create(:changeset_tag, :changeset => changeset, :k => "comment", :v => "changeset comment")
 483
 484       get api_changeset_path(changeset)
 485
 486       assert_response :success
 487       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
 488       assert_single_changeset changeset do
 489         assert_dom "> tag", 2
 490         assert_dom "> tag[k='created_by'][v='JOSM/1.5 (18364)']", 1
 491         assert_dom "> tag[k='comment'][v='changeset comment']", 1
 492       end
 493     end
 494
 495     def test_show_json
 496       changeset = create(:changeset)
 497
 498       get api_changeset_path(changeset, :format => "json")
 499       assert_response :success, "cannot get first changeset"
 500
 501       js = ActiveSupport::JSON.decode(@response.body)
 502       assert_not_nil js
 503
 504       assert_equal Settings.api_version, js["version"]
 505       assert_equal Settings.generator, js["generator"]
 506       assert_single_changeset_json changeset, js
 507       assert_nil js["changeset"]["tags"]
 508       assert_nil js["changeset"]["comments"]
 509       assert_equal changeset.user.id, js["changeset"]["uid"]
 510       assert_equal changeset.user.display_name, js["changeset"]["user"]
 511
 512       get api_changeset_path(changeset, :format => "json", :include_discussion => true)
 513       assert_response :success, "cannot get first changeset with comments"
 514
 515       js = ActiveSupport::JSON.decode(@response.body)
 516       assert_not_nil js
 517       assert_equal Settings.api_version, js["version"]
 518       assert_equal Settings.generator, js["generator"]
 519       assert_single_changeset_json changeset, js
 520       assert_nil js["changeset"]["tags"]
 521       assert_nil js["changeset"]["min_lat"]
 522       assert_nil js["changeset"]["min_lon"]
 523       assert_nil js["changeset"]["max_lat"]
 524       assert_nil js["changeset"]["max_lon"]
 525       assert_equal 0, js["changeset"]["comments"].count
 526     end
 527
 528     def test_show_comments_json
 529       # all comments visible
 530       changeset = create(:changeset, :closed)
 531       comment0, comment1, comment2 = create_list(:changeset_comment, 3, :changeset_id => changeset.id)
 532
 533       get api_changeset_path(changeset, :format => "json", :include_discussion => true)
 534       assert_response :success, "cannot get closed changeset with comments"
 535
 536       js = ActiveSupport::JSON.decode(@response.body)
 537       assert_not_nil js
 538       assert_equal Settings.api_version, js["version"]
 539       assert_equal Settings.generator, js["generator"]
 540       assert_single_changeset_json changeset, js
 541       assert_equal 3, js["changeset"]["comments"].count
 542       assert_equal comment0.id, js["changeset"]["comments"][0]["id"]
 543       assert js["changeset"]["comments"][0]["visible"]
 544       assert_equal comment1.id, js["changeset"]["comments"][1]["id"]
 545       assert js["changeset"]["comments"][1]["visible"]
 546       assert_equal comment2.id, js["changeset"]["comments"][2]["id"]
 547       assert js["changeset"]["comments"][2]["visible"]
 548
 549       # one hidden comment not included because not asked for
 550       comment1.update(:visible => false)
 551       changeset.reload
 552
 553       get api_changeset_path(changeset, :format => "json", :include_discussion => true)
 554       assert_response :success, "cannot get closed changeset with comments"
 555
 556       js = ActiveSupport::JSON.decode(@response.body)
 557       assert_not_nil js
 558       assert_equal Settings.api_version, js["version"]
 559       assert_equal Settings.generator, js["generator"]
 560       assert_single_changeset_json changeset, js
 561       assert_equal 2, js["changeset"]["comments"].count
 562       assert_equal comment0.id, js["changeset"]["comments"][0]["id"]
 563       assert js["changeset"]["comments"][0]["visible"]
 564       assert_equal comment2.id, js["changeset"]["comments"][1]["id"]
 565       assert js["changeset"]["comments"][1]["visible"]
 566
 567       # one hidden comment not included because no permissions
 568       get api_changeset_path(changeset, :format => "json", :include_discussion => true, :show_hidden_comments => true)
 569       assert_response :success, "cannot get closed changeset with comments"
 570
 571       js = ActiveSupport::JSON.decode(@response.body)
 572       assert_not_nil js
 573       assert_equal Settings.api_version, js["version"]
 574       assert_equal Settings.generator, js["generator"]
 575       assert_single_changeset_json changeset, js
 576       assert_equal 2, js["changeset"]["comments"].count
 577       assert_equal comment0.id, js["changeset"]["comments"][0]["id"]
 578       assert js["changeset"]["comments"][0]["visible"]
 579       # maybe will show an empty comment element with visible=false in the future
 580       assert_equal comment2.id, js["changeset"]["comments"][1]["id"]
 581       assert js["changeset"]["comments"][1]["visible"]
 582
 583       # one hidden comment shown to moderators
 584       moderator_user = create(:moderator_user)
 585       auth_header = bearer_authorization_header moderator_user
 586       get api_changeset_path(changeset, :format => "json", :include_discussion => true, :show_hidden_comments => true), :headers => auth_header
 587       assert_response :success, "cannot get closed changeset with comments"
 588
 589       js = ActiveSupport::JSON.decode(@response.body)
 590       assert_not_nil js
 591       assert_equal Settings.api_version, js["version"]
 592       assert_equal Settings.generator, js["generator"]
 593       assert_single_changeset_json changeset, js
 594       assert_equal 3, js["changeset"]["comments"].count
 595       assert_equal comment0.id, js["changeset"]["comments"][0]["id"]
 596       assert js["changeset"]["comments"][0]["visible"]
 597       assert_equal comment1.id, js["changeset"]["comments"][1]["id"]
 598       assert_not js["changeset"]["comments"][1]["visible"]
 599       assert_equal comment2.id, js["changeset"]["comments"][2]["id"]
 600       assert js["changeset"]["comments"][2]["visible"]
 601     end
 602
 603     def test_show_tags_json
 604       changeset = create(:changeset, :closed)
 605       create(:changeset_tag, :changeset => changeset, :k => "created_by", :v => "JOSM/1.5 (18364)")
 606       create(:changeset_tag, :changeset => changeset, :k => "comment", :v => "changeset comment")
 607
 608       get api_changeset_path(changeset, :format => "json")
 609
 610       assert_response :success
 611       js = ActiveSupport::JSON.decode(@response.body)
 612       assert_not_nil js
 613       assert_equal Settings.api_version, js["version"]
 614       assert_equal Settings.generator, js["generator"]
 615       assert_single_changeset_json changeset, js
 616       assert_equal 2, js["changeset"]["tags"].count
 617       assert_equal "JOSM/1.5 (18364)", js["changeset"]["tags"]["created_by"]
 618       assert_equal "changeset comment", js["changeset"]["tags"]["comment"]
 619     end
 620
 621     def test_show_bbox_json
 622       changeset = create(:changeset, :bbox => [5, -5, 12, 15])
 623
 624       get api_changeset_path(changeset, :format => "json")
 625       assert_response :success, "cannot get first changeset"
 626
 627       js = ActiveSupport::JSON.decode(@response.body)
 628       assert_not_nil js
 629       assert_equal(-5, js["changeset"]["min_lat"])
 630       assert_equal 5, js["changeset"]["min_lon"]
 631       assert_equal 15, js["changeset"]["max_lat"]
 632       assert_equal 12, js["changeset"]["max_lon"]
 633     end
 634
 635     ##
 636     # check that a changeset that doesn't exist returns an appropriate message
 637     def test_show_not_found
 638       [0, -32, 233455644, "afg", "213"].each do |id|
 639         get api_changeset_path(id)
 640         assert_response :not_found, "should get a not found"
 641       rescue ActionController::UrlGenerationError => e
 642         assert_match(/No route matches/, e.to_s)
 643       end
 644     end
 645
 646     def test_repeated_changeset_create
 647       3.times do
 648         auth_header = bearer_authorization_header
 649
 650         # create a temporary changeset
 651         xml = "<osm><changeset>" \
 652               "<tag k='created_by' v='osm test suite checking changesets'/>" \
 653               "</changeset></osm>"
 654         assert_difference "Changeset.count", 1 do
 655           post api_changesets_path, :params => xml, :headers => auth_header
 656         end
 657         assert_response :success
 658       end
 659     end
 660
 661     def test_upload_large_changeset
 662       user = create(:user)
 663       auth_header = bearer_authorization_header user
 664
 665       # create an old changeset to ensure we have the maximum rate limit
 666       create(:changeset, :user => user, :created_at => Time.now.utc - 28.days)
 667
 668       # create a changeset
 669       post api_changesets_path, :params => "<osm><changeset/></osm>", :headers => auth_header
 670       assert_response :success, "Should be able to create a changeset: #{@response.body}"
 671       changeset_id = @response.body.to_i
 672
 673       # upload some widely-spaced nodes, spiralling positive and negative
 674       diff = <<~CHANGESET
 675         <osmChange>
 676          <create>
 677           <node id='-1' lon='-20' lat='-10' changeset='#{changeset_id}'/>
 678           <node id='-10' lon='20'  lat='10' changeset='#{changeset_id}'/>
 679           <node id='-2' lon='-40' lat='-20' changeset='#{changeset_id}'/>
 680           <node id='-11' lon='40'  lat='20' changeset='#{changeset_id}'/>
 681           <node id='-3' lon='-60' lat='-30' changeset='#{changeset_id}'/>
 682           <node id='-12' lon='60'  lat='30' changeset='#{changeset_id}'/>
 683           <node id='-4' lon='-80' lat='-40' changeset='#{changeset_id}'/>
 684           <node id='-13' lon='80'  lat='40' changeset='#{changeset_id}'/>
 685           <node id='-5' lon='-100' lat='-50' changeset='#{changeset_id}'/>
 686           <node id='-14' lon='100'  lat='50' changeset='#{changeset_id}'/>
 687           <node id='-6' lon='-120' lat='-60' changeset='#{changeset_id}'/>
 688           <node id='-15' lon='120'  lat='60' changeset='#{changeset_id}'/>
 689           <node id='-7' lon='-140' lat='-70' changeset='#{changeset_id}'/>
 690           <node id='-16' lon='140'  lat='70' changeset='#{changeset_id}'/>
 691           <node id='-8' lon='-160' lat='-80' changeset='#{changeset_id}'/>
 692           <node id='-17' lon='160'  lat='80' changeset='#{changeset_id}'/>
 693           <node id='-9' lon='-179.9' lat='-89.9' changeset='#{changeset_id}'/>
 694           <node id='-18' lon='179.9'  lat='89.9' changeset='#{changeset_id}'/>
 695          </create>
 696         </osmChange>
 697       CHANGESET
 698
 699       # upload it, which used to cause an error like "PGError: ERROR:
 700       # integer out of range" (bug #2152). but shouldn't any more.
 701       post api_changeset_upload_path(changeset_id), :params => diff, :headers => auth_header
 702       assert_response :success,
 703                       "can't upload a spatially-large diff to changeset: #{@response.body}"
 704
 705       # check that the changeset bbox is within bounds
 706       cs = Changeset.find(changeset_id)
 707       assert_operator cs.min_lon, :>=, -180 * GeoRecord::SCALE, "Minimum longitude (#{cs.min_lon / GeoRecord::SCALE}) should be >= -180 to be valid."
 708       assert_operator cs.max_lon, :<=, 180 * GeoRecord::SCALE, "Maximum longitude (#{cs.max_lon / GeoRecord::SCALE}) should be <= 180 to be valid."
 709       assert_operator cs.min_lat, :>=, -90 * GeoRecord::SCALE, "Minimum latitude (#{cs.min_lat / GeoRecord::SCALE}) should be >= -90 to be valid."
 710       assert_operator cs.max_lat, :<=, 90 * GeoRecord::SCALE, "Maximum latitude (#{cs.max_lat / GeoRecord::SCALE}) should be <= 90 to be valid."
 711     end
 712
 713     ##
 714     # test what happens if a diff is uploaded containing only a node
 715     # move.
 716     def test_upload_node_move
 717       auth_header = bearer_authorization_header
 718
 719       xml = "<osm><changeset>" \
 720             "<tag k='created_by' v='osm test suite checking changesets'/>" \
 721             "</changeset></osm>"
 722       post api_changesets_path, :params => xml, :headers => auth_header
 723       assert_response :success
 724       changeset_id = @response.body.to_i
 725
 726       old_node = create(:node, :lat => 1, :lon => 1)
 727
 728       diff = XML::Document.new
 729       diff.root = XML::Node.new "osmChange"
 730       modify = XML::Node.new "modify"
 731       xml_old_node = xml_node_for_node(old_node)
 732       xml_old_node["lat"] = 2.0.to_s
 733       xml_old_node["lon"] = 2.0.to_s
 734       xml_old_node["changeset"] = changeset_id.to_s
 735       modify << xml_old_node
 736       diff.root << modify
 737
 738       # upload it
 739       post api_changeset_upload_path(changeset_id), :params => diff.to_s, :headers => auth_header
 740       assert_response :success,
 741                       "diff should have uploaded OK"
 742
 743       # check the bbox
 744       changeset = Changeset.find(changeset_id)
 745       assert_equal 1 * GeoRecord::SCALE, changeset.min_lon, "min_lon should be 1 degree"
 746       assert_equal 2 * GeoRecord::SCALE, changeset.max_lon, "max_lon should be 2 degrees"
 747       assert_equal 1 * GeoRecord::SCALE, changeset.min_lat, "min_lat should be 1 degree"
 748       assert_equal 2 * GeoRecord::SCALE, changeset.max_lat, "max_lat should be 2 degrees"
 749     end
 750
 751     ##
 752     # test what happens if a diff is uploaded adding a node to a way.
 753     def test_upload_way_extend
 754       auth_header = bearer_authorization_header
 755
 756       xml = "<osm><changeset>" \
 757             "<tag k='created_by' v='osm test suite checking changesets'/>" \
 758             "</changeset></osm>"
 759       post api_changesets_path, :params => xml, :headers => auth_header
 760       assert_response :success
 761       changeset_id = @response.body.to_i
 762
 763       old_way = create(:way)
 764       create(:way_node, :way => old_way, :node => create(:node, :lat => 0.1, :lon => 0.1))
 765
 766       diff = XML::Document.new
 767       diff.root = XML::Node.new "osmChange"
 768       modify = XML::Node.new "modify"
 769       xml_old_way = xml_node_for_way(old_way)
 770       nd_ref = XML::Node.new "nd"
 771       nd_ref["ref"] = create(:node, :lat => 0.3, :lon => 0.3).id.to_s
 772       xml_old_way << nd_ref
 773       xml_old_way["changeset"] = changeset_id.to_s
 774       modify << xml_old_way
 775       diff.root << modify
 776
 777       # upload it
 778       post api_changeset_upload_path(changeset_id), :params => diff.to_s, :headers => auth_header
 779       assert_response :success,
 780                       "diff should have uploaded OK"
 781
 782       # check the bbox
 783       changeset = Changeset.find(changeset_id)
 784       assert_equal 0.1 * GeoRecord::SCALE, changeset.min_lon, "min_lon should be 0.1 degree"
 785       assert_equal 0.3 * GeoRecord::SCALE, changeset.max_lon, "max_lon should be 0.3 degrees"
 786       assert_equal 0.1 * GeoRecord::SCALE, changeset.min_lat, "min_lat should be 0.1 degree"
 787       assert_equal 0.3 * GeoRecord::SCALE, changeset.max_lat, "max_lat should be 0.3 degrees"
 788     end
 789
 790     ##
 791     # test for more issues in #1568
 792     def test_upload_empty_invalid
 793       changeset = create(:changeset)
 794
 795       auth_header = bearer_authorization_header changeset.user
 796
 797       ["<osmChange/>",
 798        "<osmChange></osmChange>",
 799        "<osmChange><modify/></osmChange>",
 800        "<osmChange><modify></modify></osmChange>"].each do |diff|
 801         # upload it
 802         post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
 803         assert_response(:success, "should be able to upload " \
 804                                   "empty changeset: " + diff)
 805       end
 806     end
 807
 808     ##
 809     # test that the X-Error-Format header works to request XML errors
 810     def test_upload_xml_errors
 811       changeset = create(:changeset)
 812       node = create(:node)
 813       create(:relation_member, :member => node)
 814
 815       auth_header = bearer_authorization_header changeset.user
 816
 817       # try and delete a node that is in use
 818       diff = XML::Document.new
 819       diff.root = XML::Node.new "osmChange"
 820       delete = XML::Node.new "delete"
 821       diff.root << delete
 822       delete << xml_node_for_node(node)
 823
 824       # upload it
 825       error_header = error_format_header "xml"
 826       post api_changeset_upload_path(changeset), :params => diff.to_s, :headers => auth_header.merge(error_header)
 827       assert_response :success,
 828                       "failed to return error in XML format"
 829
 830       # check the returned payload
 831       assert_select "osmError[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
 832       assert_select "osmError>status", 1
 833       assert_select "osmError>message", 1
 834     end
 835
 836     def test_upload_not_found
 837       changeset = create(:changeset)
 838
 839       auth_header = bearer_authorization_header changeset.user
 840
 841       # modify node
 842       diff = <<~CHANGESET
 843         <osmChange>
 844         <modify>
 845           <node id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
 846         </modify>
 847         </osmChange>
 848       CHANGESET
 849
 850       # upload it
 851       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
 852       assert_response :not_found, "Node should not be found"
 853
 854       # modify way
 855       diff = <<~CHANGESET
 856         <osmChange>
 857         <modify>
 858           <way id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
 859         </modify>
 860         </osmChange>
 861       CHANGESET
 862
 863       # upload it
 864       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
 865       assert_response :not_found, "Way should not be found"
 866
 867       # modify relation
 868       diff = <<~CHANGESET
 869         <osmChange>
 870         <modify>
 871           <relation id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
 872         </modify>
 873         </osmChange>
 874       CHANGESET
 875
 876       # upload it
 877       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
 878       assert_response :not_found, "Relation should not be found"
 879
 880       # delete node
 881       diff = <<~CHANGESET
 882         <osmChange>
 883         <delete>
 884           <node id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
 885         </delete>
 886         </osmChange>
 887       CHANGESET
 888
 889       # upload it
 890       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
 891       assert_response :not_found, "Node should not be deleted"
 892
 893       # delete way
 894       diff = <<~CHANGESET
 895         <osmChange>
 896         <delete>
 897           <way id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
 898         </delete>
 899         </osmChange>
 900       CHANGESET
 901
 902       # upload it
 903       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
 904       assert_response :not_found, "Way should not be deleted"
 905
 906       # delete relation
 907       diff = <<~CHANGESET
 908         <osmChange>
 909         <delete>
 910           <relation id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
 911         </delete>
 912         </osmChange>
 913       CHANGESET
 914
 915       # upload it
 916       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
 917       assert_response :not_found, "Relation should not be deleted"
 918     end
 919
 920     ##
 921     # test initial rate limit
 922     def test_upload_initial_rate_limit
 923       # create a user
 924       user = create(:user)
 925
 926       # create some objects to use
 927       node = create(:node)
 928       way = create(:way_with_nodes, :nodes_count => 2)
 929       relation = create(:relation)
 930
 931       # create a changeset that puts us near the initial rate limit
 932       changeset = create(:changeset, :user => user,
 933                                      :created_at => Time.now.utc - 5.minutes,
 934                                      :num_changes => Settings.initial_changes_per_hour - 2)
 935
 936       # create authentication header
 937       auth_header = bearer_authorization_header user
 938
 939       # simple diff to create a node way and relation using placeholders
 940       diff = <<~CHANGESET
 941         <osmChange>
 942          <create>
 943           <node id='-1' lon='0' lat='0' changeset='#{changeset.id}'>
 944            <tag k='foo' v='bar'/>
 945            <tag k='baz' v='bat'/>
 946           </node>
 947           <way id='-1' changeset='#{changeset.id}'>
 948            <nd ref='#{node.id}'/>
 949           </way>
 950          </create>
 951          <create>
 952           <relation id='-1' changeset='#{changeset.id}'>
 953            <member type='way' role='some' ref='#{way.id}'/>
 954            <member type='node' role='some' ref='#{node.id}'/>
 955            <member type='relation' role='some' ref='#{relation.id}'/>
 956           </relation>
 957          </create>
 958         </osmChange>
 959       CHANGESET
 960
 961       # upload it
 962       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
 963       assert_response :too_many_requests, "upload did not hit rate limit"
 964     end
 965
 966     ##
 967     # test maximum rate limit
 968     def test_upload_maximum_rate_limit
 969       # create a user
 970       user = create(:user)
 971
 972       # create some objects to use
 973       node = create(:node)
 974       way = create(:way_with_nodes, :nodes_count => 2)
 975       relation = create(:relation)
 976
 977       # create a changeset to establish our initial edit time
 978       changeset = create(:changeset, :user => user,
 979                                      :created_at => Time.now.utc - 28.days)
 980
 981       # create changeset to put us near the maximum rate limit
 982       total_changes = Settings.max_changes_per_hour - 2
 983       while total_changes.positive?
 984         changes = [total_changes, Changeset::MAX_ELEMENTS].min
 985         changeset = create(:changeset, :user => user,
 986                                        :created_at => Time.now.utc - 5.minutes,
 987                                        :num_changes => changes)
 988         total_changes -= changes
 989       end
 990
 991       # create authentication header
 992       auth_header = bearer_authorization_header user
 993
 994       # simple diff to create a node way and relation using placeholders
 995       diff = <<~CHANGESET
 996         <osmChange>
 997          <create>
 998           <node id='-1' lon='0' lat='0' changeset='#{changeset.id}'>
 999            <tag k='foo' v='bar'/>
1000            <tag k='baz' v='bat'/>
1001           </node>
1002           <way id='-1' changeset='#{changeset.id}'>
1003            <nd ref='#{node.id}'/>
1004           </way>
1005          </create>
1006          <create>
1007           <relation id='-1' changeset='#{changeset.id}'>
1008            <member type='way' role='some' ref='#{way.id}'/>
1009            <member type='node' role='some' ref='#{node.id}'/>
1010            <member type='relation' role='some' ref='#{relation.id}'/>
1011           </relation>
1012          </create>
1013         </osmChange>
1014       CHANGESET
1015
1016       # upload it
1017       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1018       assert_response :too_many_requests, "upload did not hit rate limit"
1019     end
1020
1021     ##
1022     # test initial size limit
1023     def test_upload_initial_size_limit
1024       # create a user
1025       user = create(:user)
1026
1027       # create a changeset that puts us near the initial size limit
1028       changeset = create(:changeset, :user => user,
1029                                      :min_lat => (-0.5 * GeoRecord::SCALE).round, :min_lon => (0.5 * GeoRecord::SCALE).round,
1030                                      :max_lat => (0.5 * GeoRecord::SCALE).round, :max_lon => (2.5 * GeoRecord::SCALE).round)
1031
1032       # create authentication header
1033       auth_header = bearer_authorization_header user
1034
1035       # simple diff to create a node
1036       diff = <<~CHANGESET
1037         <osmChange>
1038          <create>
1039           <node id='-1' lon='0.9' lat='2.9' changeset='#{changeset.id}'>
1040            <tag k='foo' v='bar'/>
1041            <tag k='baz' v='bat'/>
1042           </node>
1043          </create>
1044         </osmChange>
1045       CHANGESET
1046
1047       # upload it
1048       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1049       assert_response :payload_too_large, "upload did not hit size limit"
1050     end
1051
1052     ##
1053     # test size limit after one week
1054     def test_upload_week_size_limit
1055       # create a user
1056       user = create(:user)
1057
1058       # create a changeset to establish our initial edit time
1059       create(:changeset, :user => user, :created_at => Time.now.utc - 7.days)
1060
1061       # create a changeset that puts us near the initial size limit
1062       changeset = create(:changeset, :user => user, :bbox => [0.5, -0.5, 2.5, 0.5])
1063
1064       # create authentication header
1065       auth_header = bearer_authorization_header user
1066
1067       # simple diff to create a node way and relation using placeholders
1068       diff = <<~CHANGESET
1069         <osmChange>
1070          <create>
1071           <node id='-1' lon='35' lat='35' changeset='#{changeset.id}'>
1072            <tag k='foo' v='bar'/>
1073            <tag k='baz' v='bat'/>
1074           </node>
1075          </create>
1076         </osmChange>
1077       CHANGESET
1078
1079       # upload it
1080       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1081       assert_response :payload_too_large, "upload did not hit size limit"
1082     end
1083
1084     ##
1085     # when we make some simple changes we get the same changes back from the
1086     # diff download.
1087     def test_diff_download_simple
1088       node = create(:node)
1089
1090       ## First try with a non-public user, which should get a forbidden
1091       auth_header = bearer_authorization_header create(:user, :data_public => false)
1092
1093       # create a temporary changeset
1094       xml = "<osm><changeset>" \
1095             "<tag k='created_by' v='osm test suite checking changesets'/>" \
1096             "</changeset></osm>"
1097       post api_changesets_path, :params => xml, :headers => auth_header
1098       assert_response :forbidden
1099
1100       ## Now try with a normal user
1101       auth_header = bearer_authorization_header
1102
1103       # create a temporary changeset
1104       xml = "<osm><changeset>" \
1105             "<tag k='created_by' v='osm test suite checking changesets'/>" \
1106             "</changeset></osm>"
1107       post api_changesets_path, :params => xml, :headers => auth_header
1108       assert_response :success
1109       changeset_id = @response.body.to_i
1110
1111       # add a diff to it
1112       diff = <<~CHANGESET
1113         <osmChange>
1114          <modify>
1115           <node id='#{node.id}' lon='0.0' lat='0.0' changeset='#{changeset_id}' version='1'/>
1116           <node id='#{node.id}' lon='0.1' lat='0.0' changeset='#{changeset_id}' version='2'/>
1117           <node id='#{node.id}' lon='0.1' lat='0.1' changeset='#{changeset_id}' version='3'/>
1118           <node id='#{node.id}' lon='0.1' lat='0.2' changeset='#{changeset_id}' version='4'/>
1119           <node id='#{node.id}' lon='0.2' lat='0.2' changeset='#{changeset_id}' version='5'/>
1120           <node id='#{node.id}' lon='0.3' lat='0.2' changeset='#{changeset_id}' version='6'/>
1121           <node id='#{node.id}' lon='0.3' lat='0.3' changeset='#{changeset_id}' version='7'/>
1122           <node id='#{node.id}' lon='0.9' lat='0.9' changeset='#{changeset_id}' version='8'/>
1123          </modify>
1124         </osmChange>
1125       CHANGESET
1126
1127       # upload it
1128       post api_changeset_upload_path(changeset_id), :params => diff, :headers => auth_header
1129       assert_response :success,
1130                       "can't upload multiple versions of an element in a diff: #{@response.body}"
1131
1132       get api_changeset_download_path(changeset_id)
1133       assert_response :success
1134
1135       assert_select "osmChange", 1
1136       assert_select "osmChange>modify", 8
1137       assert_select "osmChange>modify>node", 8
1138     end
1139
1140     ##
1141     # culled this from josm to ensure that nothing in the way that josm
1142     # is formatting the request is causing it to fail.
1143     #
1144     # NOTE: the error turned out to be something else completely!
1145     def test_josm_upload
1146       auth_header = bearer_authorization_header
1147
1148       # create a temporary changeset
1149       xml = "<osm><changeset>" \
1150             "<tag k='created_by' v='osm test suite checking changesets'/>" \
1151             "</changeset></osm>"
1152       post api_changesets_path, :params => xml, :headers => auth_header
1153       assert_response :success
1154       changeset_id = @response.body.to_i
1155
1156       diff = <<~OSMFILE
1157         <osmChange version="0.6" generator="JOSM">
1158         <create version="0.6" generator="JOSM">
1159           <node id='-1' visible='true' changeset='#{changeset_id}' lat='51.49619982187321' lon='-0.18722061869438314' />
1160           <node id='-2' visible='true' changeset='#{changeset_id}' lat='51.496359883909605' lon='-0.18653093576241928' />
1161           <node id='-3' visible='true' changeset='#{changeset_id}' lat='51.49598132358285' lon='-0.18719613290981638' />
1162           <node id='-4' visible='true' changeset='#{changeset_id}' lat='51.4961591711078' lon='-0.18629015888084607' />
1163           <node id='-5' visible='true' changeset='#{changeset_id}' lat='51.49582126021711' lon='-0.18708186591517145' />
1164           <node id='-6' visible='true' changeset='#{changeset_id}' lat='51.49591018437858' lon='-0.1861432441734455' />
1165           <node id='-7' visible='true' changeset='#{changeset_id}' lat='51.49560784152179' lon='-0.18694719410005425' />
1166           <node id='-8' visible='true' changeset='#{changeset_id}' lat='51.49567389979617' lon='-0.1860289771788006' />
1167           <node id='-9' visible='true' changeset='#{changeset_id}' lat='51.49543761398892' lon='-0.186820684213126' />
1168           <way id='-10' action='modify' visible='true' changeset='#{changeset_id}'>
1169             <nd ref='-1' />
1170             <nd ref='-2' />
1171             <nd ref='-3' />
1172             <nd ref='-4' />
1173             <nd ref='-5' />
1174             <nd ref='-6' />
1175             <nd ref='-7' />
1176             <nd ref='-8' />
1177             <nd ref='-9' />
1178             <tag k='highway' v='residential' />
1179             <tag k='name' v='Foobar Street' />
1180           </way>
1181         </create>
1182         </osmChange>
1183       OSMFILE
1184
1185       # upload it
1186       post api_changeset_upload_path(changeset_id), :params => diff, :headers => auth_header
1187       assert_response :success,
1188                       "can't upload a diff from JOSM: #{@response.body}"
1189
1190       get api_changeset_download_path(changeset_id)
1191       assert_response :success
1192
1193       assert_select "osmChange", 1
1194       assert_select "osmChange>create>node", 9
1195       assert_select "osmChange>create>way", 1
1196       assert_select "osmChange>create>way>nd", 9
1197       assert_select "osmChange>create>way>tag", 2
1198     end
1199
1200     ##
1201     # when we make some complex changes we get the same changes back from the
1202     # diff download.
1203     def test_diff_download_complex
1204       node = create(:node)
1205       node2 = create(:node)
1206       way = create(:way)
1207       auth_header = bearer_authorization_header
1208
1209       # create a temporary changeset
1210       xml = "<osm><changeset>" \
1211             "<tag k='created_by' v='osm test suite checking changesets'/>" \
1212             "</changeset></osm>"
1213       post api_changesets_path, :params => xml, :headers => auth_header
1214       assert_response :success
1215       changeset_id = @response.body.to_i
1216
1217       # add a diff to it
1218       diff = <<~CHANGESET
1219         <osmChange>
1220          <delete>
1221           <node id='#{node.id}' lon='0.0' lat='0.0' changeset='#{changeset_id}' version='1'/>
1222          </delete>
1223          <create>
1224           <node id='-1' lon='0.9' lat='0.9' changeset='#{changeset_id}' version='0'/>
1225           <node id='-2' lon='0.8' lat='0.9' changeset='#{changeset_id}' version='0'/>
1226           <node id='-3' lon='0.7' lat='0.9' changeset='#{changeset_id}' version='0'/>
1227          </create>
1228          <modify>
1229           <node id='#{node2.id}' lon='2.0' lat='1.5' changeset='#{changeset_id}' version='1'/>
1230           <way id='#{way.id}' changeset='#{changeset_id}' version='1'>
1231            <nd ref='#{node2.id}'/>
1232            <nd ref='-1'/>
1233            <nd ref='-2'/>
1234            <nd ref='-3'/>
1235           </way>
1236          </modify>
1237         </osmChange>
1238       CHANGESET
1239
1240       # upload it
1241       post api_changeset_upload_path(changeset_id), :params => diff, :headers => auth_header
1242       assert_response :success,
1243                       "can't upload multiple versions of an element in a diff: #{@response.body}"
1244
1245       get api_changeset_download_path(changeset_id)
1246       assert_response :success
1247
1248       assert_select "osmChange", 1
1249       assert_select "osmChange>create", 3
1250       assert_select "osmChange>delete", 1
1251       assert_select "osmChange>modify", 2
1252       assert_select "osmChange>create>node", 3
1253       assert_select "osmChange>delete>node", 1
1254       assert_select "osmChange>modify>node", 1
1255       assert_select "osmChange>modify>way", 1
1256     end
1257
1258     ##
1259     # check that the bounding box of a changeset gets updated correctly
1260     # FIXME: This should really be moded to a integration test due to the with_controller
1261     def test_changeset_bbox
1262       way = create(:way)
1263       create(:way_node, :way => way, :node => create(:node, :lat => 0.3, :lon => 0.3))
1264
1265       auth_header = bearer_authorization_header
1266
1267       # create a new changeset
1268       xml = "<osm><changeset/></osm>"
1269       post api_changesets_path, :params => xml, :headers => auth_header
1270       assert_response :success, "Creating of changeset failed."
1271       changeset_id = @response.body.to_i
1272
1273       # add a single node to it
1274       with_controller(NodesController.new) do
1275         xml = "<osm><node lon='0.1' lat='0.2' changeset='#{changeset_id}'/></osm>"
1276         post api_nodes_path, :params => xml, :headers => auth_header
1277         assert_response :success, "Couldn't create node."
1278       end
1279
1280       # get the bounding box back from the changeset
1281       get api_changeset_path(changeset_id)
1282       assert_response :success, "Couldn't read back changeset."
1283       assert_select "osm>changeset[min_lon='0.1000000']", 1
1284       assert_select "osm>changeset[max_lon='0.1000000']", 1
1285       assert_select "osm>changeset[min_lat='0.2000000']", 1
1286       assert_select "osm>changeset[max_lat='0.2000000']", 1
1287
1288       # add another node to it
1289       with_controller(NodesController.new) do
1290         xml = "<osm><node lon='0.2' lat='0.1' changeset='#{changeset_id}'/></osm>"
1291         post api_nodes_path, :params => xml, :headers => auth_header
1292         assert_response :success, "Couldn't create second node."
1293       end
1294
1295       # get the bounding box back from the changeset
1296       get api_changeset_path(changeset_id)
1297       assert_response :success, "Couldn't read back changeset for the second time."
1298       assert_select "osm>changeset[min_lon='0.1000000']", 1
1299       assert_select "osm>changeset[max_lon='0.2000000']", 1
1300       assert_select "osm>changeset[min_lat='0.1000000']", 1
1301       assert_select "osm>changeset[max_lat='0.2000000']", 1
1302
1303       # add (delete) a way to it, which contains a point at (3,3)
1304       with_controller(WaysController.new) do
1305         xml = update_changeset(xml_for_way(way), changeset_id)
1306         delete api_way_path(way), :params => xml.to_s, :headers => auth_header
1307         assert_response :success, "Couldn't delete a way."
1308       end
1309
1310       # get the bounding box back from the changeset
1311       get api_changeset_path(changeset_id)
1312       assert_response :success, "Couldn't read back changeset for the third time."
1313       assert_select "osm>changeset[min_lon='0.1000000']", 1
1314       assert_select "osm>changeset[max_lon='0.3000000']", 1
1315       assert_select "osm>changeset[min_lat='0.1000000']", 1
1316       assert_select "osm>changeset[max_lat='0.3000000']", 1
1317     end
1318
1319     ##
1320     # check updating tags on a changeset
1321     def test_changeset_update
1322       private_user = create(:user, :data_public => false)
1323       private_changeset = create(:changeset, :user => private_user)
1324       user = create(:user)
1325       changeset = create(:changeset, :user => user)
1326
1327       ## First try with a non-public user
1328       new_changeset = create_changeset_xml(:user => private_user)
1329       new_tag = XML::Node.new "tag"
1330       new_tag["k"] = "tagtesting"
1331       new_tag["v"] = "valuetesting"
1332       new_changeset.find("//osm/changeset").first << new_tag
1333
1334       # try without any authorization
1335       put api_changeset_path(private_changeset), :params => new_changeset.to_s
1336       assert_response :unauthorized
1337
1338       # try with the wrong authorization
1339       auth_header = bearer_authorization_header
1340       put api_changeset_path(private_changeset), :params => new_changeset.to_s, :headers => auth_header
1341       assert_response :conflict
1342
1343       # now this should get an unauthorized
1344       auth_header = bearer_authorization_header private_user
1345       put api_changeset_path(private_changeset), :params => new_changeset.to_s, :headers => auth_header
1346       assert_require_public_data "user with their data non-public, shouldn't be able to edit their changeset"
1347
1348       ## Now try with the public user
1349       new_changeset = create_changeset_xml(:id => 1)
1350       new_tag = XML::Node.new "tag"
1351       new_tag["k"] = "tagtesting"
1352       new_tag["v"] = "valuetesting"
1353       new_changeset.find("//osm/changeset").first << new_tag
1354
1355       # try without any authorization
1356       put api_changeset_path(changeset), :params => new_changeset.to_s
1357       assert_response :unauthorized
1358
1359       # try with the wrong authorization
1360       auth_header = bearer_authorization_header
1361       put api_changeset_path(changeset), :params => new_changeset.to_s, :headers => auth_header
1362       assert_response :conflict
1363
1364       # now this should work...
1365       auth_header = bearer_authorization_header user
1366       put api_changeset_path(changeset), :params => new_changeset.to_s, :headers => auth_header
1367       assert_response :success
1368
1369       assert_select "osm>changeset[id='#{changeset.id}']", 1
1370       assert_select "osm>changeset>tag", 1
1371       assert_select "osm>changeset>tag[k='tagtesting'][v='valuetesting']", 1
1372     end
1373
1374     ##
1375     # check that a user different from the one who opened the changeset
1376     # can't modify it.
1377     def test_changeset_update_invalid
1378       auth_header = bearer_authorization_header
1379
1380       changeset = create(:changeset)
1381       new_changeset = create_changeset_xml(:user => changeset.user, :id => changeset.id)
1382       new_tag = XML::Node.new "tag"
1383       new_tag["k"] = "testing"
1384       new_tag["v"] = "testing"
1385       new_changeset.find("//osm/changeset").first << new_tag
1386
1387       put api_changeset_path(changeset), :params => new_changeset.to_s, :headers => auth_header
1388       assert_response :conflict
1389     end
1390
1391     ##
1392     # check that a changeset can contain a certain max number of changes.
1393     ## FIXME should be changed to an integration test due to the with_controller
1394     def test_changeset_limits
1395       user = create(:user)
1396       auth_header = bearer_authorization_header user
1397
1398       # create an old changeset to ensure we have the maximum rate limit
1399       create(:changeset, :user => user, :created_at => Time.now.utc - 28.days)
1400
1401       # open a new changeset
1402       xml = "<osm><changeset/></osm>"
1403       post api_changesets_path, :params => xml, :headers => auth_header
1404       assert_response :success, "can't create a new changeset"
1405       cs_id = @response.body.to_i
1406
1407       # start the counter just short of where the changeset should finish.
1408       offset = 10
1409       # alter the database to set the counter on the changeset directly,
1410       # otherwise it takes about 6 minutes to fill all of them.
1411       changeset = Changeset.find(cs_id)
1412       changeset.num_changes = Changeset::MAX_ELEMENTS - offset
1413       changeset.save!
1414
1415       with_controller(NodesController.new) do
1416         # create a new node
1417         xml = "<osm><node changeset='#{cs_id}' lat='0.0' lon='0.0'/></osm>"
1418         post api_nodes_path, :params => xml, :headers => auth_header
1419         assert_response :success, "can't create a new node"
1420         node_id = @response.body.to_i
1421
1422         get api_node_path(node_id)
1423         assert_response :success, "can't read back new node"
1424         node_doc = XML::Parser.string(@response.body).parse
1425         node_xml = node_doc.find("//osm/node").first
1426
1427         # loop until we fill the changeset with nodes
1428         offset.times do |i|
1429           node_xml["lat"] = rand.to_s
1430           node_xml["lon"] = rand.to_s
1431           node_xml["version"] = (i + 1).to_s
1432
1433           put api_node_path(node_id), :params => node_doc.to_s, :headers => auth_header
1434           assert_response :success, "attempt #{i} should have succeeded"
1435         end
1436
1437         # trying again should fail
1438         node_xml["lat"] = rand.to_s
1439         node_xml["lon"] = rand.to_s
1440         node_xml["version"] = offset.to_s
1441
1442         put api_node_path(node_id), :params => node_doc.to_s, :headers => auth_header
1443         assert_response :conflict, "final attempt should have failed"
1444       end
1445
1446       changeset = Changeset.find(cs_id)
1447       assert_equal Changeset::MAX_ELEMENTS + 1, changeset.num_changes
1448
1449       # check that the changeset is now closed as well
1450       assert_not(changeset.open?,
1451                  "changeset should have been auto-closed by exceeding " \
1452                  "element limit.")
1453     end
1454
1455     private
1456
1457     ##
1458     # check that the output consists of one specific changeset
1459     def assert_single_changeset(changeset, &)
1460       assert_dom "> changeset", 1 do
1461         assert_dom "> @id", changeset.id.to_s
1462         assert_dom "> @created_at", changeset.created_at.xmlschema
1463         if changeset.open?
1464           assert_dom "> @open", "true"
1465           assert_dom "> @closed_at", 0
1466         else
1467           assert_dom "> @open", "false"
1468           assert_dom "> @closed_at", changeset.closed_at.xmlschema
1469         end
1470         assert_dom "> @comments_count", changeset.comments.length.to_s
1471         assert_dom "> @changes_count", changeset.num_changes.to_s
1472         yield if block_given?
1473       end
1474     end
1475
1476     def assert_single_changeset_json(changeset, js)
1477       assert_equal changeset.id, js["changeset"]["id"]
1478       assert_equal changeset.created_at.xmlschema, js["changeset"]["created_at"]
1479       if changeset.open?
1480         assert js["changeset"]["open"]
1481         assert_nil js["changeset"]["closed_at"]
1482       else
1483         assert_not js["changeset"]["open"]
1484         assert_equal changeset.closed_at.xmlschema, js["changeset"]["closed_at"]
1485       end
1486       assert_equal changeset.comments.length, js["changeset"]["comments_count"]
1487       assert_equal changeset.num_changes, js["changeset"]["changes_count"]
1488     end
1489
1490     ##
1491     # check that certain changesets exist in the output in the specified order
1492     def assert_changesets_in_order(changesets)
1493       assert_select "osm>changeset", changesets.size
1494       changesets.each_with_index do |changeset, index|
1495         assert_select "osm>changeset:nth-child(#{index + 1})[id='#{changeset.id}']", 1
1496       end
1497     end
1498
1499     ##
1500     # update the changeset_id of a way element
1501     def update_changeset(xml, changeset_id)
1502       xml_attr_rewrite(xml, "changeset", changeset_id)
1503     end
1504
1505     ##
1506     # update an attribute in a way element
1507     def xml_attr_rewrite(xml, name, value)
1508       xml.find("//osm/way").first[name] = value.to_s
1509       xml
1510     end
1511
1512     ##
1513     # build XML for changesets
1514     def create_changeset_xml(user: nil, id: nil)
1515       root = XML::Document.new
1516       root.root = XML::Node.new "osm"
1517       cs = XML::Node.new "changeset"
1518       if user
1519         cs["user"] = user.display_name
1520         cs["uid"] = user.id.to_s
1521       end
1522       cs["id"] = id.to_s if id
1523       root.root << cs
1524       root
1525     end
1526   end
1527 end