test/controllers/api/changesets_controller_test.rb

   1 require "test_helper"
   2
   3 module Api
   4   class ChangesetsControllerTest < ActionDispatch::IntegrationTest
   5     ##
   6     # test all routes which lead to this controller
   7     def test_routes
   8       assert_routing(
   9         { :path => "/api/0.6/changesets", :method => :get },
  10         { :controller => "api/changesets", :action => "index" }
  11       )
  12       assert_routing(
  13         { :path => "/api/0.6/changesets.json", :method => :get },
  14         { :controller => "api/changesets", :action => "index", :format => "json" }
  15       )
  16       assert_routing(
  17         { :path => "/api/0.6/changesets", :method => :post },
  18         { :controller => "api/changesets", :action => "create" }
  19       )
  20       assert_routing(
  21         { :path => "/api/0.6/changeset/1", :method => :get },
  22         { :controller => "api/changesets", :action => "show", :id => "1" }
  23       )
  24       assert_routing(
  25         { :path => "/api/0.6/changeset/1.json", :method => :get },
  26         { :controller => "api/changesets", :action => "show", :id => "1", :format => "json" }
  27       )
  28       assert_routing(
  29         { :path => "/api/0.6/changeset/1", :method => :put },
  30         { :controller => "api/changesets", :action => "update", :id => "1" }
  31       )
  32
  33       assert_recognizes(
  34         { :controller => "api/changesets", :action => "create" },
  35         { :path => "/api/0.6/changeset/create", :method => :put }
  36       )
  37     end
  38
  39     ##
  40     # test the query functionality of changesets
  41     def test_index
  42       private_user = create(:user, :data_public => false)
  43       private_user_changeset = create(:changeset, :user => private_user)
  44       private_user_closed_changeset = create(:changeset, :closed, :user => private_user)
  45       user = create(:user)
  46       changeset = create(:changeset, :user => user)
  47       closed_changeset = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 1, 1, 0, 0, 0), :closed_at => Time.utc(2008, 1, 2, 0, 0, 0))
  48       changeset2 = create(:changeset, :bbox => [5, 5, 15, 15])
  49       changeset3 = create(:changeset, :bbox => [4.5, 4.5, 5, 5])
  50
  51       get api_changesets_path(:bbox => "-10,-10, 10, 10")
  52       assert_response :success, "can't get changesets in bbox"
  53       assert_changesets_in_order [changeset3, changeset2]
  54
  55       get api_changesets_path(:bbox => "4.5,4.5,4.6,4.6")
  56       assert_response :success, "can't get changesets in bbox"
  57       assert_changesets_in_order [changeset3]
  58
  59       # not found when looking for changesets of non-existing users
  60       get api_changesets_path(:user => User.maximum(:id) + 1)
  61       assert_response :not_found
  62       assert_equal "text/plain", @response.media_type
  63       get api_changesets_path(:display_name => " ")
  64       assert_response :not_found
  65       assert_equal "text/plain", @response.media_type
  66
  67       # can't get changesets of user 1 without authenticating
  68       get api_changesets_path(:user => private_user.id)
  69       assert_response :not_found, "shouldn't be able to get changesets by non-public user (ID)"
  70       get api_changesets_path(:display_name => private_user.display_name)
  71       assert_response :not_found, "shouldn't be able to get changesets by non-public user (name)"
  72
  73       # but this should work
  74       auth_header = bearer_authorization_header private_user
  75       get api_changesets_path(:user => private_user.id), :headers => auth_header
  76       assert_response :success, "can't get changesets by user ID"
  77       assert_changesets_in_order [private_user_changeset, private_user_closed_changeset]
  78
  79       get api_changesets_path(:display_name => private_user.display_name), :headers => auth_header
  80       assert_response :success, "can't get changesets by user name"
  81       assert_changesets_in_order [private_user_changeset, private_user_closed_changeset]
  82
  83       # test json endpoint
  84       get api_changesets_path(:display_name => private_user.display_name), :headers => auth_header, :params => { :format => "json" }
  85       assert_response :success, "can't get changesets by user name"
  86
  87       js = ActiveSupport::JSON.decode(@response.body)
  88       assert_not_nil js
  89
  90       assert_equal Settings.api_version, js["version"]
  91       assert_equal Settings.generator, js["generator"]
  92       assert_equal 2, js["changesets"].count
  93
  94       # check that the correct error is given when we provide both UID and name
  95       get api_changesets_path(:user => private_user.id,
  96                               :display_name => private_user.display_name), :headers => auth_header
  97       assert_response :bad_request, "should be a bad request to have both ID and name specified"
  98
  99       get api_changesets_path(:user => private_user.id, :open => true), :headers => auth_header
 100       assert_response :success, "can't get changesets by user and open"
 101       assert_changesets_in_order [private_user_changeset]
 102
 103       get api_changesets_path(:time => "2007-12-31"), :headers => auth_header
 104       assert_response :success, "can't get changesets by time-since"
 105       assert_changesets_in_order [changeset3, changeset2, changeset, private_user_changeset, private_user_closed_changeset, closed_changeset]
 106
 107       get api_changesets_path(:time => "2008-01-01T12:34Z"), :headers => auth_header
 108       assert_response :success, "can't get changesets by time-since with hour"
 109       assert_changesets_in_order [changeset3, changeset2, changeset, private_user_changeset, private_user_closed_changeset, closed_changeset]
 110
 111       get api_changesets_path(:time => "2007-12-31T23:59Z,2008-01-02T00:01Z"), :headers => auth_header
 112       assert_response :success, "can't get changesets by time-range"
 113       assert_changesets_in_order [closed_changeset]
 114
 115       get api_changesets_path(:open => "true"), :headers => auth_header
 116       assert_response :success, "can't get changesets by open-ness"
 117       assert_changesets_in_order [changeset3, changeset2, changeset, private_user_changeset]
 118
 119       get api_changesets_path(:closed => "true"), :headers => auth_header
 120       assert_response :success, "can't get changesets by closed-ness"
 121       assert_changesets_in_order [private_user_closed_changeset, closed_changeset]
 122
 123       get api_changesets_path(:closed => "true", :user => private_user.id), :headers => auth_header
 124       assert_response :success, "can't get changesets by closed-ness and user"
 125       assert_changesets_in_order [private_user_closed_changeset]
 126
 127       get api_changesets_path(:closed => "true", :user => user.id), :headers => auth_header
 128       assert_response :success, "can't get changesets by closed-ness and user"
 129       assert_changesets_in_order [closed_changeset]
 130
 131       get api_changesets_path(:changesets => "#{private_user_changeset.id},#{changeset.id},#{closed_changeset.id}"), :headers => auth_header
 132       assert_response :success, "can't get changesets by id (as comma-separated string)"
 133       assert_changesets_in_order [changeset, private_user_changeset, closed_changeset]
 134
 135       get api_changesets_path(:changesets => ""), :headers => auth_header
 136       assert_response :bad_request, "should be a bad request since changesets is empty"
 137     end
 138
 139     ##
 140     # test the query functionality of changesets with the limit parameter
 141     def test_index_limit
 142       user = create(:user)
 143       changeset1 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 1, 1, 0, 0, 0), :closed_at => Time.utc(2008, 1, 2, 0, 0, 0))
 144       changeset2 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 2, 1, 0, 0, 0), :closed_at => Time.utc(2008, 2, 2, 0, 0, 0))
 145       changeset3 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 3, 1, 0, 0, 0), :closed_at => Time.utc(2008, 3, 2, 0, 0, 0))
 146       changeset4 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 4, 1, 0, 0, 0), :closed_at => Time.utc(2008, 4, 2, 0, 0, 0))
 147       changeset5 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 5, 1, 0, 0, 0), :closed_at => Time.utc(2008, 5, 2, 0, 0, 0))
 148
 149       get api_changesets_path
 150       assert_response :success
 151       assert_changesets_in_order [changeset5, changeset4, changeset3, changeset2, changeset1]
 152
 153       get api_changesets_path(:limit => "3")
 154       assert_response :success
 155       assert_changesets_in_order [changeset5, changeset4, changeset3]
 156
 157       get api_changesets_path(:limit => "0")
 158       assert_response :bad_request
 159
 160       get api_changesets_path(:limit => Settings.max_changeset_query_limit)
 161       assert_response :success
 162       assert_changesets_in_order [changeset5, changeset4, changeset3, changeset2, changeset1]
 163
 164       get api_changesets_path(:limit => Settings.max_changeset_query_limit + 1)
 165       assert_response :bad_request
 166     end
 167
 168     ##
 169     # test the query functionality of sequential changesets with order and time parameters
 170     def test_index_order
 171       user = create(:user)
 172       changeset1 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 1, 1, 0, 0, 0), :closed_at => Time.utc(2008, 1, 2, 0, 0, 0))
 173       changeset2 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 2, 1, 0, 0, 0), :closed_at => Time.utc(2008, 2, 2, 0, 0, 0))
 174       changeset3 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 3, 1, 0, 0, 0), :closed_at => Time.utc(2008, 3, 2, 0, 0, 0))
 175       changeset4 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 4, 1, 0, 0, 0), :closed_at => Time.utc(2008, 4, 2, 0, 0, 0))
 176       changeset5 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 5, 1, 0, 0, 0), :closed_at => Time.utc(2008, 5, 2, 0, 0, 0))
 177       changeset6 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2008, 6, 1, 0, 0, 0), :closed_at => Time.utc(2008, 6, 2, 0, 0, 0))
 178
 179       get api_changesets_path
 180       assert_response :success
 181       assert_changesets_in_order [changeset6, changeset5, changeset4, changeset3, changeset2, changeset1]
 182
 183       get api_changesets_path(:order => "oldest")
 184       assert_response :success
 185       assert_changesets_in_order [changeset1, changeset2, changeset3, changeset4, changeset5, changeset6]
 186
 187       [
 188         # lower time bound at the opening time of a changeset
 189         ["2008-02-01T00:00:00Z", "2008-05-15T00:00:00Z", [changeset5, changeset4, changeset3, changeset2], [changeset5, changeset4, changeset3, changeset2]],
 190         # lower time bound in the middle of a changeset
 191         ["2008-02-01T12:00:00Z", "2008-05-15T00:00:00Z", [changeset5, changeset4, changeset3, changeset2], [changeset5, changeset4, changeset3]],
 192         # lower time bound at the closing time of a changeset
 193         ["2008-02-02T00:00:00Z", "2008-05-15T00:00:00Z", [changeset5, changeset4, changeset3, changeset2], [changeset5, changeset4, changeset3]],
 194         # lower time bound after the closing time of a changeset
 195         ["2008-02-02T00:00:01Z", "2008-05-15T00:00:00Z", [changeset5, changeset4, changeset3], [changeset5, changeset4, changeset3]],
 196         # upper time bound in the middle of a changeset
 197         ["2007-09-09T12:00:00Z", "2008-04-01T12:00:00Z", [changeset4, changeset3, changeset2, changeset1], [changeset4, changeset3, changeset2, changeset1]],
 198         # empty range
 199         ["2009-02-02T00:00:01Z", "2018-05-15T00:00:00Z", [], []]
 200       ].each do |from, to, interval_changesets, point_changesets|
 201         get api_changesets_path(:time => "#{from},#{to}")
 202         assert_response :success
 203         assert_changesets_in_order interval_changesets
 204
 205         get api_changesets_path(:from => from, :to => to)
 206         assert_response :success
 207         assert_changesets_in_order point_changesets
 208
 209         get api_changesets_path(:from => from, :to => to, :order => "oldest")
 210         assert_response :success
 211         assert_changesets_in_order point_changesets.reverse
 212       end
 213     end
 214
 215     ##
 216     # test the query functionality of overlapping changesets with order and time parameters
 217     def test_index_order_overlapping
 218       user = create(:user)
 219       changeset1 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2015, 6, 4, 17, 0, 0), :closed_at => Time.utc(2015, 6, 4, 17, 0, 0))
 220       changeset2 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2015, 6, 4, 16, 0, 0), :closed_at => Time.utc(2015, 6, 4, 18, 0, 0))
 221       changeset3 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2015, 6, 4, 14, 0, 0), :closed_at => Time.utc(2015, 6, 4, 20, 0, 0))
 222       changeset4 = create(:changeset, :closed, :user => user, :created_at => Time.utc(2015, 6, 3, 23, 0, 0), :closed_at => Time.utc(2015, 6, 4, 23, 0, 0))
 223       create(:changeset, :closed, :user => user, :created_at => Time.utc(2015, 6, 2, 23, 0, 0), :closed_at => Time.utc(2015, 6, 3, 23, 0, 0))
 224
 225       get api_changesets_path(:time => "2015-06-04T00:00:00Z")
 226       assert_response :success
 227       assert_changesets_in_order [changeset1, changeset2, changeset3, changeset4]
 228
 229       get api_changesets_path(:from => "2015-06-04T00:00:00Z")
 230       assert_response :success
 231       assert_changesets_in_order [changeset1, changeset2, changeset3]
 232
 233       get api_changesets_path(:from => "2015-06-04T00:00:00Z", :order => "oldest")
 234       assert_response :success
 235       assert_changesets_in_order [changeset3, changeset2, changeset1]
 236
 237       get api_changesets_path(:time => "2015-06-04T16:00:00Z,2015-06-04T17:30:00Z")
 238       assert_response :success
 239       assert_changesets_in_order [changeset1, changeset2, changeset3, changeset4]
 240
 241       get api_changesets_path(:from => "2015-06-04T16:00:00Z", :to => "2015-06-04T17:30:00Z")
 242       assert_response :success
 243       assert_changesets_in_order [changeset1, changeset2]
 244
 245       get api_changesets_path(:from => "2015-06-04T16:00:00Z", :to => "2015-06-04T17:30:00Z", :order => "oldest")
 246       assert_response :success
 247       assert_changesets_in_order [changeset2, changeset1]
 248     end
 249
 250     ##
 251     # check that errors are returned if garbage is inserted
 252     # into query strings
 253     def test_index_invalid
 254       ["abracadabra!",
 255        "1,2,3,F",
 256        ";drop table users;"].each do |bbox|
 257         get api_changesets_path(:bbox => bbox)
 258         assert_response :bad_request, "'#{bbox}' isn't a bbox"
 259       end
 260
 261       ["now()",
 262        "00-00-00",
 263        ";drop table users;",
 264        ",",
 265        "-,-"].each do |time|
 266         get api_changesets_path(:time => time)
 267         assert_response :bad_request, "'#{time}' isn't a valid time range"
 268       end
 269
 270       ["me",
 271        "foobar",
 272        "-1",
 273        "0"].each do |uid|
 274         get api_changesets_path(:user => uid)
 275         assert_response :bad_request, "'#{uid}' isn't a valid user ID"
 276       end
 277
 278       get api_changesets_path(:order => "oldest", :time => "2008-01-01T00:00Z,2018-01-01T00:00Z")
 279       assert_response :bad_request, "cannot use order=oldest with time"
 280     end
 281
 282     # -----------------------
 283     # Test simple changeset creation
 284     # -----------------------
 285
 286     def test_create
 287       auth_header = bearer_authorization_header create(:user, :data_public => false)
 288       # Create the first user's changeset
 289       xml = "<osm><changeset>" \
 290             "<tag k='created_by' v='osm test suite checking changesets'/>" \
 291             "</changeset></osm>"
 292       post api_changesets_path, :params => xml, :headers => auth_header
 293       assert_require_public_data
 294
 295       auth_header = bearer_authorization_header
 296       # Create the first user's changeset
 297       xml = "<osm><changeset>" \
 298             "<tag k='created_by' v='osm test suite checking changesets'/>" \
 299             "</changeset></osm>"
 300       post api_changesets_path, :params => xml, :headers => auth_header
 301
 302       assert_response :success, "Creation of changeset did not return success status"
 303       newid = @response.body.to_i
 304
 305       # check end time, should be an hour ahead of creation time
 306       cs = Changeset.find(newid)
 307       duration = cs.closed_at - cs.created_at
 308       # the difference can either be a rational, or a floating point number
 309       # of seconds, depending on the code path taken :-(
 310       if duration.instance_of?(Rational)
 311         assert_equal Rational(1, 24), duration, "initial idle timeout should be an hour (#{cs.created_at} -> #{cs.closed_at})"
 312       else
 313         # must be number of seconds...
 314         assert_equal 3600, duration.round, "initial idle timeout should be an hour (#{cs.created_at} -> #{cs.closed_at})"
 315       end
 316
 317       # checks if uploader was subscribed
 318       assert_equal 1, cs.subscribers.length
 319     end
 320
 321     def test_create_invalid
 322       auth_header = bearer_authorization_header create(:user, :data_public => false)
 323       xml = "<osm><changeset></osm>"
 324       post api_changesets_path, :params => xml, :headers => auth_header
 325       assert_require_public_data
 326
 327       ## Try the public user
 328       auth_header = bearer_authorization_header
 329       xml = "<osm><changeset></osm>"
 330       post api_changesets_path, :params => xml, :headers => auth_header
 331       assert_response :bad_request, "creating a invalid changeset should fail"
 332     end
 333
 334     def test_create_invalid_no_content
 335       ## First check with no auth
 336       post api_changesets_path
 337       assert_response :unauthorized, "shouldn't be able to create a changeset with no auth"
 338
 339       ## Now try to with a non-public user
 340       auth_header = bearer_authorization_header create(:user, :data_public => false)
 341       post api_changesets_path, :headers => auth_header
 342       assert_require_public_data
 343
 344       ## Try an inactive user
 345       auth_header = bearer_authorization_header create(:user, :pending)
 346       post api_changesets_path, :headers => auth_header
 347       assert_inactive_user
 348
 349       ## Now try to use a normal user
 350       auth_header = bearer_authorization_header
 351       post api_changesets_path, :headers => auth_header
 352       assert_response :bad_request, "creating a changeset with no content should fail"
 353     end
 354
 355     def test_create_wrong_method
 356       auth_header = bearer_authorization_header
 357
 358       put api_changesets_path, :headers => auth_header
 359       assert_response :not_found
 360       assert_template "rescues/routing_error"
 361     end
 362
 363     def test_create_legacy_path
 364       auth_header = bearer_authorization_header
 365       xml = "<osm><changeset></changeset></osm>"
 366
 367       assert_difference "Changeset.count", 1 do
 368         put "/api/0.6/changeset/create", :params => xml, :headers => auth_header
 369       end
 370
 371       assert_response :success, "Creation of changeset did not return success status"
 372       assert_equal Changeset.last.id, @response.body.to_i
 373     end
 374
 375     ##
 376     # check that the changeset can be shown and returns the correct
 377     # document structure.
 378     def test_show
 379       changeset = create(:changeset)
 380
 381       get api_changeset_path(changeset)
 382       assert_response :success, "cannot get first changeset"
 383
 384       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
 385       assert_single_changeset changeset do
 386         assert_dom "> discussion", 0
 387       end
 388
 389       get api_changeset_path(changeset, :include_discussion => true)
 390       assert_response :success, "cannot get first changeset with comments"
 391
 392       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
 393       assert_single_changeset changeset do
 394         assert_dom "> discussion", 1
 395         assert_dom "> discussion > comment", 0
 396       end
 397     end
 398
 399     def test_show_comments
 400       # all comments visible
 401       changeset = create(:changeset, :closed)
 402       comment1, comment2, comment3 = create_list(:changeset_comment, 3, :changeset_id => changeset.id)
 403
 404       get api_changeset_path(changeset, :include_discussion => true)
 405       assert_response :success, "cannot get closed changeset with comments"
 406
 407       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1 do
 408         assert_single_changeset changeset do
 409           assert_dom "> discussion", 1 do
 410             assert_dom "> comment", 3 do |dom_comments|
 411               assert_dom dom_comments[0], "> @id", comment1.id.to_s
 412               assert_dom dom_comments[0], "> @visible", "true"
 413               assert_dom dom_comments[1], "> @id", comment2.id.to_s
 414               assert_dom dom_comments[1], "> @visible", "true"
 415               assert_dom dom_comments[2], "> @id", comment3.id.to_s
 416               assert_dom dom_comments[2], "> @visible", "true"
 417             end
 418           end
 419         end
 420       end
 421
 422       # one hidden comment not included because not asked for
 423       comment2.update(:visible => false)
 424       changeset.reload
 425
 426       get api_changeset_path(changeset, :include_discussion => true)
 427       assert_response :success, "cannot get closed changeset with comments"
 428
 429       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
 430       assert_single_changeset changeset do
 431         assert_dom "> discussion", 1 do
 432           assert_dom "> comment", 2 do |dom_comments|
 433             assert_dom dom_comments[0], "> @id", comment1.id.to_s
 434             assert_dom dom_comments[0], "> @visible", "true"
 435             assert_dom dom_comments[1], "> @id", comment3.id.to_s
 436             assert_dom dom_comments[1], "> @visible", "true"
 437           end
 438         end
 439       end
 440
 441       # one hidden comment not included because no permissions
 442       get api_changeset_path(changeset, :include_discussion => true, :show_hidden_comments => true)
 443       assert_response :success, "cannot get closed changeset with comments"
 444
 445       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
 446       assert_single_changeset changeset do
 447         assert_dom "> discussion", 1 do
 448           assert_dom "> comment", 2 do |dom_comments|
 449             assert_dom dom_comments[0], "> @id", comment1.id.to_s
 450             assert_dom dom_comments[0], "> @visible", "true"
 451             # maybe will show an empty comment element with visible=false in the future
 452             assert_dom dom_comments[1], "> @id", comment3.id.to_s
 453             assert_dom dom_comments[1], "> @visible", "true"
 454           end
 455         end
 456       end
 457
 458       # one hidden comment shown to moderators
 459       moderator_user = create(:moderator_user)
 460       auth_header = bearer_authorization_header moderator_user
 461       get api_changeset_path(changeset, :include_discussion => true, :show_hidden_comments => true), :headers => auth_header
 462       assert_response :success, "cannot get closed changeset with comments"
 463
 464       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
 465       assert_single_changeset changeset do
 466         assert_dom "> discussion", 1 do
 467           assert_dom "> comment", 3 do |dom_comments|
 468             assert_dom dom_comments[0], "> @id", comment1.id.to_s
 469             assert_dom dom_comments[0], "> @visible", "true"
 470             assert_dom dom_comments[1], "> @id", comment2.id.to_s
 471             assert_dom dom_comments[1], "> @visible", "false"
 472             assert_dom dom_comments[2], "> @id", comment3.id.to_s
 473             assert_dom dom_comments[2], "> @visible", "true"
 474           end
 475         end
 476       end
 477     end
 478
 479     def test_show_tags
 480       changeset = create(:changeset, :closed)
 481       create(:changeset_tag, :changeset => changeset, :k => "created_by", :v => "JOSM/1.5 (18364)")
 482       create(:changeset_tag, :changeset => changeset, :k => "comment", :v => "changeset comment")
 483
 484       get api_changeset_path(changeset)
 485
 486       assert_response :success
 487       assert_dom "osm[version='#{Settings.api_version}'][generator='#{Settings.generator}']", 1
 488       assert_single_changeset changeset do
 489         assert_dom "> tag", 2
 490         assert_dom "> tag[k='created_by'][v='JOSM/1.5 (18364)']", 1
 491         assert_dom "> tag[k='comment'][v='changeset comment']", 1
 492       end
 493     end
 494
 495     def test_show_json
 496       changeset = create(:changeset)
 497
 498       get api_changeset_path(changeset, :format => "json")
 499       assert_response :success, "cannot get first changeset"
 500
 501       js = ActiveSupport::JSON.decode(@response.body)
 502       assert_not_nil js
 503
 504       assert_equal Settings.api_version, js["version"]
 505       assert_equal Settings.generator, js["generator"]
 506       assert_single_changeset_json changeset, js
 507       assert_nil js["changeset"]["tags"]
 508       assert_nil js["changeset"]["comments"]
 509       assert_equal changeset.user.id, js["changeset"]["uid"]
 510       assert_equal changeset.user.display_name, js["changeset"]["user"]
 511
 512       get api_changeset_path(changeset, :format => "json", :include_discussion => true)
 513       assert_response :success, "cannot get first changeset with comments"
 514
 515       js = ActiveSupport::JSON.decode(@response.body)
 516       assert_not_nil js
 517       assert_equal Settings.api_version, js["version"]
 518       assert_equal Settings.generator, js["generator"]
 519       assert_single_changeset_json changeset, js
 520       assert_nil js["changeset"]["tags"]
 521       assert_nil js["changeset"]["min_lat"]
 522       assert_nil js["changeset"]["min_lon"]
 523       assert_nil js["changeset"]["max_lat"]
 524       assert_nil js["changeset"]["max_lon"]
 525       assert_equal 0, js["changeset"]["comments"].count
 526     end
 527
 528     def test_show_comments_json
 529       # all comments visible
 530       changeset = create(:changeset, :closed)
 531       comment0, comment1, comment2 = create_list(:changeset_comment, 3, :changeset_id => changeset.id)
 532
 533       get api_changeset_path(changeset, :format => "json", :include_discussion => true)
 534       assert_response :success, "cannot get closed changeset with comments"
 535
 536       js = ActiveSupport::JSON.decode(@response.body)
 537       assert_not_nil js
 538       assert_equal Settings.api_version, js["version"]
 539       assert_equal Settings.generator, js["generator"]
 540       assert_single_changeset_json changeset, js
 541       assert_equal 3, js["changeset"]["comments"].count
 542       assert_equal comment0.id, js["changeset"]["comments"][0]["id"]
 543       assert js["changeset"]["comments"][0]["visible"]
 544       assert_equal comment1.id, js["changeset"]["comments"][1]["id"]
 545       assert js["changeset"]["comments"][1]["visible"]
 546       assert_equal comment2.id, js["changeset"]["comments"][2]["id"]
 547       assert js["changeset"]["comments"][2]["visible"]
 548
 549       # one hidden comment not included because not asked for
 550       comment1.update(:visible => false)
 551       changeset.reload
 552
 553       get api_changeset_path(changeset, :format => "json", :include_discussion => true)
 554       assert_response :success, "cannot get closed changeset with comments"
 555
 556       js = ActiveSupport::JSON.decode(@response.body)
 557       assert_not_nil js
 558       assert_equal Settings.api_version, js["version"]
 559       assert_equal Settings.generator, js["generator"]
 560       assert_single_changeset_json changeset, js
 561       assert_equal 2, js["changeset"]["comments"].count
 562       assert_equal comment0.id, js["changeset"]["comments"][0]["id"]
 563       assert js["changeset"]["comments"][0]["visible"]
 564       assert_equal comment2.id, js["changeset"]["comments"][1]["id"]
 565       assert js["changeset"]["comments"][1]["visible"]
 566
 567       # one hidden comment not included because no permissions
 568       get api_changeset_path(changeset, :format => "json", :include_discussion => true, :show_hidden_comments => true)
 569       assert_response :success, "cannot get closed changeset with comments"
 570
 571       js = ActiveSupport::JSON.decode(@response.body)
 572       assert_not_nil js
 573       assert_equal Settings.api_version, js["version"]
 574       assert_equal Settings.generator, js["generator"]
 575       assert_single_changeset_json changeset, js
 576       assert_equal 2, js["changeset"]["comments"].count
 577       assert_equal comment0.id, js["changeset"]["comments"][0]["id"]
 578       assert js["changeset"]["comments"][0]["visible"]
 579       # maybe will show an empty comment element with visible=false in the future
 580       assert_equal comment2.id, js["changeset"]["comments"][1]["id"]
 581       assert js["changeset"]["comments"][1]["visible"]
 582
 583       # one hidden comment shown to moderators
 584       moderator_user = create(:moderator_user)
 585       auth_header = bearer_authorization_header moderator_user
 586       get api_changeset_path(changeset, :format => "json", :include_discussion => true, :show_hidden_comments => true), :headers => auth_header
 587       assert_response :success, "cannot get closed changeset with comments"
 588
 589       js = ActiveSupport::JSON.decode(@response.body)
 590       assert_not_nil js
 591       assert_equal Settings.api_version, js["version"]
 592       assert_equal Settings.generator, js["generator"]
 593       assert_single_changeset_json changeset, js
 594       assert_equal 3, js["changeset"]["comments"].count
 595       assert_equal comment0.id, js["changeset"]["comments"][0]["id"]
 596       assert js["changeset"]["comments"][0]["visible"]
 597       assert_equal comment1.id, js["changeset"]["comments"][1]["id"]
 598       assert_not js["changeset"]["comments"][1]["visible"]
 599       assert_equal comment2.id, js["changeset"]["comments"][2]["id"]
 600       assert js["changeset"]["comments"][2]["visible"]
 601     end
 602
 603     def test_show_tags_json
 604       changeset = create(:changeset, :closed)
 605       create(:changeset_tag, :changeset => changeset, :k => "created_by", :v => "JOSM/1.5 (18364)")
 606       create(:changeset_tag, :changeset => changeset, :k => "comment", :v => "changeset comment")
 607
 608       get api_changeset_path(changeset, :format => "json")
 609
 610       assert_response :success
 611       js = ActiveSupport::JSON.decode(@response.body)
 612       assert_not_nil js
 613       assert_equal Settings.api_version, js["version"]
 614       assert_equal Settings.generator, js["generator"]
 615       assert_single_changeset_json changeset, js
 616       assert_equal 2, js["changeset"]["tags"].count
 617       assert_equal "JOSM/1.5 (18364)", js["changeset"]["tags"]["created_by"]
 618       assert_equal "changeset comment", js["changeset"]["tags"]["comment"]
 619     end
 620
 621     def test_show_bbox_json
 622       changeset = create(:changeset, :bbox => [5, -5, 12, 15])
 623
 624       get api_changeset_path(changeset, :format => "json")
 625       assert_response :success, "cannot get first changeset"
 626
 627       js = ActiveSupport::JSON.decode(@response.body)
 628       assert_not_nil js
 629       assert_equal(-5, js["changeset"]["min_lat"])
 630       assert_equal 5, js["changeset"]["min_lon"]
 631       assert_equal 15, js["changeset"]["max_lat"]
 632       assert_equal 12, js["changeset"]["max_lon"]
 633     end
 634
 635     ##
 636     # check that a changeset that doesn't exist returns an appropriate message
 637     def test_show_not_found
 638       [0, -32, 233455644, "afg", "213"].each do |id|
 639         get api_changeset_path(id)
 640         assert_response :not_found, "should get a not found"
 641       rescue ActionController::UrlGenerationError => e
 642         assert_match(/No route matches/, e.to_s)
 643       end
 644     end
 645
 646     def test_repeated_changeset_create
 647       3.times do
 648         auth_header = bearer_authorization_header
 649
 650         # create a temporary changeset
 651         xml = "<osm><changeset>" \
 652               "<tag k='created_by' v='osm test suite checking changesets'/>" \
 653               "</changeset></osm>"
 654         assert_difference "Changeset.count", 1 do
 655           post api_changesets_path, :params => xml, :headers => auth_header
 656         end
 657         assert_response :success
 658       end
 659     end
 660
 661     def test_upload_large_changeset
 662       user = create(:user)
 663       auth_header = bearer_authorization_header user
 664
 665       # create an old changeset to ensure we have the maximum rate limit
 666       create(:changeset, :user => user, :created_at => Time.now.utc - 28.days)
 667
 668       # create a changeset
 669       post api_changesets_path, :params => "<osm><changeset/></osm>", :headers => auth_header
 670       assert_response :success, "Should be able to create a changeset: #{@response.body}"
 671       changeset_id = @response.body.to_i
 672
 673       # upload some widely-spaced nodes, spiralling positive and negative
 674       diff = <<~CHANGESET
 675         <osmChange>
 676          <create>
 677           <node id='-1' lon='-20' lat='-10' changeset='#{changeset_id}'/>
 678           <node id='-10' lon='20'  lat='10' changeset='#{changeset_id}'/>
 679           <node id='-2' lon='-40' lat='-20' changeset='#{changeset_id}'/>
 680           <node id='-11' lon='40'  lat='20' changeset='#{changeset_id}'/>
 681           <node id='-3' lon='-60' lat='-30' changeset='#{changeset_id}'/>
 682           <node id='-12' lon='60'  lat='30' changeset='#{changeset_id}'/>
 683           <node id='-4' lon='-80' lat='-40' changeset='#{changeset_id}'/>
 684           <node id='-13' lon='80'  lat='40' changeset='#{changeset_id}'/>
 685           <node id='-5' lon='-100' lat='-50' changeset='#{changeset_id}'/>
 686           <node id='-14' lon='100'  lat='50' changeset='#{changeset_id}'/>
 687           <node id='-6' lon='-120' lat='-60' changeset='#{changeset_id}'/>
 688           <node id='-15' lon='120'  lat='60' changeset='#{changeset_id}'/>
 689           <node id='-7' lon='-140' lat='-70' changeset='#{changeset_id}'/>
 690           <node id='-16' lon='140'  lat='70' changeset='#{changeset_id}'/>
 691           <node id='-8' lon='-160' lat='-80' changeset='#{changeset_id}'/>
 692           <node id='-17' lon='160'  lat='80' changeset='#{changeset_id}'/>
 693           <node id='-9' lon='-179.9' lat='-89.9' changeset='#{changeset_id}'/>
 694           <node id='-18' lon='179.9'  lat='89.9' changeset='#{changeset_id}'/>
 695          </create>
 696         </osmChange>
 697       CHANGESET
 698
 699       # upload it, which used to cause an error like "PGError: ERROR:
 700       # integer out of range" (bug #2152). but shouldn't any more.
 701       post api_changeset_upload_path(changeset_id), :params => diff, :headers => auth_header
 702       assert_response :success,
 703                       "can't upload a spatially-large diff to changeset: #{@response.body}"
 704
 705       # check that the changeset bbox is within bounds
 706       cs = Changeset.find(changeset_id)
 707       assert_operator cs.min_lon, :>=, -180 * GeoRecord::SCALE, "Minimum longitude (#{cs.min_lon / GeoRecord::SCALE}) should be >= -180 to be valid."
 708       assert_operator cs.max_lon, :<=, 180 * GeoRecord::SCALE, "Maximum longitude (#{cs.max_lon / GeoRecord::SCALE}) should be <= 180 to be valid."
 709       assert_operator cs.min_lat, :>=, -90 * GeoRecord::SCALE, "Minimum latitude (#{cs.min_lat / GeoRecord::SCALE}) should be >= -90 to be valid."
 710       assert_operator cs.max_lat, :<=, 90 * GeoRecord::SCALE, "Maximum latitude (#{cs.max_lat / GeoRecord::SCALE}) should be <= 90 to be valid."
 711     end
 712
 713     ##
 714     # test what happens if a diff is uploaded containing only a node
 715     # move.
 716     def test_upload_node_move
 717       auth_header = bearer_authorization_header
 718
 719       xml = "<osm><changeset>" \
 720             "<tag k='created_by' v='osm test suite checking changesets'/>" \
 721             "</changeset></osm>"
 722       post api_changesets_path, :params => xml, :headers => auth_header
 723       assert_response :success
 724       changeset_id = @response.body.to_i
 725
 726       old_node = create(:node, :lat => 1, :lon => 1)
 727
 728       diff = XML::Document.new
 729       diff.root = XML::Node.new "osmChange"
 730       modify = XML::Node.new "modify"
 731       xml_old_node = xml_node_for_node(old_node)
 732       xml_old_node["lat"] = 2.0.to_s
 733       xml_old_node["lon"] = 2.0.to_s
 734       xml_old_node["changeset"] = changeset_id.to_s
 735       modify << xml_old_node
 736       diff.root << modify
 737
 738       # upload it
 739       post api_changeset_upload_path(changeset_id), :params => diff.to_s, :headers => auth_header
 740       assert_response :success,
 741                       "diff should have uploaded OK"
 742
 743       # check the bbox
 744       changeset = Changeset.find(changeset_id)
 745       assert_equal 1 * GeoRecord::SCALE, changeset.min_lon, "min_lon should be 1 degree"
 746       assert_equal 2 * GeoRecord::SCALE, changeset.max_lon, "max_lon should be 2 degrees"
 747       assert_equal 1 * GeoRecord::SCALE, changeset.min_lat, "min_lat should be 1 degree"
 748       assert_equal 2 * GeoRecord::SCALE, changeset.max_lat, "max_lat should be 2 degrees"
 749     end
 750
 751     ##
 752     # test what happens if a diff is uploaded adding a node to a way.
 753     def test_upload_way_extend
 754       auth_header = bearer_authorization_header
 755
 756       xml = "<osm><changeset>" \
 757             "<tag k='created_by' v='osm test suite checking changesets'/>" \
 758             "</changeset></osm>"
 759       post api_changesets_path, :params => xml, :headers => auth_header
 760       assert_response :success
 761       changeset_id = @response.body.to_i
 762
 763       old_way = create(:way)
 764       create(:way_node, :way => old_way, :node => create(:node, :lat => 0.1, :lon => 0.1))
 765
 766       diff = XML::Document.new
 767       diff.root = XML::Node.new "osmChange"
 768       modify = XML::Node.new "modify"
 769       xml_old_way = xml_node_for_way(old_way)
 770       nd_ref = XML::Node.new "nd"
 771       nd_ref["ref"] = create(:node, :lat => 0.3, :lon => 0.3).id.to_s
 772       xml_old_way << nd_ref
 773       xml_old_way["changeset"] = changeset_id.to_s
 774       modify << xml_old_way
 775       diff.root << modify
 776
 777       # upload it
 778       post api_changeset_upload_path(changeset_id), :params => diff.to_s, :headers => auth_header
 779       assert_response :success,
 780                       "diff should have uploaded OK"
 781
 782       # check the bbox
 783       changeset = Changeset.find(changeset_id)
 784       assert_equal 0.1 * GeoRecord::SCALE, changeset.min_lon, "min_lon should be 0.1 degree"
 785       assert_equal 0.3 * GeoRecord::SCALE, changeset.max_lon, "max_lon should be 0.3 degrees"
 786       assert_equal 0.1 * GeoRecord::SCALE, changeset.min_lat, "min_lat should be 0.1 degree"
 787       assert_equal 0.3 * GeoRecord::SCALE, changeset.max_lat, "max_lat should be 0.3 degrees"
 788     end
 789
 790     def test_upload_not_found
 791       changeset = create(:changeset)
 792
 793       auth_header = bearer_authorization_header changeset.user
 794
 795       # modify node
 796       diff = <<~CHANGESET
 797         <osmChange>
 798         <modify>
 799           <node id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
 800         </modify>
 801         </osmChange>
 802       CHANGESET
 803
 804       # upload it
 805       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
 806       assert_response :not_found, "Node should not be found"
 807
 808       # modify way
 809       diff = <<~CHANGESET
 810         <osmChange>
 811         <modify>
 812           <way id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
 813         </modify>
 814         </osmChange>
 815       CHANGESET
 816
 817       # upload it
 818       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
 819       assert_response :not_found, "Way should not be found"
 820
 821       # modify relation
 822       diff = <<~CHANGESET
 823         <osmChange>
 824         <modify>
 825           <relation id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
 826         </modify>
 827         </osmChange>
 828       CHANGESET
 829
 830       # upload it
 831       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
 832       assert_response :not_found, "Relation should not be found"
 833
 834       # delete node
 835       diff = <<~CHANGESET
 836         <osmChange>
 837         <delete>
 838           <node id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
 839         </delete>
 840         </osmChange>
 841       CHANGESET
 842
 843       # upload it
 844       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
 845       assert_response :not_found, "Node should not be deleted"
 846
 847       # delete way
 848       diff = <<~CHANGESET
 849         <osmChange>
 850         <delete>
 851           <way id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
 852         </delete>
 853         </osmChange>
 854       CHANGESET
 855
 856       # upload it
 857       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
 858       assert_response :not_found, "Way should not be deleted"
 859
 860       # delete relation
 861       diff = <<~CHANGESET
 862         <osmChange>
 863         <delete>
 864           <relation id='-1' lon='0' lat='0' changeset='#{changeset.id}' version='1'/>
 865         </delete>
 866         </osmChange>
 867       CHANGESET
 868
 869       # upload it
 870       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
 871       assert_response :not_found, "Relation should not be deleted"
 872     end
 873
 874     ##
 875     # test initial rate limit
 876     def test_upload_initial_rate_limit
 877       # create a user
 878       user = create(:user)
 879
 880       # create some objects to use
 881       node = create(:node)
 882       way = create(:way_with_nodes, :nodes_count => 2)
 883       relation = create(:relation)
 884
 885       # create a changeset that puts us near the initial rate limit
 886       changeset = create(:changeset, :user => user,
 887                                      :created_at => Time.now.utc - 5.minutes,
 888                                      :num_changes => Settings.initial_changes_per_hour - 2)
 889
 890       # create authentication header
 891       auth_header = bearer_authorization_header user
 892
 893       # simple diff to create a node way and relation using placeholders
 894       diff = <<~CHANGESET
 895         <osmChange>
 896          <create>
 897           <node id='-1' lon='0' lat='0' changeset='#{changeset.id}'>
 898            <tag k='foo' v='bar'/>
 899            <tag k='baz' v='bat'/>
 900           </node>
 901           <way id='-1' changeset='#{changeset.id}'>
 902            <nd ref='#{node.id}'/>
 903           </way>
 904          </create>
 905          <create>
 906           <relation id='-1' changeset='#{changeset.id}'>
 907            <member type='way' role='some' ref='#{way.id}'/>
 908            <member type='node' role='some' ref='#{node.id}'/>
 909            <member type='relation' role='some' ref='#{relation.id}'/>
 910           </relation>
 911          </create>
 912         </osmChange>
 913       CHANGESET
 914
 915       # upload it
 916       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
 917       assert_response :too_many_requests, "upload did not hit rate limit"
 918     end
 919
 920     ##
 921     # test maximum rate limit
 922     def test_upload_maximum_rate_limit
 923       # create a user
 924       user = create(:user)
 925
 926       # create some objects to use
 927       node = create(:node)
 928       way = create(:way_with_nodes, :nodes_count => 2)
 929       relation = create(:relation)
 930
 931       # create a changeset to establish our initial edit time
 932       changeset = create(:changeset, :user => user,
 933                                      :created_at => Time.now.utc - 28.days)
 934
 935       # create changeset to put us near the maximum rate limit
 936       total_changes = Settings.max_changes_per_hour - 2
 937       while total_changes.positive?
 938         changes = [total_changes, Changeset::MAX_ELEMENTS].min
 939         changeset = create(:changeset, :user => user,
 940                                        :created_at => Time.now.utc - 5.minutes,
 941                                        :num_changes => changes)
 942         total_changes -= changes
 943       end
 944
 945       # create authentication header
 946       auth_header = bearer_authorization_header user
 947
 948       # simple diff to create a node way and relation using placeholders
 949       diff = <<~CHANGESET
 950         <osmChange>
 951          <create>
 952           <node id='-1' lon='0' lat='0' changeset='#{changeset.id}'>
 953            <tag k='foo' v='bar'/>
 954            <tag k='baz' v='bat'/>
 955           </node>
 956           <way id='-1' changeset='#{changeset.id}'>
 957            <nd ref='#{node.id}'/>
 958           </way>
 959          </create>
 960          <create>
 961           <relation id='-1' changeset='#{changeset.id}'>
 962            <member type='way' role='some' ref='#{way.id}'/>
 963            <member type='node' role='some' ref='#{node.id}'/>
 964            <member type='relation' role='some' ref='#{relation.id}'/>
 965           </relation>
 966          </create>
 967         </osmChange>
 968       CHANGESET
 969
 970       # upload it
 971       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
 972       assert_response :too_many_requests, "upload did not hit rate limit"
 973     end
 974
 975     ##
 976     # test initial size limit
 977     def test_upload_initial_size_limit
 978       # create a user
 979       user = create(:user)
 980
 981       # create a changeset that puts us near the initial size limit
 982       changeset = create(:changeset, :user => user,
 983                                      :min_lat => (-0.5 * GeoRecord::SCALE).round, :min_lon => (0.5 * GeoRecord::SCALE).round,
 984                                      :max_lat => (0.5 * GeoRecord::SCALE).round, :max_lon => (2.5 * GeoRecord::SCALE).round)
 985
 986       # create authentication header
 987       auth_header = bearer_authorization_header user
 988
 989       # simple diff to create a node
 990       diff = <<~CHANGESET
 991         <osmChange>
 992          <create>
 993           <node id='-1' lon='0.9' lat='2.9' changeset='#{changeset.id}'>
 994            <tag k='foo' v='bar'/>
 995            <tag k='baz' v='bat'/>
 996           </node>
 997          </create>
 998         </osmChange>
 999       CHANGESET
1000
1001       # upload it
1002       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1003       assert_response :payload_too_large, "upload did not hit size limit"
1004     end
1005
1006     ##
1007     # test size limit after one week
1008     def test_upload_week_size_limit
1009       # create a user
1010       user = create(:user)
1011
1012       # create a changeset to establish our initial edit time
1013       create(:changeset, :user => user, :created_at => Time.now.utc - 7.days)
1014
1015       # create a changeset that puts us near the initial size limit
1016       changeset = create(:changeset, :user => user, :bbox => [0.5, -0.5, 2.5, 0.5])
1017
1018       # create authentication header
1019       auth_header = bearer_authorization_header user
1020
1021       # simple diff to create a node way and relation using placeholders
1022       diff = <<~CHANGESET
1023         <osmChange>
1024          <create>
1025           <node id='-1' lon='35' lat='35' changeset='#{changeset.id}'>
1026            <tag k='foo' v='bar'/>
1027            <tag k='baz' v='bat'/>
1028           </node>
1029          </create>
1030         </osmChange>
1031       CHANGESET
1032
1033       # upload it
1034       post api_changeset_upload_path(changeset), :params => diff, :headers => auth_header
1035       assert_response :payload_too_large, "upload did not hit size limit"
1036     end
1037
1038     ##
1039     # when we make some simple changes we get the same changes back from the
1040     # diff download.
1041     def test_diff_download_simple
1042       node = create(:node)
1043
1044       ## First try with a non-public user, which should get a forbidden
1045       auth_header = bearer_authorization_header create(:user, :data_public => false)
1046
1047       # create a temporary changeset
1048       xml = "<osm><changeset>" \
1049             "<tag k='created_by' v='osm test suite checking changesets'/>" \
1050             "</changeset></osm>"
1051       post api_changesets_path, :params => xml, :headers => auth_header
1052       assert_response :forbidden
1053
1054       ## Now try with a normal user
1055       auth_header = bearer_authorization_header
1056
1057       # create a temporary changeset
1058       xml = "<osm><changeset>" \
1059             "<tag k='created_by' v='osm test suite checking changesets'/>" \
1060             "</changeset></osm>"
1061       post api_changesets_path, :params => xml, :headers => auth_header
1062       assert_response :success
1063       changeset_id = @response.body.to_i
1064
1065       # add a diff to it
1066       diff = <<~CHANGESET
1067         <osmChange>
1068          <modify>
1069           <node id='#{node.id}' lon='0.0' lat='0.0' changeset='#{changeset_id}' version='1'/>
1070           <node id='#{node.id}' lon='0.1' lat='0.0' changeset='#{changeset_id}' version='2'/>
1071           <node id='#{node.id}' lon='0.1' lat='0.1' changeset='#{changeset_id}' version='3'/>
1072           <node id='#{node.id}' lon='0.1' lat='0.2' changeset='#{changeset_id}' version='4'/>
1073           <node id='#{node.id}' lon='0.2' lat='0.2' changeset='#{changeset_id}' version='5'/>
1074           <node id='#{node.id}' lon='0.3' lat='0.2' changeset='#{changeset_id}' version='6'/>
1075           <node id='#{node.id}' lon='0.3' lat='0.3' changeset='#{changeset_id}' version='7'/>
1076           <node id='#{node.id}' lon='0.9' lat='0.9' changeset='#{changeset_id}' version='8'/>
1077          </modify>
1078         </osmChange>
1079       CHANGESET
1080
1081       # upload it
1082       post api_changeset_upload_path(changeset_id), :params => diff, :headers => auth_header
1083       assert_response :success,
1084                       "can't upload multiple versions of an element in a diff: #{@response.body}"
1085
1086       get api_changeset_download_path(changeset_id)
1087       assert_response :success
1088
1089       assert_select "osmChange", 1
1090       assert_select "osmChange>modify", 8
1091       assert_select "osmChange>modify>node", 8
1092     end
1093
1094     ##
1095     # culled this from josm to ensure that nothing in the way that josm
1096     # is formatting the request is causing it to fail.
1097     #
1098     # NOTE: the error turned out to be something else completely!
1099     def test_josm_upload
1100       auth_header = bearer_authorization_header
1101
1102       # create a temporary changeset
1103       xml = "<osm><changeset>" \
1104             "<tag k='created_by' v='osm test suite checking changesets'/>" \
1105             "</changeset></osm>"
1106       post api_changesets_path, :params => xml, :headers => auth_header
1107       assert_response :success
1108       changeset_id = @response.body.to_i
1109
1110       diff = <<~OSMFILE
1111         <osmChange version="0.6" generator="JOSM">
1112         <create version="0.6" generator="JOSM">
1113           <node id='-1' visible='true' changeset='#{changeset_id}' lat='51.49619982187321' lon='-0.18722061869438314' />
1114           <node id='-2' visible='true' changeset='#{changeset_id}' lat='51.496359883909605' lon='-0.18653093576241928' />
1115           <node id='-3' visible='true' changeset='#{changeset_id}' lat='51.49598132358285' lon='-0.18719613290981638' />
1116           <node id='-4' visible='true' changeset='#{changeset_id}' lat='51.4961591711078' lon='-0.18629015888084607' />
1117           <node id='-5' visible='true' changeset='#{changeset_id}' lat='51.49582126021711' lon='-0.18708186591517145' />
1118           <node id='-6' visible='true' changeset='#{changeset_id}' lat='51.49591018437858' lon='-0.1861432441734455' />
1119           <node id='-7' visible='true' changeset='#{changeset_id}' lat='51.49560784152179' lon='-0.18694719410005425' />
1120           <node id='-8' visible='true' changeset='#{changeset_id}' lat='51.49567389979617' lon='-0.1860289771788006' />
1121           <node id='-9' visible='true' changeset='#{changeset_id}' lat='51.49543761398892' lon='-0.186820684213126' />
1122           <way id='-10' action='modify' visible='true' changeset='#{changeset_id}'>
1123             <nd ref='-1' />
1124             <nd ref='-2' />
1125             <nd ref='-3' />
1126             <nd ref='-4' />
1127             <nd ref='-5' />
1128             <nd ref='-6' />
1129             <nd ref='-7' />
1130             <nd ref='-8' />
1131             <nd ref='-9' />
1132             <tag k='highway' v='residential' />
1133             <tag k='name' v='Foobar Street' />
1134           </way>
1135         </create>
1136         </osmChange>
1137       OSMFILE
1138
1139       # upload it
1140       post api_changeset_upload_path(changeset_id), :params => diff, :headers => auth_header
1141       assert_response :success,
1142                       "can't upload a diff from JOSM: #{@response.body}"
1143
1144       get api_changeset_download_path(changeset_id)
1145       assert_response :success
1146
1147       assert_select "osmChange", 1
1148       assert_select "osmChange>create>node", 9
1149       assert_select "osmChange>create>way", 1
1150       assert_select "osmChange>create>way>nd", 9
1151       assert_select "osmChange>create>way>tag", 2
1152     end
1153
1154     ##
1155     # when we make some complex changes we get the same changes back from the
1156     # diff download.
1157     def test_diff_download_complex
1158       node = create(:node)
1159       node2 = create(:node)
1160       way = create(:way)
1161       auth_header = bearer_authorization_header
1162
1163       # create a temporary changeset
1164       xml = "<osm><changeset>" \
1165             "<tag k='created_by' v='osm test suite checking changesets'/>" \
1166             "</changeset></osm>"
1167       post api_changesets_path, :params => xml, :headers => auth_header
1168       assert_response :success
1169       changeset_id = @response.body.to_i
1170
1171       # add a diff to it
1172       diff = <<~CHANGESET
1173         <osmChange>
1174          <delete>
1175           <node id='#{node.id}' lon='0.0' lat='0.0' changeset='#{changeset_id}' version='1'/>
1176          </delete>
1177          <create>
1178           <node id='-1' lon='0.9' lat='0.9' changeset='#{changeset_id}' version='0'/>
1179           <node id='-2' lon='0.8' lat='0.9' changeset='#{changeset_id}' version='0'/>
1180           <node id='-3' lon='0.7' lat='0.9' changeset='#{changeset_id}' version='0'/>
1181          </create>
1182          <modify>
1183           <node id='#{node2.id}' lon='2.0' lat='1.5' changeset='#{changeset_id}' version='1'/>
1184           <way id='#{way.id}' changeset='#{changeset_id}' version='1'>
1185            <nd ref='#{node2.id}'/>
1186            <nd ref='-1'/>
1187            <nd ref='-2'/>
1188            <nd ref='-3'/>
1189           </way>
1190          </modify>
1191         </osmChange>
1192       CHANGESET
1193
1194       # upload it
1195       post api_changeset_upload_path(changeset_id), :params => diff, :headers => auth_header
1196       assert_response :success,
1197                       "can't upload multiple versions of an element in a diff: #{@response.body}"
1198
1199       get api_changeset_download_path(changeset_id)
1200       assert_response :success
1201
1202       assert_select "osmChange", 1
1203       assert_select "osmChange>create", 3
1204       assert_select "osmChange>delete", 1
1205       assert_select "osmChange>modify", 2
1206       assert_select "osmChange>create>node", 3
1207       assert_select "osmChange>delete>node", 1
1208       assert_select "osmChange>modify>node", 1
1209       assert_select "osmChange>modify>way", 1
1210     end
1211
1212     ##
1213     # check that the bounding box of a changeset gets updated correctly
1214     # FIXME: This should really be moded to a integration test due to the with_controller
1215     def test_changeset_bbox
1216       way = create(:way)
1217       create(:way_node, :way => way, :node => create(:node, :lat => 0.3, :lon => 0.3))
1218
1219       auth_header = bearer_authorization_header
1220
1221       # create a new changeset
1222       xml = "<osm><changeset/></osm>"
1223       post api_changesets_path, :params => xml, :headers => auth_header
1224       assert_response :success, "Creating of changeset failed."
1225       changeset_id = @response.body.to_i
1226
1227       # add a single node to it
1228       with_controller(NodesController.new) do
1229         xml = "<osm><node lon='0.1' lat='0.2' changeset='#{changeset_id}'/></osm>"
1230         post api_nodes_path, :params => xml, :headers => auth_header
1231         assert_response :success, "Couldn't create node."
1232       end
1233
1234       # get the bounding box back from the changeset
1235       get api_changeset_path(changeset_id)
1236       assert_response :success, "Couldn't read back changeset."
1237       assert_select "osm>changeset[min_lon='0.1000000']", 1
1238       assert_select "osm>changeset[max_lon='0.1000000']", 1
1239       assert_select "osm>changeset[min_lat='0.2000000']", 1
1240       assert_select "osm>changeset[max_lat='0.2000000']", 1
1241
1242       # add another node to it
1243       with_controller(NodesController.new) do
1244         xml = "<osm><node lon='0.2' lat='0.1' changeset='#{changeset_id}'/></osm>"
1245         post api_nodes_path, :params => xml, :headers => auth_header
1246         assert_response :success, "Couldn't create second node."
1247       end
1248
1249       # get the bounding box back from the changeset
1250       get api_changeset_path(changeset_id)
1251       assert_response :success, "Couldn't read back changeset for the second time."
1252       assert_select "osm>changeset[min_lon='0.1000000']", 1
1253       assert_select "osm>changeset[max_lon='0.2000000']", 1
1254       assert_select "osm>changeset[min_lat='0.1000000']", 1
1255       assert_select "osm>changeset[max_lat='0.2000000']", 1
1256
1257       # add (delete) a way to it, which contains a point at (3,3)
1258       with_controller(WaysController.new) do
1259         xml = update_changeset(xml_for_way(way), changeset_id)
1260         delete api_way_path(way), :params => xml.to_s, :headers => auth_header
1261         assert_response :success, "Couldn't delete a way."
1262       end
1263
1264       # get the bounding box back from the changeset
1265       get api_changeset_path(changeset_id)
1266       assert_response :success, "Couldn't read back changeset for the third time."
1267       assert_select "osm>changeset[min_lon='0.1000000']", 1
1268       assert_select "osm>changeset[max_lon='0.3000000']", 1
1269       assert_select "osm>changeset[min_lat='0.1000000']", 1
1270       assert_select "osm>changeset[max_lat='0.3000000']", 1
1271     end
1272
1273     ##
1274     # check updating tags on a changeset
1275     def test_changeset_update
1276       private_user = create(:user, :data_public => false)
1277       private_changeset = create(:changeset, :user => private_user)
1278       user = create(:user)
1279       changeset = create(:changeset, :user => user)
1280
1281       ## First try with a non-public user
1282       new_changeset = create_changeset_xml(:user => private_user)
1283       new_tag = XML::Node.new "tag"
1284       new_tag["k"] = "tagtesting"
1285       new_tag["v"] = "valuetesting"
1286       new_changeset.find("//osm/changeset").first << new_tag
1287
1288       # try without any authorization
1289       put api_changeset_path(private_changeset), :params => new_changeset.to_s
1290       assert_response :unauthorized
1291
1292       # try with the wrong authorization
1293       auth_header = bearer_authorization_header
1294       put api_changeset_path(private_changeset), :params => new_changeset.to_s, :headers => auth_header
1295       assert_response :conflict
1296
1297       # now this should get an unauthorized
1298       auth_header = bearer_authorization_header private_user
1299       put api_changeset_path(private_changeset), :params => new_changeset.to_s, :headers => auth_header
1300       assert_require_public_data "user with their data non-public, shouldn't be able to edit their changeset"
1301
1302       ## Now try with the public user
1303       new_changeset = create_changeset_xml(:id => 1)
1304       new_tag = XML::Node.new "tag"
1305       new_tag["k"] = "tagtesting"
1306       new_tag["v"] = "valuetesting"
1307       new_changeset.find("//osm/changeset").first << new_tag
1308
1309       # try without any authorization
1310       put api_changeset_path(changeset), :params => new_changeset.to_s
1311       assert_response :unauthorized
1312
1313       # try with the wrong authorization
1314       auth_header = bearer_authorization_header
1315       put api_changeset_path(changeset), :params => new_changeset.to_s, :headers => auth_header
1316       assert_response :conflict
1317
1318       # now this should work...
1319       auth_header = bearer_authorization_header user
1320       put api_changeset_path(changeset), :params => new_changeset.to_s, :headers => auth_header
1321       assert_response :success
1322
1323       assert_select "osm>changeset[id='#{changeset.id}']", 1
1324       assert_select "osm>changeset>tag", 1
1325       assert_select "osm>changeset>tag[k='tagtesting'][v='valuetesting']", 1
1326     end
1327
1328     ##
1329     # check that a user different from the one who opened the changeset
1330     # can't modify it.
1331     def test_changeset_update_invalid
1332       auth_header = bearer_authorization_header
1333
1334       changeset = create(:changeset)
1335       new_changeset = create_changeset_xml(:user => changeset.user, :id => changeset.id)
1336       new_tag = XML::Node.new "tag"
1337       new_tag["k"] = "testing"
1338       new_tag["v"] = "testing"
1339       new_changeset.find("//osm/changeset").first << new_tag
1340
1341       put api_changeset_path(changeset), :params => new_changeset.to_s, :headers => auth_header
1342       assert_response :conflict
1343     end
1344
1345     ##
1346     # check that a changeset can contain a certain max number of changes.
1347     ## FIXME should be changed to an integration test due to the with_controller
1348     def test_changeset_limits
1349       user = create(:user)
1350       auth_header = bearer_authorization_header user
1351
1352       # create an old changeset to ensure we have the maximum rate limit
1353       create(:changeset, :user => user, :created_at => Time.now.utc - 28.days)
1354
1355       # open a new changeset
1356       xml = "<osm><changeset/></osm>"
1357       post api_changesets_path, :params => xml, :headers => auth_header
1358       assert_response :success, "can't create a new changeset"
1359       cs_id = @response.body.to_i
1360
1361       # start the counter just short of where the changeset should finish.
1362       offset = 10
1363       # alter the database to set the counter on the changeset directly,
1364       # otherwise it takes about 6 minutes to fill all of them.
1365       changeset = Changeset.find(cs_id)
1366       changeset.num_changes = Changeset::MAX_ELEMENTS - offset
1367       changeset.save!
1368
1369       with_controller(NodesController.new) do
1370         # create a new node
1371         xml = "<osm><node changeset='#{cs_id}' lat='0.0' lon='0.0'/></osm>"
1372         post api_nodes_path, :params => xml, :headers => auth_header
1373         assert_response :success, "can't create a new node"
1374         node_id = @response.body.to_i
1375
1376         get api_node_path(node_id)
1377         assert_response :success, "can't read back new node"
1378         node_doc = XML::Parser.string(@response.body).parse
1379         node_xml = node_doc.find("//osm/node").first
1380
1381         # loop until we fill the changeset with nodes
1382         offset.times do |i|
1383           node_xml["lat"] = rand.to_s
1384           node_xml["lon"] = rand.to_s
1385           node_xml["version"] = (i + 1).to_s
1386
1387           put api_node_path(node_id), :params => node_doc.to_s, :headers => auth_header
1388           assert_response :success, "attempt #{i} should have succeeded"
1389         end
1390
1391         # trying again should fail
1392         node_xml["lat"] = rand.to_s
1393         node_xml["lon"] = rand.to_s
1394         node_xml["version"] = offset.to_s
1395
1396         put api_node_path(node_id), :params => node_doc.to_s, :headers => auth_header
1397         assert_response :conflict, "final attempt should have failed"
1398       end
1399
1400       changeset = Changeset.find(cs_id)
1401       assert_equal Changeset::MAX_ELEMENTS + 1, changeset.num_changes
1402
1403       # check that the changeset is now closed as well
1404       assert_not(changeset.open?,
1405                  "changeset should have been auto-closed by exceeding " \
1406                  "element limit.")
1407     end
1408
1409     private
1410
1411     ##
1412     # check that the output consists of one specific changeset
1413     def assert_single_changeset(changeset, &)
1414       assert_dom "> changeset", 1 do
1415         assert_dom "> @id", changeset.id.to_s
1416         assert_dom "> @created_at", changeset.created_at.xmlschema
1417         if changeset.open?
1418           assert_dom "> @open", "true"
1419           assert_dom "> @closed_at", 0
1420         else
1421           assert_dom "> @open", "false"
1422           assert_dom "> @closed_at", changeset.closed_at.xmlschema
1423         end
1424         assert_dom "> @comments_count", changeset.comments.length.to_s
1425         assert_dom "> @changes_count", changeset.num_changes.to_s
1426         yield if block_given?
1427       end
1428     end
1429
1430     def assert_single_changeset_json(changeset, js)
1431       assert_equal changeset.id, js["changeset"]["id"]
1432       assert_equal changeset.created_at.xmlschema, js["changeset"]["created_at"]
1433       if changeset.open?
1434         assert js["changeset"]["open"]
1435         assert_nil js["changeset"]["closed_at"]
1436       else
1437         assert_not js["changeset"]["open"]
1438         assert_equal changeset.closed_at.xmlschema, js["changeset"]["closed_at"]
1439       end
1440       assert_equal changeset.comments.length, js["changeset"]["comments_count"]
1441       assert_equal changeset.num_changes, js["changeset"]["changes_count"]
1442     end
1443
1444     ##
1445     # check that certain changesets exist in the output in the specified order
1446     def assert_changesets_in_order(changesets)
1447       assert_select "osm>changeset", changesets.size
1448       changesets.each_with_index do |changeset, index|
1449         assert_select "osm>changeset:nth-child(#{index + 1})[id='#{changeset.id}']", 1
1450       end
1451     end
1452
1453     ##
1454     # update the changeset_id of a way element
1455     def update_changeset(xml, changeset_id)
1456       xml_attr_rewrite(xml, "changeset", changeset_id)
1457     end
1458
1459     ##
1460     # update an attribute in a way element
1461     def xml_attr_rewrite(xml, name, value)
1462       xml.find("//osm/way").first[name] = value.to_s
1463       xml
1464     end
1465
1466     ##
1467     # build XML for changesets
1468     def create_changeset_xml(user: nil, id: nil)
1469       root = XML::Document.new
1470       root.root = XML::Node.new "osm"
1471       cs = XML::Node.new "changeset"
1472       if user
1473         cs["user"] = user.display_name
1474         cs["uid"] = user.id.to_s
1475       end
1476       cs["id"] = id.to_s if id
1477       root.root << cs
1478       root
1479     end
1480   end
1481 end