]> git.openstreetmap.org Git - rails.git/blob - app/models/relation.rb
Optimise retrieval of full relations.
[rails.git] / app / models / relation.rb
1 class Relation < ActiveRecord::Base
2   require 'xml/libxml'
3   
4   include ConsistencyValidations
5   
6   set_table_name 'current_relations'
7
8   belongs_to :changeset
9
10   has_many :old_relations, :foreign_key => 'id', :order => 'version'
11
12   has_many :relation_members, :foreign_key => 'id', :order => 'sequence_id'
13   has_many :relation_tags, :foreign_key => 'id'
14
15   has_many :containing_relation_members, :class_name => "RelationMember", :as => :member
16   has_many :containing_relations, :class_name => "Relation", :through => :containing_relation_members, :source => :relation, :extend => ObjectFinder
17
18   validates_presence_of :id, :on => :update
19   validates_presence_of :timestamp,:version,  :changeset_id 
20   validates_uniqueness_of :id
21   validates_inclusion_of :visible, :in => [ true, false ]
22   validates_numericality_of :id, :on => :update, :integer_only => true
23   validates_numericality_of :changeset_id, :version, :integer_only => true
24   validates_associated :changeset
25   
26   TYPES = ["node", "way", "relation"]
27
28   def self.from_xml(xml, create=false)
29     begin
30       p = XML::Parser.string(xml)
31       doc = p.parse
32
33       doc.find('//osm/relation').each do |pt|
34         return Relation.from_xml_node(pt, create)
35       end
36     rescue LibXML::XML::Error, ArgumentError => ex
37       raise OSM::APIBadXMLError.new("relation", xml, ex.message)
38     end
39   end
40
41   def self.from_xml_node(pt, create=false)
42     relation = Relation.new
43
44     if !create and pt['id'] != '0'
45       relation.id = pt['id'].to_i
46     end
47
48     raise OSM::APIBadXMLError.new("relation", pt, "You are missing the required changeset in the relation") if pt['changeset'].nil?
49     relation.changeset_id = pt['changeset']
50
51     # The follow block does not need to be executed because they are dealt with 
52     # in create_with_history, update_from and delete_with_history
53     if create
54       relation.timestamp = Time.now.getutc
55       relation.visible = true
56       relation.version = 0
57     else
58       if pt['timestamp']
59         relation.timestamp = Time.parse(pt['timestamp'])
60       end
61       relation.version = pt['version']
62     end
63
64     pt.find('tag').each do |tag|
65       relation.add_tag_keyval(tag['k'], tag['v'])
66     end
67
68     pt.find('member').each do |member|
69       #member_type = 
70       logger.debug "each member"
71       raise OSM::APIBadXMLError.new("relation", pt, "The #{member['type']} is not allowed only, #{TYPES.inspect} allowed") unless TYPES.include? member['type']
72       logger.debug "after raise"
73       #member_ref = member['ref']
74       #member_role
75       member['role'] ||= "" # Allow  the upload to not include this, in which case we default to an empty string.
76       logger.debug member['role']
77       relation.add_member(member['type'].classify, member['ref'], member['role'])
78     end
79     raise OSM::APIBadUserInput.new("Some bad xml in relation") if relation.nil?
80
81     return relation
82   end
83
84   def to_xml
85     doc = OSM::API.new.get_xml_doc
86     doc.root << to_xml_node()
87     return doc
88   end
89
90   def to_xml_node(visible_members = nil, changeset_cache = {}, user_display_name_cache = {})
91     el1 = XML::Node.new 'relation'
92     el1['id'] = self.id.to_s
93     el1['visible'] = self.visible.to_s
94     el1['timestamp'] = self.timestamp.xmlschema
95     el1['version'] = self.version.to_s
96     el1['changeset'] = self.changeset_id.to_s
97
98     if changeset_cache.key?(self.changeset_id)
99       # use the cache if available
100     else
101       changeset_cache[self.changeset_id] = self.changeset.user_id
102     end
103
104     user_id = changeset_cache[self.changeset_id]
105
106     if user_display_name_cache.key?(user_id)
107       # use the cache if available
108     elsif self.changeset.user.data_public?
109       user_display_name_cache[user_id] = self.changeset.user.display_name
110     else
111       user_display_name_cache[user_id] = nil
112     end
113
114     if not user_display_name_cache[user_id].nil?
115       el1['user'] = user_display_name_cache[user_id]
116       el1['uid'] = user_id.to_s
117     end
118
119     self.relation_members.each do |member|
120       p=0
121       if visible_members
122         # if there is a list of visible members then use that to weed out deleted segments
123         if visible_members[member.member_type][member.member_id]
124           p=1
125         end
126       else
127         # otherwise, manually go to the db to check things
128         if member.member.visible?
129           p=1
130         end
131       end
132       if p
133         e = XML::Node.new 'member'
134         e['type'] = member.member_type.downcase
135         e['ref'] = member.member_id.to_s 
136         e['role'] = member.member_role
137         el1 << e
138        end
139     end
140
141     self.relation_tags.each do |tag|
142       e = XML::Node.new 'tag'
143       e['k'] = tag.k
144       e['v'] = tag.v
145       el1 << e
146     end
147     return el1
148   end 
149
150   def self.find_for_nodes(ids, options = {})
151     if ids.empty?
152       return []
153     else
154       self.with_scope(:find => { :joins => "INNER JOIN current_relation_members AS crm ON crm.id = current_relations.id", :conditions => "crm.member_type = 'Node' AND crm.member_id IN (#{ids.join(',')})" }) do
155         return self.find(:all, options)
156       end
157     end
158   end
159
160   def self.find_for_ways(ids, options = {})
161     if ids.empty?
162       return []
163     else
164       self.with_scope(:find => { :joins => "INNER JOIN current_relation_members AS crm ON crm.id = current_relations.id", :conditions => "crm.member_type = 'Way' AND crm.member_id IN (#{ids.join(',')})" }) do
165         return self.find(:all, options)
166       end
167     end
168   end
169
170   def self.find_for_relations(ids, options = {})
171     if ids.empty?
172       return []
173     else
174       self.with_scope(:find => { :joins => "INNER JOIN current_relation_members AS crm ON crm.id = current_relations.id", :conditions => "crm.member_type = 'Relation' AND crm.member_id IN (#{ids.join(',')})" }) do
175         return self.find(:all, options)
176       end
177     end
178   end
179
180   # FIXME is this really needed?
181   def members
182     unless @members
183       @members = Array.new
184       self.relation_members.each do |member|
185         @members += [[member.member_type,member.member_id,member.member_role]]
186       end
187     end
188     @members
189   end
190
191   def tags
192     unless @tags
193       @tags = Hash.new
194       self.relation_tags.each do |tag|
195         @tags[tag.k] = tag.v
196       end
197     end
198     @tags
199   end
200
201   def members=(m)
202     @members = m
203   end
204
205   def tags=(t)
206     @tags = t
207   end
208
209   def add_member(type,id,role)
210     @members = Array.new unless @members
211     @members += [[type,id,role]]
212   end
213
214   def add_tag_keyval(k, v)
215     @tags = Hash.new unless @tags
216
217     # duplicate tags are now forbidden, so we can't allow values
218     # in the hash to be overwritten.
219     raise OSM::APIDuplicateTagsError.new("relation", self.id, k) if @tags.include? k
220
221     # check tag size here, as we don't create a RelationTag object until
222     # just before we save...
223     raise OSM::APIBadUserInput.new("Relation #{self.id} has a tag with too long a key, '#{k}'.") if k.length > 255
224     raise OSM::APIBadUserInput.new("Relation #{self.id} has a tag with too long a value, '#{k}'='#{v}'.") if v.length > 255
225
226     @tags[k] = v
227   end
228
229   ##
230   # updates the changeset bounding box to contain the bounding box of 
231   # the element with given +type+ and +id+. this only works with nodes
232   # and ways at the moment, as they're the only elements to respond to
233   # the :bbox call.
234   def update_changeset_element(type, id)
235     element = Kernel.const_get(type.capitalize).find(id)
236     changeset.update_bbox! element.bbox
237   end    
238
239   def delete_with_history!(new_relation, user)
240     unless self.visible
241       raise OSM::APIAlreadyDeletedError.new("relation", new_relation.id)
242     end
243
244     # need to start the transaction here, so that the database can 
245     # provide repeatable reads for the used-by checks. this means it
246     # shouldn't be possible to get race conditions.
247     Relation.transaction do
248       check_consistency(self, new_relation, user)
249       # This will check to see if this relation is used by another relation
250       rel = RelationMember.find(:first, :joins => :relation, 
251                                 :conditions => [ "visible = ? AND member_type='Relation' and member_id=? ", true, self.id ])
252       raise OSM::APIPreconditionFailedError.new("The relation #{new_relation.id} is used in relation #{rel.relation.id}.") unless rel.nil?
253
254       self.changeset_id = new_relation.changeset_id
255       self.tags = {}
256       self.members = []
257       self.visible = false
258       save_with_history!
259     end
260   end
261
262   def update_from(new_relation, user)
263     check_consistency(self, new_relation, user)
264     unless new_relation.preconditions_ok?(self.members)
265       raise OSM::APIPreconditionFailedError.new("Cannot update relation #{self.id}: data or member data is invalid.")
266     end
267     self.changeset_id = new_relation.changeset_id
268     self.changeset = new_relation.changeset
269     self.tags = new_relation.tags
270     self.members = new_relation.members
271     self.visible = true
272     save_with_history!
273   end
274   
275   def create_with_history(user)
276     check_create_consistency(self, user)
277     unless self.preconditions_ok?
278       raise OSM::APIPreconditionFailedError.new("Cannot create relation: data or member data is invalid.")
279     end
280     self.version = 0
281     self.visible = true
282     save_with_history!
283   end
284
285   def preconditions_ok?(good_members = [])
286     # These are hastables that store an id in the index of all 
287     # the nodes/way/relations that have already been added.
288     # If the member is valid and visible then we add it to the 
289     # relevant hash table, with the value true as a cache.
290     # Thus if you have nodes with the ids of 50 and 1 already in the
291     # relation, then the hash table nodes would contain:
292     # => {50=>true, 1=>true}
293     elements = { :node => Hash.new, :way => Hash.new, :relation => Hash.new }
294
295     # pre-set all existing members to good
296     good_members.each { |m| elements[m[0].downcase.to_sym][m[1]] = true }
297
298     self.members.each do |m|
299       # find the hash for the element type or die
300       hash = elements[m[0].downcase.to_sym] or return false
301       # unless its in the cache already
302       unless hash.key? m[1]
303         # use reflection to look up the appropriate class
304         model = Kernel.const_get(m[0].capitalize)
305         # get the element with that ID
306         element = model.find(:first, :conditions =>["id = ?", m[1]])
307
308         # and check that it is OK to use.
309         unless element and element.visible? and element.preconditions_ok?
310           raise OSM::APIPreconditionFailedError.new("Relation with id #{self.id} cannot be saved due to #{m[0]} with id #{m[1]}")
311         end
312         hash[m[1]] = true
313       end
314     end
315
316     return true
317   end
318
319   # Temporary method to match interface to nodes
320   def tags_as_hash
321     return self.tags
322   end
323
324   ##
325   # if any members are referenced by placeholder IDs (i.e: negative) then
326   # this calling this method will fix them using the map from placeholders 
327   # to IDs +id_map+. 
328   def fix_placeholders!(id_map, placeholder_id = nil)
329     self.members.map! do |type, id, role|
330       old_id = id.to_i
331       if old_id < 0
332         new_id = id_map[type.downcase.to_sym][old_id]
333         raise OSM::APIBadUserInput.new("Placeholder #{type} not found for reference #{old_id} in relation #{self.id.nil? ? placeholder_id : self.id}.") if new_id.nil?
334         [type, new_id, role]
335       else
336         [type, id, role]
337       end
338     end
339   end
340
341   private
342   
343   def save_with_history!
344     Relation.transaction do
345       # have to be a little bit clever here - to detect if any tags
346       # changed then we have to monitor their before and after state.
347       tags_changed = false
348
349       t = Time.now.getutc
350       self.version += 1
351       self.timestamp = t
352       self.save!
353
354       tags = self.tags.clone
355       self.relation_tags.each do |old_tag|
356         key = old_tag.k
357         # if we can match the tags we currently have to the list
358         # of old tags, then we never set the tags_changed flag. but
359         # if any are different then set the flag and do the DB 
360         # update.
361         if tags.has_key? key 
362           tags_changed |= (old_tag.v != tags[key])
363
364           # remove from the map, so that we can expect an empty map
365           # at the end if there are no new tags
366           tags.delete key
367
368         else
369           # this means a tag was deleted
370           tags_changed = true
371         end
372       end
373       # if there are left-over tags then they are new and will have to
374       # be added.
375       tags_changed |= (not tags.empty?)
376       RelationTag.delete_all(:id => self.id)
377       self.tags.each do |k,v|
378         tag = RelationTag.new
379         tag.k = k
380         tag.v = v
381         tag.id = self.id
382         tag.save!
383       end
384       
385       # same pattern as before, but this time we're collecting the
386       # changed members in an array, as the bounding box updates for
387       # elements are per-element, not blanked on/off like for tags.
388       changed_members = Array.new
389       members = Hash.new
390       self.members.each do |m|
391         # should be: h[[m.id, m.type]] = m.role, but someone prefers arrays
392         members[[m[1], m[0]]] = m[2]
393       end
394       relation_members.each do |old_member|
395         key = [old_member.member_id.to_s, old_member.member_type]
396         if members.has_key? key
397           members.delete key
398         else
399           changed_members << key
400         end
401       end
402       # any remaining members must be new additions
403       changed_members += members.keys
404
405       # update the members. first delete all the old members, as the new
406       # members may be in a different order and i don't feel like implementing
407       # a longest common subsequence algorithm to optimise this.
408       members = self.members
409       RelationMember.delete_all(:id => self.id)
410       members.each_with_index do |m,i|
411         mem = RelationMember.new
412         mem.id = [self.id, i]
413         mem.member_type = m[0]
414         mem.member_id = m[1]
415         mem.member_role = m[2]
416         mem.save!
417       end
418
419       old_relation = OldRelation.from_relation(self)
420       old_relation.timestamp = t
421       old_relation.save_with_dependencies!
422
423       # update the bbox of the changeset and save it too.
424       # discussion on the mailing list gave the following definition for
425       # the bounding box update procedure of a relation:
426       #
427       # adding or removing nodes or ways from a relation causes them to be
428       # added to the changeset bounding box. adding a relation member or
429       # changing tag values causes all node and way members to be added to the
430       # bounding box. this is similar to how the map call does things and is
431       # reasonable on the assumption that adding or removing members doesn't
432       # materially change the rest of the relation.
433       any_relations = 
434         changed_members.collect { |id,type| type == "relation" }.
435         inject(false) { |b,s| b or s }
436
437       if tags_changed or any_relations
438         # add all non-relation bounding boxes to the changeset
439         # FIXME: check for tag changes along with element deletions and
440         # make sure that the deleted element's bounding box is hit.
441         self.members.each do |type, id, role|
442           if type != "Relation"
443             update_changeset_element(type, id)
444           end
445         end
446       else
447         # add only changed members to the changeset
448         changed_members.each do |id, type|
449           if type != "Relation"
450             update_changeset_element(type, id)
451           end
452         end
453       end
454
455       # tell the changeset we updated one element only
456       changeset.add_changes! 1
457
458       # save the (maybe updated) changeset bounding box
459       changeset.save!
460     end
461   end
462
463 end