sql/tables.sql

   1 drop table import_status;
   2 CREATE TABLE import_status (
   3   lastimportdate timestamp NOT NULL
   4   );
   5 GRANT SELECT ON import_status TO "www-data" ;
   6
   7 drop table import_osmosis_log;
   8 CREATE TABLE import_osmosis_log (
   9   batchend timestamp,
  10   batchsize integer,
  11   starttime timestamp,
  12   endtime timestamp,
  13   event text
  14   );
  15
  16 drop table import_npi_log;
  17 CREATE TABLE import_npi_log (
  18   npiid integer,
  19   batchend timestamp,
  20   batchsize integer,
  21   starttime timestamp,
  22   endtime timestamp,
  23   event text
  24   );
  25
  26 --drop table IF EXISTS query_log;
  27 CREATE TABLE query_log (
  28   starttime timestamp,
  29   query text,
  30   ipaddress text,
  31   endtime timestamp,
  32   results integer
  33   );
  34 CREATE INDEX idx_query_log ON query_log USING BTREE (starttime);
  35 GRANT INSERT ON query_log TO "www-data" ;
  36 GRANT UPDATE ON query_log TO "www-data" ;
  37
  38 CREATE TABLE new_query_log (
  39   type text,
  40   starttime timestamp,
  41   ipaddress text,
  42   useragent text,
  43   language text,
  44   query text,
  45   endtime timestamp,
  46   results integer,
  47   format text,
  48   secret text
  49   );
  50 CREATE INDEX idx_new_query_log_starttime ON new_query_log USING BTREE (starttime);
  51 GRANT INSERT ON new_query_log TO "www-data" ;
  52 GRANT UPDATE ON new_query_log TO "www-data" ;
  53 GRANT SELECT ON new_query_log TO "www-data" ;
  54
  55 create view vw_search_query_log as SELECT substr(query, 1, 50) AS query, starttime, endtime - starttime AS duration, substr(useragent, 1, 20) as
  56 useragent, language, results, ipaddress FROM new_query_log WHERE type = 'search' ORDER BY starttime DESC;
  57
  58 --drop table IF EXISTS report_log;
  59 CREATE TABLE report_log (
  60   starttime timestamp,
  61   ipaddress text,
  62   query text,
  63   description text,
  64   email text
  65   );
  66 GRANT INSERT ON report_log TO "www-data" ;
  67
  68 drop table IF EXISTS word;
  69 CREATE TABLE word (
  70   word_id INTEGER,
  71   word_token text,
  72   word_trigram text,
  73   word text,
  74   class text,
  75   type text,
  76   country_code varchar(2),
  77   search_name_count INTEGER,
  78   operator TEXT
  79   );
  80 SELECT AddGeometryColumn('word', 'location', 4326, 'GEOMETRY', 2);
  81 CREATE INDEX idx_word_word_token on word USING BTREE (word_token);
  82 --CREATE INDEX idx_word_trigram ON word USING gin(word_trigram gin_trgm_ops) WITH (fastupdate = off);
  83 GRANT SELECT ON word TO "www-data" ;
  84 DROP SEQUENCE seq_word;
  85 CREATE SEQUENCE seq_word start 1;
  86
  87 drop table IF EXISTS location_area CASCADE;
  88 CREATE TABLE location_area (
  89   partition integer,
  90   place_id BIGINT,
  91   country_code VARCHAR(2),
  92   keywords INTEGER[],
  93   rank_search INTEGER NOT NULL,
  94   rank_address INTEGER NOT NULL,
  95   isguess BOOL
  96   );
  97 SELECT AddGeometryColumn('location_area', 'centroid', 4326, 'POINT', 2);
  98 SELECT AddGeometryColumn('location_area', 'geometry', 4326, 'GEOMETRY', 2);
  99
 100 CREATE TABLE location_area_large () INHERITS (location_area);
 101 CREATE TABLE location_area_roadnear () INHERITS (location_area);
 102 CREATE TABLE location_area_roadfar () INHERITS (location_area);
 103
 104 drop table IF EXISTS location_property CASCADE;
 105 CREATE TABLE location_property (
 106   place_id BIGINT,
 107   partition integer,
 108   parent_place_id BIGINT,
 109   housenumber TEXT,
 110   postcode TEXT
 111   );
 112 SELECT AddGeometryColumn('location_property', 'centroid', 4326, 'POINT', 2);
 113
 114 CREATE TABLE location_property_aux () INHERITS (location_property);
 115 CREATE INDEX idx_location_property_aux_place_id ON location_property_aux USING BTREE (place_id);
 116 CREATE INDEX idx_location_property_aux_parent_place_id ON location_property_aux USING BTREE (parent_place_id);
 117 CREATE INDEX idx_location_property_aux_housenumber_parent_place_id ON location_property_aux USING BTREE (parent_place_id, housenumber);
 118 GRANT SELECT ON location_property_aux TO "www-data";
 119
 120 CREATE TABLE location_property_tiger () INHERITS (location_property);
 121 CREATE INDEX idx_location_property_tiger_place_id ON location_property_tiger USING BTREE (place_id);
 122 CREATE INDEX idx_location_property_tiger_parent_place_id ON location_property_tiger USING BTREE (parent_place_id);
 123 CREATE INDEX idx_location_property_tiger_housenumber_parent_place_id ON location_property_tiger USING BTREE (parent_place_id, housenumber);
 124 GRANT SELECT ON location_property_tiger TO "www-data";
 125
 126 drop table IF EXISTS search_name_blank CASCADE;
 127 CREATE TABLE search_name_blank (
 128   place_id BIGINT,
 129   search_rank integer,
 130   address_rank integer,
 131   importance FLOAT,
 132   country_code varchar(2),
 133   name_vector integer[],
 134   nameaddress_vector integer[]
 135   );
 136 SELECT AddGeometryColumn('search_name_blank', 'centroid', 4326, 'GEOMETRY', 2);
 137
 138 drop table IF EXISTS search_name;
 139 CREATE TABLE search_name () INHERITS (search_name_blank);
 140 CREATE INDEX idx_search_name_place_id ON search_name USING BTREE (place_id);
 141 CREATE INDEX search_name_name_vector_idx ON search_name USING GIN (name_vector) WITH (fastupdate = off);
 142
 143 drop table IF EXISTS place_addressline;
 144 CREATE TABLE place_addressline (
 145   place_id BIGINT,
 146   address_place_id BIGINT,
 147   fromarea boolean,
 148   isaddress boolean,
 149   distance float,
 150   cached_rank_address integer
 151   );
 152 CREATE INDEX idx_place_addressline_place_id on place_addressline USING BTREE (place_id);
 153
 154 drop table IF EXISTS place_boundingbox CASCADE;
 155 CREATE TABLE place_boundingbox (
 156   place_id BIGINT,
 157   minlat float,
 158   maxlat float,
 159   minlon float,
 160   maxlon float,
 161   numfeatures integer,
 162   area float
 163   );
 164 SELECT AddGeometryColumn('place_boundingbox', 'outline', 4326, 'GEOMETRY', 2);
 165 GRANT SELECT on place_boundingbox to "www-data" ;
 166 GRANT INSERT on place_boundingbox to "www-data" ;
 167
 168 drop table IF EXISTS reverse_cache;
 169 CREATE TABLE reverse_cache (
 170   latlonzoomid integer,
 171   country_code varchar(2),
 172   place_id BIGINT
 173   );
 174 GRANT SELECT on reverse_cache to "www-data" ;
 175 GRANT INSERT on reverse_cache to "www-data" ;
 176 CREATE INDEX idx_reverse_cache_latlonzoomid ON reverse_cache USING BTREE (latlonzoomid);
 177
 178 drop table country;
 179 CREATE TABLE country (
 180   country_code varchar(2),
 181   country_name hstore,
 182   country_default_language_code varchar(2)
 183   );
 184 SELECT AddGeometryColumn('country', 'geometry', 4326, 'POLYGON', 2);
 185 insert into country select iso3166::varchar(2), 'name:en'->cntry_name, null,
 186   ST_Transform(geometryn(the_geom, generate_series(1, numgeometries(the_geom))), 4326) from worldboundaries;
 187 CREATE INDEX idx_country_country_code ON country USING BTREE (country_code);
 188 CREATE INDEX idx_country_geometry ON country USING GIST (geometry);
 189
 190 drop table placex;
 191 CREATE TABLE placex (
 192   place_id BIGINT NOT NULL,
 193   partition integer,
 194   osm_type char(1),
 195   osm_id INTEGER,
 196   class TEXT NOT NULL,
 197   type TEXT NOT NULL,
 198   name HSTORE,
 199   admin_level INTEGER,
 200   housenumber TEXT,
 201   street TEXT,
 202   isin TEXT,
 203   postcode TEXT,
 204   country_code varchar(2),
 205   extratags HSTORE,
 206   parent_place_id BIGINT,
 207   linked_place_id BIGINT,
 208   rank_address INTEGER,
 209   rank_search INTEGER,
 210   importance FLOAT,
 211   indexed_status INTEGER,
 212   indexed_date TIMESTAMP,
 213   wikipedia TEXT, -- calculated wikipedia article name (language:title)
 214   geometry_sector INTEGER
 215   );
 216 SELECT AddGeometryColumn('placex', 'geometry', 4326, 'GEOMETRY', 2);
 217 SELECT AddGeometryColumn('placex', 'centroid', 4326, 'GEOMETRY', 2);
 218 CREATE UNIQUE INDEX idx_place_id ON placex USING BTREE (place_id);
 219 CREATE INDEX idx_placex_osmid ON placex USING BTREE (osm_type, osm_id);
 220 CREATE INDEX idx_placex_linked_place_id ON placex USING BTREE (linked_place_id);
 221 CREATE INDEX idx_placex_rank_search ON placex USING BTREE (rank_search, geometry_sector);
 222 CREATE INDEX idx_placex_geometry ON placex USING GIST (geometry);
 223 CREATE INDEX idx_placex_adminname on placex USING BTREE (make_standard_name(name->'name'),rank_search) WHERE osm_type='N' and rank_search < 26;
 224
 225 --CREATE INDEX idx_placex_indexed ON placex USING BTREE (indexed);
 226
 227 --CREATE INDEX idx_placex_pendingbylatlon ON placex USING BTREE (geometry_index(geometry_sector,indexed,name),rank_search)  where geometry_index(geometry_sector,indexed,name) IS NOT NULL;
 228
 229 DROP SEQUENCE seq_place;
 230 CREATE SEQUENCE seq_place start 1;
 231 GRANT SELECT on placex to "www-data" ;
 232 GRANT UPDATE ON placex to "www-data" ;
 233 GRANT SELECT ON search_name to "www-data" ;
 234 GRANT DELETE on search_name to "www-data" ;
 235 GRANT INSERT on search_name to "www-data" ;
 236 GRANT SELECT on place_addressline to "www-data" ;
 237 GRANT INSERT ON place_addressline to "www-data" ;
 238 GRANT DELETE on place_addressline to "www-data" ;
 239 GRANT SELECT ON seq_word to "www-data" ;
 240 GRANT UPDATE ON seq_word to "www-data" ;
 241 GRANT INSERT ON word to "www-data" ;
 242 GRANT SELECT ON planet_osm_ways to "www-data" ;
 243 GRANT SELECT ON planet_osm_rels to "www-data" ;
 244 GRANT SELECT on location_area to "www-data" ;
 245 GRANT SELECT on country to "www-data" ;
 246
 247 -- insert creates the location tagbles, creates location indexes if indexed == true
 248 CREATE TRIGGER placex_before_insert BEFORE INSERT ON placex
 249     FOR EACH ROW EXECUTE PROCEDURE placex_insert();
 250
 251 -- update insert creates the location tables
 252 CREATE TRIGGER placex_before_update BEFORE UPDATE ON placex
 253     FOR EACH ROW EXECUTE PROCEDURE placex_update();
 254
 255 -- diff update triggers
 256 CREATE TRIGGER placex_before_delete AFTER DELETE ON placex
 257     FOR EACH ROW EXECUTE PROCEDURE placex_delete();
 258 CREATE TRIGGER place_before_delete BEFORE DELETE ON place
 259     FOR EACH ROW EXECUTE PROCEDURE place_delete();
 260 CREATE TRIGGER place_before_insert BEFORE INSERT ON place
 261     FOR EACH ROW EXECUTE PROCEDURE place_insert();
 262
 263 alter table placex add column geometry_sector INTEGER;
 264 alter table placex add column indexed_status INTEGER;
 265 alter table placex add column indexed_date TIMESTAMP;
 266
 267 update placex set geometry_sector = geometry_sector(geometry);
 268 drop index idx_placex_pendingbylatlon;
 269 drop index idx_placex_interpolation;
 270 drop index idx_placex_sector;
 271 CREATE INDEX idx_placex_pendingbylatlon ON placex USING BTREE (geometry_index(geometry_sector,indexed,name),rank_search)
 272   where geometry_index(geometry_sector,indexed,name) IS NOT NULL;
 273 CREATE INDEX idx_placex_interpolation ON placex USING BTREE (geometry_sector) where indexed = false and class='place' and type='houses';
 274 CREATE INDEX idx_placex_sector ON placex USING BTREE (geometry_sector,rank_address,osm_type,osm_id);
 275
 276 DROP SEQUENCE seq_postcodes;
 277 CREATE SEQUENCE seq_postcodes start 1;
 278
 279 drop table import_polygon_error;
 280 CREATE TABLE import_polygon_error (
 281   osm_type char(1),
 282   osm_id INTEGER,
 283   class TEXT NOT NULL,
 284   type TEXT NOT NULL,
 285   name HSTORE,
 286   country_code varchar(2),
 287   updated timestamp,
 288   errormessage text
 289   );
 290 SELECT AddGeometryColumn('import_polygon_error', 'prevgeometry', 4326, 'GEOMETRY', 2);
 291 SELECT AddGeometryColumn('import_polygon_error', 'newgeometry', 4326, 'GEOMETRY', 2);
 292 CREATE INDEX idx_import_polygon_error_osmid ON import_polygon_error USING BTREE (osm_type, osm_id);
 293
 294 drop table import_polygon_delete;
 295 CREATE TABLE import_polygon_delete (
 296   osm_type char(1),
 297   osm_id INTEGER,
 298   class TEXT NOT NULL,
 299   type TEXT NOT NULL
 300   );
 301 CREATE INDEX idx_import_polygon_delete_osmid ON import_polygon_delete USING BTREE (osm_type, osm_id);
 302
 303 drop sequence file;
 304 CREATE SEQUENCE file start 1;
 305
 306 -- null table so it won't error
 307 -- deliberately no drop - importing the table is expensive and static, if it is already there better to avoid removing it
 308 CREATE TABLE wikipedia_article (
 309     language text NOT NULL,
 310     title text NOT NULL,
 311     langcount integer,
 312     othercount integer,
 313     totalcount integer,
 314     lat double precision,
 315     lon double precision,
 316     importance double precision,
 317     osm_type character(1),
 318     osm_id bigint
 319 );
 320 ALTER TABLE ONLY wikipedia_article ADD CONSTRAINT wikipedia_article_pkey PRIMARY KEY (language, title);
 321 CREATE INDEX idx_wikipedia_article_osm_id ON wikipedia_article USING btree (osm_type, osm_id);
 322
 323 CREATE TABLE wikipedia_redirect (
 324     language text,
 325     from_title text,
 326     to_title text
 327 );
 328 ALTER TABLE ONLY wikipedia_redirect ADD CONSTRAINT wikipedia_redirect_pkey PRIMARY KEY (language, from_title);
 329