sql/tables.sql

   1 drop table import_status;
   2 CREATE TABLE import_status (
   3   lastimportdate timestamp NOT NULL
   4   );
   5 GRANT SELECT ON import_status TO "www-data" ;
   6
   7 drop table import_osmosis_log;
   8 CREATE TABLE import_osmosis_log (
   9   batchend timestamp,
  10   batchsize integer,
  11   starttime timestamp,
  12   endtime timestamp,
  13   event text
  14   );
  15
  16 drop table import_npi_log;
  17 CREATE TABLE import_npi_log (
  18   npiid integer,
  19   batchend timestamp,
  20   batchsize integer,
  21   starttime timestamp,
  22   endtime timestamp,
  23   event text
  24   );
  25
  26 --drop table IF EXISTS query_log;
  27 CREATE TABLE query_log (
  28   starttime timestamp,
  29   query text,
  30   ipaddress text,
  31   endtime timestamp,
  32   results integer
  33   );
  34 CREATE INDEX idx_query_log ON query_log USING BTREE (starttime);
  35 GRANT INSERT ON query_log TO "www-data" ;
  36 GRANT UPDATE ON query_log TO "www-data" ;
  37
  38 CREATE TABLE new_query_log (
  39   type text,
  40   starttime timestamp,
  41   ipaddress text,
  42   useragent text,
  43   language text,
  44   query text,
  45   endtime timestamp,
  46   results integer,
  47   format text,
  48   secret text
  49   );
  50 CREATE INDEX idx_new_query_log_starttime ON new_query_log USING BTREE (starttime);
  51 GRANT INSERT ON new_query_log TO "www-data" ;
  52 GRANT UPDATE ON new_query_log TO "www-data" ;
  53 GRANT SELECT ON new_query_log TO "www-data" ;
  54
  55 create view vw_search_query_log as SELECT substr(query, 1, 50) AS query, starttime, endtime - starttime AS duration, substr(useragent, 1, 20) as
  56 useragent, language, results, ipaddress FROM new_query_log WHERE type = 'search' ORDER BY starttime DESC;
  57
  58 --drop table IF EXISTS report_log;
  59 CREATE TABLE report_log (
  60   starttime timestamp,
  61   ipaddress text,
  62   query text,
  63   description text,
  64   email text
  65   );
  66 GRANT INSERT ON report_log TO "www-data" ;
  67
  68 drop table IF EXISTS word;
  69 CREATE TABLE word (
  70   word_id INTEGER,
  71   word_token text,
  72   word_trigram text,
  73   word text,
  74   class text,
  75   type text,
  76   country_code varchar(2),
  77   search_name_count INTEGER,
  78   operator TEXT
  79   );
  80 SELECT AddGeometryColumn('word', 'location', 4326, 'GEOMETRY', 2);
  81 CREATE INDEX idx_word_word_token on word USING BTREE (word_token);
  82 --CREATE INDEX idx_word_trigram ON word USING gin(word_trigram gin_trgm_ops) WITH (fastupdate = off);
  83 GRANT SELECT ON word TO "www-data" ;
  84 DROP SEQUENCE seq_word;
  85 CREATE SEQUENCE seq_word start 1;
  86
  87 drop table IF EXISTS location_area CASCADE;
  88 CREATE TABLE location_area (
  89   partition integer,
  90   place_id BIGINT,
  91   country_code VARCHAR(2),
  92   keywords INTEGER[],
  93   rank_search INTEGER NOT NULL,
  94   rank_address INTEGER NOT NULL,
  95   isguess BOOL
  96   );
  97 SELECT AddGeometryColumn('location_area', 'centroid', 4326, 'POINT', 2);
  98 SELECT AddGeometryColumn('location_area', 'geometry', 4326, 'GEOMETRY', 2);
  99
 100 CREATE TABLE location_area_large () INHERITS (location_area);
 101 CREATE TABLE location_area_roadnear () INHERITS (location_area);
 102 CREATE TABLE location_area_roadfar () INHERITS (location_area);
 103
 104 drop table IF EXISTS location_property CASCADE;
 105 CREATE TABLE location_property (
 106   place_id BIGINT,
 107   partition integer,
 108   parent_place_id BIGINT,
 109   housenumber TEXT,
 110   postcode TEXT
 111   );
 112 SELECT AddGeometryColumn('location_property', 'centroid', 4326, 'POINT', 2);
 113
 114 CREATE TABLE location_property_aux () INHERITS (location_property);
 115 CREATE INDEX idx_location_property_aux_place_id ON location_property_aux USING BTREE (place_id);
 116 CREATE INDEX idx_location_property_aux_parent_place_id ON location_property_aux USING BTREE (parent_place_id);
 117 CREATE INDEX idx_location_property_aux_housenumber_parent_place_id ON location_property_aux USING BTREE (parent_place_id, housenumber);
 118 GRANT SELECT ON location_property_aux TO "www-data";
 119
 120 CREATE TABLE location_property_tiger () INHERITS (location_property);
 121 CREATE INDEX idx_location_property_tiger_place_id ON location_property_tiger USING BTREE (place_id);
 122 CREATE INDEX idx_location_property_tiger_parent_place_id ON location_property_tiger USING BTREE (parent_place_id);
 123 CREATE INDEX idx_location_property_tiger_housenumber_parent_place_id ON location_property_tiger USING BTREE (parent_place_id, housenumber);
 124 GRANT SELECT ON location_property_tiger TO "www-data";
 125
 126 drop table IF EXISTS search_name_blank CASCADE;
 127 CREATE TABLE search_name_blank (
 128   place_id BIGINT,
 129   search_rank integer,
 130   address_rank integer,
 131   importance FLOAT,
 132   country_code varchar(2),
 133   name_vector integer[],
 134   nameaddress_vector integer[]
 135   );
 136 SELECT AddGeometryColumn('search_name_blank', 'centroid', 4326, 'GEOMETRY', 2);
 137
 138 drop table IF EXISTS search_name;
 139 CREATE TABLE search_name () INHERITS (search_name_blank);
 140 CREATE INDEX idx_search_name_place_id ON search_name USING BTREE (place_id);
 141
 142 drop table IF EXISTS place_addressline;
 143 CREATE TABLE place_addressline (
 144   place_id BIGINT,
 145   address_place_id BIGINT,
 146   fromarea boolean,
 147   isaddress boolean,
 148   distance float,
 149   cached_rank_address integer
 150   );
 151 CREATE INDEX idx_place_addressline_place_id on place_addressline USING BTREE (place_id);
 152
 153 drop table IF EXISTS place_boundingbox CASCADE;
 154 CREATE TABLE place_boundingbox (
 155   place_id BIGINT,
 156   minlat float,
 157   maxlat float,
 158   minlon float,
 159   maxlon float,
 160   numfeatures integer,
 161   area float
 162   );
 163 SELECT AddGeometryColumn('place_boundingbox', 'outline', 4326, 'GEOMETRY', 2);
 164 GRANT SELECT on place_boundingbox to "www-data" ;
 165 GRANT INSERT on place_boundingbox to "www-data" ;
 166
 167 drop table IF EXISTS reverse_cache;
 168 CREATE TABLE reverse_cache (
 169   latlonzoomid integer,
 170   country_code varchar(2),
 171   place_id BIGINT
 172   );
 173 GRANT SELECT on reverse_cache to "www-data" ;
 174 GRANT INSERT on reverse_cache to "www-data" ;
 175 CREATE INDEX idx_reverse_cache_latlonzoomid ON reverse_cache USING BTREE (latlonzoomid);
 176
 177 drop table country;
 178 CREATE TABLE country (
 179   country_code varchar(2),
 180   country_name hstore,
 181   country_default_language_code varchar(2)
 182   );
 183 SELECT AddGeometryColumn('country', 'geometry', 4326, 'POLYGON', 2);
 184 insert into country select iso3166::varchar(2), 'name:en'->cntry_name, null,
 185   ST_Transform(geometryn(the_geom, generate_series(1, numgeometries(the_geom))), 4326) from worldboundaries;
 186 CREATE INDEX idx_country_country_code ON country USING BTREE (country_code);
 187 CREATE INDEX idx_country_geometry ON country USING GIST (geometry);
 188
 189 drop table placex;
 190 CREATE TABLE placex (
 191   place_id BIGINT NOT NULL,
 192   partition integer,
 193   LIKE place INCLUDING CONSTRAINTS,
 194   parent_place_id BIGINT,
 195   linked_place_id BIGINT,
 196   rank_address INTEGER,
 197   rank_search INTEGER,
 198   importance FLOAT,
 199   indexed_status INTEGER,
 200   indexed_date TIMESTAMP,
 201   wikipedia TEXT, -- calculated wikipedia article name (language:title)
 202   geometry_sector INTEGER
 203   );
 204 SELECT AddGeometryColumn('placex', 'centroid', 4326, 'GEOMETRY', 2);
 205 CREATE UNIQUE INDEX idx_place_id ON placex USING BTREE (place_id);
 206 CREATE INDEX idx_placex_osmid ON placex USING BTREE (osm_type, osm_id);
 207 CREATE INDEX idx_placex_linked_place_id ON placex USING BTREE (linked_place_id);
 208 CREATE INDEX idx_placex_rank_search ON placex USING BTREE (rank_search, geometry_sector);
 209 CREATE INDEX idx_placex_geometry ON placex USING GIST (geometry);
 210 CREATE INDEX idx_placex_adminname on placex USING BTREE (make_standard_name(name->'name'),rank_search) WHERE osm_type='N' and rank_search < 26;
 211
 212 --CREATE INDEX idx_placex_indexed ON placex USING BTREE (indexed);
 213
 214 --CREATE INDEX idx_placex_pendingbylatlon ON placex USING BTREE (geometry_index(geometry_sector,indexed,name),rank_search)  where geometry_index(geometry_sector,indexed,name) IS NOT NULL;
 215
 216 DROP SEQUENCE seq_place;
 217 CREATE SEQUENCE seq_place start 1;
 218 GRANT SELECT on placex to "www-data" ;
 219 GRANT UPDATE ON placex to "www-data" ;
 220 GRANT SELECT ON search_name to "www-data" ;
 221 GRANT DELETE on search_name to "www-data" ;
 222 GRANT INSERT on search_name to "www-data" ;
 223 GRANT SELECT on place_addressline to "www-data" ;
 224 GRANT INSERT ON place_addressline to "www-data" ;
 225 GRANT DELETE on place_addressline to "www-data" ;
 226 GRANT SELECT ON seq_word to "www-data" ;
 227 GRANT UPDATE ON seq_word to "www-data" ;
 228 GRANT INSERT ON word to "www-data" ;
 229 GRANT SELECT ON planet_osm_ways to "www-data" ;
 230 GRANT SELECT ON planet_osm_rels to "www-data" ;
 231 GRANT SELECT on location_area to "www-data" ;
 232 GRANT SELECT on country to "www-data" ;
 233
 234 -- insert creates the location tagbles, creates location indexes if indexed == true
 235 CREATE TRIGGER placex_before_insert BEFORE INSERT ON placex
 236     FOR EACH ROW EXECUTE PROCEDURE placex_insert();
 237
 238 -- update insert creates the location tables
 239 CREATE TRIGGER placex_before_update BEFORE UPDATE ON placex
 240     FOR EACH ROW EXECUTE PROCEDURE placex_update();
 241
 242 -- diff update triggers
 243 CREATE TRIGGER placex_before_delete AFTER DELETE ON placex
 244     FOR EACH ROW EXECUTE PROCEDURE placex_delete();
 245 CREATE TRIGGER place_before_delete BEFORE DELETE ON place
 246     FOR EACH ROW EXECUTE PROCEDURE place_delete();
 247 CREATE TRIGGER place_before_insert BEFORE INSERT ON place
 248     FOR EACH ROW EXECUTE PROCEDURE place_insert();
 249
 250 alter table placex add column geometry_sector INTEGER;
 251 alter table placex add column indexed_status INTEGER;
 252 alter table placex add column indexed_date TIMESTAMP;
 253
 254 update placex set geometry_sector = geometry_sector(geometry);
 255 drop index idx_placex_pendingbylatlon;
 256 drop index idx_placex_interpolation;
 257 drop index idx_placex_sector;
 258 CREATE INDEX idx_placex_pendingbylatlon ON placex USING BTREE (geometry_index(geometry_sector,indexed,name),rank_search)
 259   where geometry_index(geometry_sector,indexed,name) IS NOT NULL;
 260 CREATE INDEX idx_placex_interpolation ON placex USING BTREE (geometry_sector) where indexed = false and class='place' and type='houses';
 261 CREATE INDEX idx_placex_sector ON placex USING BTREE (geometry_sector,rank_address,osm_type,osm_id);
 262
 263 DROP SEQUENCE seq_postcodes;
 264 CREATE SEQUENCE seq_postcodes start 1;
 265
 266 drop table import_polygon_error;
 267 CREATE TABLE import_polygon_error (
 268   osm_type char(1),
 269   osm_id INTEGER,
 270   class TEXT NOT NULL,
 271   type TEXT NOT NULL,
 272   name HSTORE,
 273   country_code varchar(2),
 274   updated timestamp,
 275   errormessage text
 276   );
 277 SELECT AddGeometryColumn('import_polygon_error', 'prevgeometry', 4326, 'GEOMETRY', 2);
 278 SELECT AddGeometryColumn('import_polygon_error', 'newgeometry', 4326, 'GEOMETRY', 2);
 279 CREATE INDEX idx_import_polygon_error_osmid ON import_polygon_error USING BTREE (osm_type, osm_id);
 280
 281 drop table import_polygon_delete;
 282 CREATE TABLE import_polygon_delete (
 283   osm_type char(1),
 284   osm_id INTEGER,
 285   class TEXT NOT NULL,
 286   type TEXT NOT NULL
 287   );
 288 CREATE INDEX idx_import_polygon_delete_osmid ON import_polygon_delete USING BTREE (osm_type, osm_id);
 289
 290 drop sequence file;
 291 CREATE SEQUENCE file start 1;
 292
 293 -- null table so it won't error
 294 -- deliberately no drop - importing the table is expensive and static, if it is already there better to avoid removing it
 295 CREATE TABLE wikipedia_article (
 296     language text NOT NULL,
 297     title text NOT NULL,
 298     langcount integer,
 299     othercount integer,
 300     totalcount integer,
 301     lat double precision,
 302     lon double precision,
 303     importance double precision,
 304     osm_type character(1),
 305     osm_id bigint
 306 );
 307 ALTER TABLE ONLY wikipedia_article ADD CONSTRAINT wikipedia_article_pkey PRIMARY KEY (language, title);
 308 CREATE INDEX idx_wikipedia_article_osm_id ON wikipedia_article USING btree (osm_type, osm_id);
 309
 310 CREATE TABLE wikipedia_redirect (
 311     language text,
 312     from_title text,
 313     to_title text
 314 );
 315 ALTER TABLE ONLY wikipedia_redirect ADD CONSTRAINT wikipedia_redirect_pkey PRIMARY KEY (language, from_title);
 316