lib-sql/tables.sql

   1 -- SPDX-License-Identifier: GPL-2.0-only
   2 --
   3 -- This file is part of Nominatim. (https://nominatim.org)
   4 --
   5 -- Copyright (C) 2022 by the Nominatim developer community.
   6 -- For a full list of authors see the git log.
   7
   8 drop table if exists import_status;
   9 CREATE TABLE import_status (
  10   lastimportdate timestamp with time zone NOT NULL,
  11   sequence_id integer,
  12   indexed boolean
  13   );
  14 GRANT SELECT ON import_status TO "{{config.DATABASE_WEBUSER}}" ;
  15
  16 drop table if exists import_osmosis_log;
  17 CREATE TABLE import_osmosis_log (
  18   batchend timestamp,
  19   batchseq integer,
  20   batchsize bigint,
  21   starttime timestamp,
  22   endtime timestamp,
  23   event text
  24   );
  25
  26 CREATE TABLE new_query_log (
  27   type text,
  28   starttime timestamp,
  29   ipaddress text,
  30   useragent text,
  31   language text,
  32   query text,
  33   searchterm text,
  34   endtime timestamp,
  35   results integer,
  36   format text,
  37   secret text
  38   );
  39 CREATE INDEX idx_new_query_log_starttime ON new_query_log USING BTREE (starttime);
  40 GRANT INSERT ON new_query_log TO "{{config.DATABASE_WEBUSER}}" ;
  41 GRANT UPDATE ON new_query_log TO "{{config.DATABASE_WEBUSER}}" ;
  42 GRANT SELECT ON new_query_log TO "{{config.DATABASE_WEBUSER}}" ;
  43
  44 GRANT SELECT ON TABLE country_name TO "{{config.DATABASE_WEBUSER}}";
  45
  46 DROP TABLE IF EXISTS nominatim_properties;
  47 CREATE TABLE nominatim_properties (
  48     property TEXT NOT NULL,
  49     value TEXT
  50 );
  51 GRANT SELECT ON TABLE nominatim_properties TO "{{config.DATABASE_WEBUSER}}";
  52
  53 drop table IF EXISTS location_area CASCADE;
  54 CREATE TABLE location_area (
  55   place_id BIGINT,
  56   keywords INTEGER[],
  57   partition SMALLINT,
  58   rank_search SMALLINT NOT NULL,
  59   rank_address SMALLINT NOT NULL,
  60   country_code VARCHAR(2),
  61   isguess BOOL,
  62   postcode TEXT,
  63   centroid GEOMETRY(Point, 4326),
  64   geometry GEOMETRY(Geometry, 4326)
  65   );
  66
  67 CREATE TABLE location_area_large () INHERITS (location_area);
  68
  69 DROP TABLE IF EXISTS location_area_country;
  70 CREATE TABLE location_area_country (
  71   place_id BIGINT,
  72   country_code varchar(2),
  73   geometry GEOMETRY(Geometry, 4326)
  74   ) {{db.tablespace.address_data}};
  75 CREATE INDEX idx_location_area_country_geometry ON location_area_country USING GIST (geometry) {{db.tablespace.address_index}};
  76
  77
  78 CREATE TABLE location_property_tiger (
  79   place_id BIGINT,
  80   parent_place_id BIGINT,
  81   startnumber INTEGER,
  82   endnumber INTEGER,
  83   step SMALLINT,
  84   partition SMALLINT,
  85   linegeo GEOMETRY,
  86   postcode TEXT);
  87 GRANT SELECT ON location_property_tiger TO "{{config.DATABASE_WEBUSER}}";
  88
  89 drop table if exists location_property_osmline;
  90 CREATE TABLE location_property_osmline (
  91     place_id BIGINT NOT NULL,
  92     osm_id BIGINT,
  93     parent_place_id BIGINT,
  94     geometry_sector INTEGER,
  95     indexed_date TIMESTAMP,
  96     startnumber INTEGER,
  97     endnumber INTEGER,
  98     step SMALLINT,
  99     partition SMALLINT,
 100     indexed_status SMALLINT,
 101     linegeo GEOMETRY,
 102     address HSTORE,
 103     token_info JSONB, -- custom column for tokenizer use only
 104     postcode TEXT,
 105     country_code VARCHAR(2)
 106   ){{db.tablespace.search_data}};
 107 CREATE UNIQUE INDEX idx_osmline_place_id ON location_property_osmline USING BTREE (place_id) {{db.tablespace.search_index}};
 108 CREATE INDEX idx_osmline_geometry_sector ON location_property_osmline USING BTREE (geometry_sector) {{db.tablespace.address_index}};
 109 CREATE INDEX idx_osmline_linegeo ON location_property_osmline USING GIST (linegeo) {{db.tablespace.search_index}}
 110   WHERE startnumber is not null;
 111 GRANT SELECT ON location_property_osmline TO "{{config.DATABASE_WEBUSER}}";
 112
 113 drop table IF EXISTS search_name;
 114 {% if not db.reverse_only %}
 115 CREATE TABLE search_name (
 116   place_id BIGINT,
 117   importance FLOAT,
 118   search_rank SMALLINT,
 119   address_rank SMALLINT,
 120   name_vector integer[],
 121   nameaddress_vector integer[],
 122   country_code varchar(2),
 123   centroid GEOMETRY(Geometry, 4326)
 124   ) {{db.tablespace.search_data}};
 125 CREATE INDEX idx_search_name_place_id ON search_name USING BTREE (place_id) {{db.tablespace.search_index}};
 126 GRANT SELECT ON search_name to "{{config.DATABASE_WEBUSER}}" ;
 127 {% endif %}
 128
 129 drop table IF EXISTS place_addressline;
 130 CREATE TABLE place_addressline (
 131   place_id BIGINT,
 132   address_place_id BIGINT,
 133   distance FLOAT,
 134   cached_rank_address SMALLINT,
 135   fromarea boolean,
 136   isaddress boolean
 137   ) {{db.tablespace.search_data}};
 138 CREATE INDEX idx_place_addressline_place_id on place_addressline USING BTREE (place_id) {{db.tablespace.search_index}};
 139
 140 drop table if exists placex;
 141 CREATE TABLE placex (
 142   place_id BIGINT NOT NULL,
 143   parent_place_id BIGINT,
 144   linked_place_id BIGINT,
 145   importance FLOAT,
 146   indexed_date TIMESTAMP,
 147   geometry_sector INTEGER,
 148   rank_address SMALLINT,
 149   rank_search SMALLINT,
 150   partition SMALLINT,
 151   indexed_status SMALLINT,
 152   LIKE place INCLUDING CONSTRAINTS,
 153   wikipedia TEXT, -- calculated wikipedia article name (language:title)
 154   token_info JSONB, -- custom column for tokenizer use only
 155   country_code varchar(2),
 156   housenumber TEXT,
 157   postcode TEXT,
 158   centroid GEOMETRY(Geometry, 4326)
 159   ) {{db.tablespace.search_data}};
 160 CREATE UNIQUE INDEX idx_place_id ON placex USING BTREE (place_id) {{db.tablespace.search_index}};
 161 CREATE INDEX idx_placex_node_osmid ON placex USING BTREE (osm_id) {{db.tablespace.search_index}} WHERE osm_type = 'N';
 162 CREATE INDEX idx_placex_way_osmid ON placex USING BTREE (osm_id) {{db.tablespace.search_index}} WHERE osm_type = 'W';
 163 CREATE INDEX idx_placex_relation_osmid ON placex USING BTREE (osm_id) {{db.tablespace.search_index}} WHERE osm_type = 'R';
 164 CREATE INDEX idx_placex_linked_place_id ON placex USING BTREE (linked_place_id) {{db.tablespace.address_index}} WHERE linked_place_id IS NOT NULL;
 165 CREATE INDEX idx_placex_geometry ON placex USING GIST (geometry) {{db.tablespace.search_index}};
 166 CREATE INDEX idx_placex_geometry_address_area_candidates ON placex
 167   USING gist (geometry) {{db.tablespace.address_index}}
 168   WHERE rank_address between 1 and 25
 169         and ST_GeometryType(geometry) in ('ST_Polygon','ST_MultiPolygon');
 170 CREATE INDEX idx_placex_geometry_buildings ON placex
 171   USING {{postgres.spgist_geom}} (geometry) {{db.tablespace.address_index}}
 172   WHERE address is not null and rank_search = 30
 173         and ST_GeometryType(geometry) in ('ST_Polygon','ST_MultiPolygon');
 174 CREATE INDEX idx_placex_geometry_placenode ON placex
 175   USING {{postgres.spgist_geom}} (geometry) {{db.tablespace.address_index}}
 176   WHERE osm_type = 'N' and rank_search < 26
 177         and class = 'place' and type != 'postcode' and linked_place_id is null;
 178 CREATE INDEX idx_placex_wikidata on placex USING BTREE ((extratags -> 'wikidata')) {{db.tablespace.address_index}} WHERE extratags ? 'wikidata' and class = 'place' and osm_type = 'N' and rank_search < 26;
 179
 180 -- The following two indexes function as a todo list for indexing.
 181
 182 CREATE INDEX idx_placex_rank_address_sector ON placex
 183   USING BTREE (rank_address, geometry_sector) {{db.tablespace.address_index}}
 184   WHERE indexed_status > 0;
 185
 186 CREATE INDEX idx_placex_rank_boundaries_sector ON placex
 187   USING BTREE (rank_search, geometry_sector) {{db.tablespace.address_index}}
 188   WHERE class = 'boundary' and type = 'administrative'
 189         and indexed_status > 0;
 190
 191
 192 DROP SEQUENCE IF EXISTS seq_place;
 193 CREATE SEQUENCE seq_place start 1;
 194 GRANT SELECT on placex to "{{config.DATABASE_WEBUSER}}" ;
 195 GRANT SELECT on place_addressline to "{{config.DATABASE_WEBUSER}}" ;
 196 GRANT SELECT ON planet_osm_ways to "{{config.DATABASE_WEBUSER}}" ;
 197 GRANT SELECT ON planet_osm_rels to "{{config.DATABASE_WEBUSER}}" ;
 198 GRANT SELECT on location_area to "{{config.DATABASE_WEBUSER}}" ;
 199
 200 -- Table for synthetic postcodes.
 201 DROP TABLE IF EXISTS location_postcode;
 202 CREATE TABLE location_postcode (
 203   place_id BIGINT,
 204   parent_place_id BIGINT,
 205   rank_search SMALLINT,
 206   rank_address SMALLINT,
 207   indexed_status SMALLINT,
 208   indexed_date TIMESTAMP,
 209   country_code varchar(2),
 210   postcode TEXT,
 211   geometry GEOMETRY(Geometry, 4326)
 212   );
 213 CREATE UNIQUE INDEX idx_postcode_id ON location_postcode USING BTREE (place_id) {{db.tablespace.search_index}};
 214 CREATE INDEX idx_postcode_geometry ON location_postcode USING GIST (geometry) {{db.tablespace.address_index}};
 215 GRANT SELECT ON location_postcode TO "{{config.DATABASE_WEBUSER}}" ;
 216
 217 DROP TABLE IF EXISTS import_polygon_error;
 218 CREATE TABLE import_polygon_error (
 219   osm_id BIGINT,
 220   osm_type CHAR(1),
 221   class TEXT NOT NULL,
 222   type TEXT NOT NULL,
 223   name HSTORE,
 224   country_code varchar(2),
 225   updated timestamp,
 226   errormessage text,
 227   prevgeometry GEOMETRY(Geometry, 4326),
 228   newgeometry GEOMETRY(Geometry, 4326)
 229   );
 230 CREATE INDEX idx_import_polygon_error_osmid ON import_polygon_error USING BTREE (osm_type, osm_id);
 231 GRANT SELECT ON import_polygon_error TO "{{config.DATABASE_WEBUSER}}";
 232
 233 DROP TABLE IF EXISTS import_polygon_delete;
 234 CREATE TABLE import_polygon_delete (
 235   osm_id BIGINT,
 236   osm_type CHAR(1),
 237   class TEXT NOT NULL,
 238   type TEXT NOT NULL
 239   );
 240 CREATE INDEX idx_import_polygon_delete_osmid ON import_polygon_delete USING BTREE (osm_type, osm_id);
 241 GRANT SELECT ON import_polygon_delete TO "{{config.DATABASE_WEBUSER}}";
 242
 243 DROP SEQUENCE IF EXISTS file;
 244 CREATE SEQUENCE file start 1;
 245
 246 -- null table so it won't error
 247 -- deliberately no drop - importing the table is expensive and static, if it is already there better to avoid removing it
 248 CREATE TABLE wikipedia_article (
 249     language text NOT NULL,
 250     title text NOT NULL,
 251     langcount integer,
 252     othercount integer,
 253     totalcount integer,
 254     lat double precision,
 255     lon double precision,
 256     importance double precision,
 257     osm_type character(1),
 258     osm_id bigint,
 259     wd_page_title text,
 260     instance_of text
 261 );
 262 ALTER TABLE ONLY wikipedia_article ADD CONSTRAINT wikipedia_article_pkey PRIMARY KEY (language, title);
 263 CREATE INDEX idx_wikipedia_article_osm_id ON wikipedia_article USING btree (osm_type, osm_id);
 264
 265 CREATE TABLE wikipedia_redirect (
 266     language text,
 267     from_title text,
 268     to_title text
 269 );
 270 ALTER TABLE ONLY wikipedia_redirect ADD CONSTRAINT wikipedia_redirect_pkey PRIMARY KEY (language, from_title);
 271
 272 -- osm2pgsql does not create indexes on the middle tables for Nominatim
 273 -- Add one for lookup of associated street relations.
 274 CREATE INDEX planet_osm_rels_parts_associated_idx ON planet_osm_rels USING gin(parts) WHERE tags @> ARRAY['associatedStreet'];
 275
 276 -- Needed for lookups if a node is part of an interpolation.
 277 CREATE INDEX IF NOT EXISTS idx_place_interpolations
 278     ON place USING gist(geometry) {{db.tablespace.address_index}}
 279     WHERE osm_type = 'W' and address ? 'interpolation';
 280
 281 GRANT SELECT ON table country_osm_grid to "{{config.DATABASE_WEBUSER}}";