]> git.openstreetmap.org Git - nominatim.git/blob - sql/tables.sql
more multi-processor improvements
[nominatim.git] / sql / tables.sql
1 drop table import_status;
2 CREATE TABLE import_status (
3   lastimportdate timestamp NOT NULL
4   );
5 GRANT SELECT ON import_status TO "www-data" ;
6
7 drop table import_osmosis_log;
8 CREATE TABLE import_osmosis_log (
9   batchend timestamp,
10   batchsize integer,
11   starttime timestamp,
12   endtime timestamp,
13   event text
14   );
15
16 --drop table IF EXISTS query_log;
17 CREATE TABLE query_log (
18   starttime timestamp,
19   query text,
20   ipaddress text,
21   endtime timestamp,
22   results integer
23   );
24 CREATE INDEX idx_query_log ON query_log USING BTREE (starttime);
25 GRANT INSERT ON query_log TO "www-data" ;
26
27 CREATE TABLE new_query_log (
28   type text,
29   starttime timestamp,
30   ipaddress text,
31   useragent text,
32   language text,
33   query text,
34   endtime timestamp,
35   results integer,
36   format text,
37   secret text
38   );
39 CREATE INDEX idx_new_query_log_starttime ON new_query_log USING BTREE (starttime);
40 GRANT INSERT ON new_query_log TO "www-data" ;
41 GRANT UPDATE ON new_query_log TO "www-data" ;
42 GRANT SELECT ON new_query_log TO "www-data" ;
43
44 create view vw_search_query_log as SELECT substr(query, 1, 50) AS query, starttime, endtime - starttime AS duration, substr(useragent, 1, 20) as 
45 useragent, language, results, ipaddress FROM new_query_log WHERE type = 'search' ORDER BY starttime DESC;
46
47 --drop table IF EXISTS report_log;
48 CREATE TABLE report_log (
49   starttime timestamp,
50   ipaddress text,
51   query text,
52   description text,
53   email text
54   );
55 GRANT INSERT ON report_log TO "www-data" ;
56
57 drop table IF EXISTS word;
58 CREATE TABLE word (
59   word_id INTEGER,
60   word_token text,
61   word_trigram text,
62   word text,
63   class text,
64   type text,
65   country_code varchar(2),
66   search_name_count INTEGER,
67   operator TEXT
68   );
69 SELECT AddGeometryColumn('word', 'location', 4326, 'GEOMETRY', 2);
70 CREATE INDEX idx_word_word_id on word USING BTREE (word_id);
71 CREATE INDEX idx_word_word_token on word USING BTREE (word_token);
72 CREATE INDEX idx_word_trigram ON word USING gin(word_trigram gin_trgm_ops);
73 GRANT SELECT ON word TO "www-data" ;
74 DROP SEQUENCE seq_word;
75 CREATE SEQUENCE seq_word start 1;
76
77 drop table IF EXISTS location_area CASCADE;
78 CREATE TABLE location_area (
79   partition varchar(10),
80   place_id INTEGER,
81   country_code VARCHAR(2), 
82   keywords INTEGER[],
83   rank_search INTEGER NOT NULL,
84   rank_address INTEGER NOT NULL,
85   isguess BOOL
86   );
87 SELECT AddGeometryColumn('location_area', 'centroid', 4326, 'POINT', 2);
88 SELECT AddGeometryColumn('location_area', 'geometry', 4326, 'GEOMETRY', 2);
89
90 CREATE TABLE location_area_large () INHERITS (location_area);
91 CREATE TABLE location_area_roadnear () INHERITS (location_area);
92 CREATE TABLE location_area_roadfar () INHERITS (location_area);
93
94 drop table IF EXISTS search_name;
95 CREATE TABLE search_name (
96   place_id INTEGER,
97   search_rank integer,
98   address_rank integer,
99   importance FLOAT,
100   country_code varchar(2),
101   name_vector integer[],
102   nameaddress_vector integer[]
103   );
104 CREATE INDEX search_name_name_vector_idx ON search_name USING GIN (name_vector gin__int_ops);
105 CREATE INDEX searchnameplacesearch_search_nameaddress_vector_idx ON search_name USING GIN (nameaddress_vector gin__int_ops);
106 SELECT AddGeometryColumn('search_name', 'centroid', 4326, 'GEOMETRY', 2);
107 CREATE INDEX idx_search_name_centroid ON search_name USING GIST (centroid);
108 CREATE INDEX idx_search_name_place_id ON search_name USING BTREE (place_id);
109
110 drop table IF EXISTS place_addressline;
111 CREATE TABLE place_addressline (
112   place_id INTEGER,
113   address_place_id INTEGER,
114   fromarea boolean,
115   isaddress boolean,
116   distance float,
117   cached_rank_address integer
118   );
119 CREATE INDEX idx_place_addressline_place_id on place_addressline USING BTREE (place_id);
120 CREATE INDEX idx_place_addressline_address_place_id on place_addressline USING BTREE (address_place_id);
121
122 drop table IF EXISTS place_boundingbox CASCADE;
123 CREATE TABLE place_boundingbox (
124   place_id INTEGER,
125   minlat float,
126   maxlat float,
127   minlon float,
128   maxlon float,
129   numfeatures integer,
130   area float
131   );
132 CREATE INDEX idx_place_boundingbox_place_id on place_boundingbox USING BTREE (place_id);
133 SELECT AddGeometryColumn('place_boundingbox', 'outline', 4326, 'GEOMETRY', 2);
134 CREATE INDEX idx_place_boundingbox_outline ON place_boundingbox USING GIST (outline);
135 GRANT SELECT on place_boundingbox to "www-data" ;
136 GRANT INSERT on place_boundingbox to "www-data" ;
137
138 drop table IF EXISTS reverse_cache;
139 CREATE TABLE reverse_cache (
140   latlonzoomid integer,
141   country_code varchar(2),
142   place_id INTEGER
143   );
144 GRANT SELECT on reverse_cache to "www-data" ;
145 GRANT INSERT on reverse_cache to "www-data" ;
146 CREATE INDEX idx_reverse_cache_latlonzoomid ON reverse_cache USING BTREE (latlonzoomid);
147
148 drop table country;
149 CREATE TABLE country (
150   country_code varchar(2),
151   country_name hstore,
152   country_default_language_code varchar(2)
153   );
154 SELECT AddGeometryColumn('country', 'geometry', 4326, 'POLYGON', 2);
155 insert into country select iso3166::varchar(2), 'name:en'->cntry_name, null, 
156   ST_Transform(geometryn(the_geom, generate_series(1, numgeometries(the_geom))), 4326) from worldboundaries;
157 CREATE INDEX idx_country_country_code ON country USING BTREE (country_code);
158 CREATE INDEX idx_country_geometry ON country USING GIST (geometry);
159
160 drop table placex;
161 CREATE TABLE placex (
162   place_id INTEGER NOT NULL,
163   partition varchar(10),
164   osm_type char(1),
165   osm_id INTEGER,
166   class TEXT NOT NULL,
167   type TEXT NOT NULL,
168   name HSTORE,
169   admin_level INTEGER,
170   housenumber TEXT,
171   street TEXT,
172   isin TEXT,
173   postcode TEXT,
174   country_code varchar(2),
175   extratags HSTORE,
176   parent_place_id INTEGER,
177   linked_place_id INTEGER,
178   rank_address INTEGER,
179   rank_search INTEGER,
180   indexed_status INTEGER,
181   indexed_date TIMESTAMP,
182   geometry_sector INTEGER
183   );
184 SELECT AddGeometryColumn('placex', 'geometry', 4326, 'GEOMETRY', 2);
185 CREATE UNIQUE INDEX idx_place_id ON placex USING BTREE (place_id);
186 CREATE INDEX idx_placex_osmid ON placex USING BTREE (osm_type, osm_id);
187 CREATE INDEX idx_placex_rank_search ON placex USING BTREE (rank_search);
188 CREATE INDEX idx_placex_rank_address ON placex USING BTREE (rank_address);
189 CREATE INDEX idx_placex_geometry ON placex USING GIST (geometry);
190
191 --CREATE INDEX idx_placex_indexed ON placex USING BTREE (indexed);
192
193 CREATE INDEX idx_placex_pending ON placex USING BTREE (rank_search) where indexed_status > 0;
194 CREATE INDEX idx_placex_pendingsector ON placex USING BTREE (rank_search,geometry_sector) where indexed_status > 0;
195
196 --CREATE INDEX idx_placex_pendingbylatlon ON placex USING BTREE (geometry_index(geometry_sector,indexed,name),rank_search)  where geometry_index(geometry_sector,indexed,name) IS NOT NULL;
197
198 CREATE INDEX idx_placex_parent_place_id ON placex USING BTREE (parent_place_id) where parent_place_id IS NOT NULL;
199 CREATE INDEX idx_placex_interpolation ON placex USING BTREE (geometry_sector) where indexed_status > 0 and class='place' and type='houses';
200
201 CREATE INDEX idx_placex_sector ON placex USING BTREE (geometry_sector,rank_address,osm_type,osm_id);
202 CLUSTER placex USING idx_placex_sector;
203
204 DROP SEQUENCE seq_place;
205 CREATE SEQUENCE seq_place start 1;
206 GRANT SELECT on placex to "www-data" ;
207 GRANT UPDATE ON placex to "www-data" ;
208 GRANT SELECT ON search_name to "www-data" ;
209 GRANT DELETE on search_name to "www-data" ;
210 GRANT INSERT on search_name to "www-data" ;
211 GRANT SELECT on place_addressline to "www-data" ;
212 GRANT INSERT ON place_addressline to "www-data" ;
213 GRANT DELETE on place_addressline to "www-data" ;
214 GRANT SELECT ON seq_word to "www-data" ;
215 GRANT UPDATE ON seq_word to "www-data" ;
216 GRANT INSERT ON word to "www-data" ;
217 GRANT SELECT ON planet_osm_ways to "www-data" ;
218 GRANT SELECT ON planet_osm_rels to "www-data" ;
219 GRANT SELECT on location_area to "www-data" ;
220 GRANT SELECT on country to "www-data" ;
221
222 -- insert creates the location tagbles, creates location indexes if indexed == true
223 CREATE TRIGGER placex_before_insert BEFORE INSERT ON placex
224     FOR EACH ROW EXECUTE PROCEDURE placex_insert();
225
226 -- update insert creates the location tables
227 CREATE TRIGGER placex_before_update BEFORE UPDATE ON placex
228     FOR EACH ROW EXECUTE PROCEDURE placex_update();
229
230 -- diff update triggers
231 CREATE TRIGGER placex_before_delete AFTER DELETE ON placex
232     FOR EACH ROW EXECUTE PROCEDURE placex_delete();
233 CREATE TRIGGER place_before_delete BEFORE DELETE ON place
234     FOR EACH ROW EXECUTE PROCEDURE place_delete();
235 CREATE TRIGGER place_before_insert BEFORE INSERT ON place
236     FOR EACH ROW EXECUTE PROCEDURE place_insert();
237
238 alter table placex add column geometry_sector INTEGER;
239 alter table placex add column indexed_status INTEGER;
240 alter table placex add column indexed_date TIMESTAMP;
241
242 update placex set geometry_sector = geometry_sector(geometry);
243 drop index idx_placex_pendingbylatlon;
244 drop index idx_placex_interpolation;
245 drop index idx_placex_sector;
246 CREATE INDEX idx_placex_pendingbylatlon ON placex USING BTREE (geometry_index(geometry_sector,indexed,name),rank_search) 
247   where geometry_index(geometry_sector,indexed,name) IS NOT NULL;
248 CREATE INDEX idx_placex_interpolation ON placex USING BTREE (geometry_sector) where indexed = false and class='place' and type='houses';
249 CREATE INDEX idx_placex_sector ON placex USING BTREE (geometry_sector,rank_address,osm_type,osm_id);