]> git.openstreetmap.org Git - nominatim.git/blob - sql/functions/placex_triggers.sql
Make SQL debug statements execute again
[nominatim.git] / sql / functions / placex_triggers.sql
1 -- Trigger functions for the placex table.
2
3 -- Find the parent road of a POI.
4 --
5 -- \returns Place ID of parent object or NULL if none
6 --
7 -- Copy data from linked items (POIs on ways, addr:street links, relations).
8 --
9 CREATE OR REPLACE FUNCTION find_parent_for_poi(poi_osm_type CHAR(1),
10                                                poi_osm_id BIGINT,
11                                                poi_partition SMALLINT,
12                                                bbox GEOMETRY,
13                                                addr_street TEXT,
14                                                addr_place TEXT,
15                                                fallback BOOL = true)
16   RETURNS BIGINT
17   AS $$
18 DECLARE
19   parent_place_id BIGINT DEFAULT NULL;
20   location RECORD;
21   parent RECORD;
22 BEGIN
23     --DEBUG: RAISE WARNING 'finding street for % %', poi_osm_type, poi_osm_id;
24
25     -- Is this object part of an associatedStreet relation?
26     FOR location IN
27       SELECT members FROM planet_osm_rels
28       WHERE parts @> ARRAY[poi_osm_id]
29         and members @> ARRAY[lower(poi_osm_type) || poi_osm_id]
30         and tags @> ARRAY['associatedStreet']
31     LOOP
32       FOR i IN 1..array_upper(location.members, 1) BY 2 LOOP
33         IF location.members[i+1] = 'street' THEN
34           FOR parent IN
35             SELECT place_id from placex
36              WHERE osm_type = 'W' and osm_id = substring(location.members[i],2)::bigint
37                and name is not null
38                and rank_search between 26 and 27
39           LOOP
40             RETURN parent.place_id;
41           END LOOP;
42         END IF;
43       END LOOP;
44     END LOOP;
45
46     parent_place_id := find_parent_for_address(addr_street, addr_place,
47                                                poi_partition, bbox);
48     IF parent_place_id is not null THEN
49       RETURN parent_place_id;
50     END IF;
51
52     IF poi_osm_type = 'N' THEN
53       -- Is this node part of an interpolation?
54       FOR parent IN
55         SELECT q.parent_place_id
56           FROM location_property_osmline q, planet_osm_ways x
57          WHERE q.linegeo && bbox and x.id = q.osm_id
58                and poi_osm_id = any(x.nodes)
59          LIMIT 1
60       LOOP
61         --DEBUG: RAISE WARNING 'Get parent from interpolation: %', parent.parent_place_id;
62         RETURN parent.parent_place_id;
63       END LOOP;
64
65       -- Is this node part of any other way?
66       FOR location IN
67         SELECT p.place_id, p.osm_id, p.rank_search, p.address,
68                coalesce(p.centroid, ST_Centroid(p.geometry)) as centroid
69           FROM placex p, planet_osm_ways w
70          WHERE p.osm_type = 'W' and p.rank_search >= 26
71                and p.geometry && bbox
72                and w.id = p.osm_id and poi_osm_id = any(w.nodes)
73       LOOP
74         --DEBUG: RAISE WARNING 'Node is part of way % ', location.osm_id;
75
76         -- Way IS a road then we are on it - that must be our road
77         IF location.rank_search < 28 THEN
78           --DEBUG: RAISE WARNING 'node in way that is a street %',location;
79           return location.place_id;
80         END IF;
81
82         SELECT find_parent_for_poi('W', location.osm_id, poi_partition,
83                                    location.centroid,
84                                    location.address->'street',
85                                    location.address->'place',
86                                    false)
87           INTO parent_place_id;
88         IF parent_place_id is not null THEN
89           RETURN parent_place_id;
90         END IF;
91       END LOOP;
92     END IF;
93
94     IF fallback THEN
95       IF ST_Area(bbox) < 0.01 THEN
96         -- for smaller features get the nearest road
97         SELECT getNearestRoadPlaceId(poi_partition, bbox) INTO parent_place_id;
98         --DEBUG: RAISE WARNING 'Checked for nearest way (%)', parent_place_id;
99       ELSE
100         -- for larger features simply find the area with the largest rank that
101         -- contains the bbox, only use addressable features
102         FOR location IN
103           SELECT place_id FROM placex
104             WHERE bbox @ geometry AND _ST_Covers(geometry, ST_Centroid(bbox))
105                   AND rank_address between 5 and 25
106             ORDER BY rank_address desc
107         LOOP
108             RETURN location.place_id;
109         END LOOP;
110       END IF;
111     END IF;
112
113     RETURN parent_place_id;
114 END;
115 $$
116 LANGUAGE plpgsql STABLE;
117
118 -- Try to find a linked place for the given object.
119 CREATE OR REPLACE FUNCTION find_linked_place(bnd placex)
120   RETURNS placex
121   AS $$
122 DECLARE
123   relation_members TEXT[];
124   rel_member RECORD;
125   linked_placex placex%ROWTYPE;
126   bnd_name TEXT;
127 BEGIN
128   IF bnd.rank_search >= 26 or bnd.rank_address = 0
129      or ST_GeometryType(bnd.geometry) NOT IN ('ST_Polygon','ST_MultiPolygon')
130   THEN
131     RETURN NULL;
132   END IF;
133
134   IF bnd.osm_type = 'R' THEN
135     -- see if we have any special relation members
136     SELECT members FROM planet_osm_rels WHERE id = bnd.osm_id INTO relation_members;
137     --DEBUG: RAISE WARNING 'Got relation members';
138
139     -- Search for relation members with role 'lable'.
140     IF relation_members IS NOT NULL THEN
141       FOR rel_member IN
142         SELECT get_rel_node_members(relation_members, ARRAY['label']) as member
143       LOOP
144         --DEBUG: RAISE WARNING 'Found label member %', rel_member.member;
145
146         FOR linked_placex IN
147           SELECT * from placex
148           WHERE osm_type = 'N' and osm_id = rel_member.member
149             and class = 'place'
150         LOOP
151           --DEBUG: RAISE WARNING 'Linked label member';
152           RETURN linked_placex;
153         END LOOP;
154
155       END LOOP;
156     END IF;
157   END IF;
158
159   IF bnd.name ? 'name' THEN
160     bnd_name := make_standard_name(bnd.name->'name');
161     IF bnd_name = '' THEN
162       bnd_name := NULL;
163     END IF;
164   END IF;
165
166   -- If extratags has a place tag, look for linked nodes by their place type.
167   -- Area and node still have to have the same name.
168   IF bnd.extratags ? 'place' and bnd_name is not null THEN
169     FOR linked_placex IN
170       SELECT * FROM placex
171       WHERE make_standard_name(name->'name') = bnd_name
172         AND placex.class = 'place' AND placex.type = bnd.extratags->'place'
173         AND placex.osm_type = 'N'
174         AND placex.rank_search < 26 -- needed to select the right index
175         AND _st_covers(bnd.geometry, placex.geometry)
176     LOOP
177       --DEBUG: RAISE WARNING 'Found type-matching place node %', linked_placex.osm_id;
178       RETURN linked_placex;
179     END LOOP;
180   END IF;
181
182   IF bnd.extratags ? 'wikidata' THEN
183     FOR linked_placex IN
184       SELECT * FROM placex
185       WHERE placex.class = 'place' AND placex.osm_type = 'N'
186         AND placex.extratags ? 'wikidata' -- needed to select right index
187         AND placex.extratags->'wikidata' = bnd.extratags->'wikidata'
188         AND placex.rank_search < 26
189         AND _st_covers(bnd.geometry, placex.geometry)
190       ORDER BY make_standard_name(name->'name') = bnd_name desc
191     LOOP
192       --DEBUG: RAISE WARNING 'Found wikidata-matching place node %', linked_placex.osm_id;
193       RETURN linked_placex;
194     END LOOP;
195   END IF;
196
197   -- Name searches can be done for ways as well as relations
198   IF bnd_name is not null THEN
199     --DEBUG: RAISE WARNING 'Looking for nodes with matching names';
200     FOR linked_placex IN
201       SELECT placex.* from placex
202       WHERE make_standard_name(name->'name') = bnd_name
203         AND ((bnd.rank_address > 0 and placex.rank_address = bnd.rank_address)
204              OR (bnd.rank_address = 0 and placex.rank_search = bnd.rank_search))
205         AND placex.osm_type = 'N'
206         AND placex.rank_search < 26 -- needed to select the right index
207         AND _st_covers(bnd.geometry, placex.geometry)
208     LOOP
209       --DEBUG: RAISE WARNING 'Found matching place node %', linked_placex.osm_id;
210       RETURN linked_placex;
211     END LOOP;
212   END IF;
213
214   RETURN NULL;
215 END;
216 $$
217 LANGUAGE plpgsql STABLE;
218
219
220 -- Insert address of a place into the place_addressline table.
221 --
222 -- \param obj_place_id  Place_id of the place to compute the address for.
223 -- \param partition     Partition number where the place is in.
224 -- \param maxrank       Rank of the place. All address features must have
225 --                      a search rank lower than the given rank.
226 -- \param address       Address terms for the place.
227 -- \param geoemtry      Geometry to which the address objects should be close.
228 --
229 -- \retval parent_place_id  Place_id of the address object that is the direct
230 --                          ancestor.
231 -- \retval postcode         Postcode computed from the address. This is the
232 --                          addr:postcode of one of the address objects. If
233 --                          more than one of has a postcode, the highest ranking
234 --                          one is used. May be NULL.
235 -- \retval nameaddress_vector  Search terms for the address. This is the sum
236 --                             of name terms of all address objects.
237 CREATE OR REPLACE FUNCTION insert_addresslines(obj_place_id BIGINT,
238                                                partition SMALLINT,
239                                                maxrank SMALLINT,
240                                                address HSTORE,
241                                                geometry GEOMETRY,
242                                                OUT parent_place_id BIGINT,
243                                                OUT postcode TEXT,
244                                                OUT nameaddress_vector INT[])
245   AS $$
246 DECLARE
247   current_rank_address INTEGER := 0;
248   location_distance FLOAT := 0;
249   location_parent GEOMETRY := NULL;
250   parent_place_id_rank SMALLINT := 0;
251
252   location_isaddress BOOLEAN;
253
254   address_havelevel BOOLEAN[];
255   location_keywords INT[];
256
257   location RECORD;
258   addr_item RECORD;
259
260   isin_tokens INT[];
261   isin TEXT[];
262 BEGIN
263   parent_place_id := 0;
264   nameaddress_vector := '{}'::int[];
265   isin_tokens := '{}'::int[];
266
267   ---- convert address store to array of tokenids
268   IF address IS NOT NULL THEN
269     FOR addr_item IN SELECT * FROM each(address)
270     LOOP
271       IF addr_item.key IN ('city', 'tiger:county', 'state', 'suburb', 'province',
272                            'district', 'region', 'county', 'municipality',
273                            'hamlet', 'village', 'subdistrict', 'town',
274                            'neighbourhood', 'quarter', 'parish')
275       THEN
276         isin_tokens := array_merge(isin_tokens,
277                                    word_ids_from_name(addr_item.value));
278         IF NOT %REVERSE-ONLY% THEN
279           nameaddress_vector := array_merge(nameaddress_vector,
280                                             addr_ids_from_name(addr_item.value));
281         END IF;
282       END IF;
283     END LOOP;
284
285     IF address ? 'is_in' THEN
286       -- is_in items need splitting
287       isin := regexp_split_to_array(address->'is_in', E'[;,]');
288       IF array_upper(isin, 1) IS NOT NULL THEN
289         FOR i IN 1..array_upper(isin, 1) LOOP
290           isin_tokens := array_merge(isin_tokens,
291                                      word_ids_from_name(isin[i]));
292
293           -- merge word into address vector
294           IF NOT %REVERSE-ONLY% THEN
295             nameaddress_vector := array_merge(nameaddress_vector,
296                                               addr_ids_from_name(isin[i]));
297           END IF;
298         END LOOP;
299       END IF;
300     END IF;
301   END IF;
302   IF NOT %REVERSE-ONLY% THEN
303     nameaddress_vector := array_merge(nameaddress_vector, isin_tokens);
304   END IF;
305
306   ---- now compute the address terms
307   FOR i IN 1..28 LOOP
308     address_havelevel[i] := false;
309   END LOOP;
310
311   FOR location IN
312     SELECT * FROM getNearFeatures(partition, geometry, maxrank, isin_tokens)
313   LOOP
314     IF location.rank_address != current_rank_address THEN
315       current_rank_address := location.rank_address;
316       IF location.isguess THEN
317         location_distance := location.distance * 1.5;
318       ELSE
319         IF location.rank_address <= 12 THEN
320           -- for county and above, if we have an area consider that exact
321           -- (It would be nice to relax the constraint for places close to
322           --  the boundary but we'd need the exact geometry for that. Too
323           --  expensive.)
324           location_distance = 0;
325         ELSE
326           -- Below county level remain slightly fuzzy.
327           location_distance := location.distance * 0.5;
328         END IF;
329       END IF;
330     ELSE
331       CONTINUE WHEN location.keywords <@ location_keywords;
332     END IF;
333
334     IF location.distance < location_distance OR NOT location.isguess THEN
335       location_keywords := location.keywords;
336
337       location_isaddress := NOT address_havelevel[location.rank_address];
338       --DEBUG: RAISE WARNING 'should be address: %, is guess: %, rank: %', location_isaddress, location.isguess, location.rank_address;
339       IF location_isaddress AND location.isguess AND location_parent IS NOT NULL THEN
340           location_isaddress := ST_Contains(location_parent, location.centroid);
341       END IF;
342
343       --DEBUG: RAISE WARNING '% isaddress: %', location.place_id, location_isaddress;
344       -- Add it to the list of search terms
345       IF NOT %REVERSE-ONLY% THEN
346           nameaddress_vector := array_merge(nameaddress_vector,
347                                             location.keywords::integer[]);
348       END IF;
349
350       INSERT INTO place_addressline (place_id, address_place_id, fromarea,
351                                      isaddress, distance, cached_rank_address)
352         VALUES (obj_place_id, location.place_id, true,
353                 location_isaddress, location.distance, location.rank_address);
354
355       IF location_isaddress THEN
356         -- add postcode if we have one
357         -- (If multiple postcodes are available, we end up with the highest ranking one.)
358         IF location.postcode is not null THEN
359             postcode = location.postcode;
360         END IF;
361
362         address_havelevel[location.rank_address] := true;
363         -- add a hack against postcode ranks
364         IF NOT location.isguess
365            AND location.rank_address != 11 AND location.rank_address != 5
366         THEN
367           SELECT p.geometry FROM placex p
368             WHERE p.place_id = location.place_id INTO location_parent;
369         END IF;
370
371         IF location.rank_address > parent_place_id_rank THEN
372           parent_place_id = location.place_id;
373           parent_place_id_rank = location.rank_address;
374         END IF;
375       END IF;
376     END IF;
377
378   END LOOP;
379 END;
380 $$
381 LANGUAGE plpgsql;
382
383
384 CREATE OR REPLACE FUNCTION placex_insert()
385   RETURNS TRIGGER
386   AS $$
387 DECLARE
388   postcode TEXT;
389   result BOOLEAN;
390   is_area BOOLEAN;
391   country_code VARCHAR(2);
392   diameter FLOAT;
393   classtable TEXT;
394 BEGIN
395   --DEBUG: RAISE WARNING '% % % %',NEW.osm_type,NEW.osm_id,NEW.class,NEW.type;
396
397   NEW.place_id := nextval('seq_place');
398   NEW.indexed_status := 1; --STATUS_NEW
399
400   NEW.country_code := lower(get_country_code(NEW.geometry));
401
402   NEW.partition := get_partition(NEW.country_code);
403   NEW.geometry_sector := geometry_sector(NEW.partition, NEW.geometry);
404
405   IF NEW.osm_type = 'X' THEN
406     -- E'X'ternal records should already be in the right format so do nothing
407   ELSE
408     is_area := ST_GeometryType(NEW.geometry) IN ('ST_Polygon','ST_MultiPolygon');
409
410     IF NEW.class in ('place','boundary')
411        AND NEW.type in ('postcode','postal_code')
412     THEN
413       IF NEW.address IS NULL OR NOT NEW.address ? 'postcode' THEN
414           -- most likely just a part of a multipolygon postcode boundary, throw it away
415           RETURN NULL;
416       END IF;
417
418       NEW.name := hstore('ref', NEW.address->'postcode');
419
420     ELSEIF NEW.class = 'boundary' AND NOT is_area THEN
421         RETURN NULL;
422     ELSEIF NEW.class = 'boundary' AND NEW.type = 'administrative'
423            AND NEW.admin_level <= 4 AND NEW.osm_type = 'W'
424     THEN
425         RETURN NULL;
426     END IF;
427
428     SELECT * INTO NEW.rank_search, NEW.rank_address
429       FROM compute_place_rank(NEW.country_code,
430                               CASE WHEN is_area THEN 'A' ELSE NEW.osm_type END,
431                               NEW.class, NEW.type, NEW.admin_level,
432                               (NEW.extratags->'capital') = 'yes',
433                               NEW.address->'postcode');
434
435     -- a country code make no sense below rank 4 (country)
436     IF NEW.rank_search < 4 THEN
437       NEW.country_code := NULL;
438     END IF;
439
440   END IF;
441
442   --DEBUG: RAISE WARNING 'placex_insert:END: % % % %',NEW.osm_type,NEW.osm_id,NEW.class,NEW.type;
443
444   RETURN NEW; -- %DIFFUPDATES% The following is not needed until doing diff updates, and slows the main index process down
445
446   IF NEW.osm_type = 'N' and NEW.rank_search > 28 THEN
447       -- might be part of an interpolation
448       result := osmline_reinsert(NEW.osm_id, NEW.geometry);
449   ELSEIF NEW.rank_address > 0 THEN
450     IF (ST_GeometryType(NEW.geometry) in ('ST_Polygon','ST_MultiPolygon') AND ST_IsValid(NEW.geometry)) THEN
451       -- Performance: We just can't handle re-indexing for country level changes
452       IF st_area(NEW.geometry) < 1 THEN
453         -- mark items within the geometry for re-indexing
454   --    RAISE WARNING 'placex poly insert: % % % %',NEW.osm_type,NEW.osm_id,NEW.class,NEW.type;
455
456         -- work around bug in postgis, this may have been fixed in 2.0.0 (see http://trac.osgeo.org/postgis/ticket/547)
457         update placex set indexed_status = 2 where (st_covers(NEW.geometry, placex.geometry) OR ST_Intersects(NEW.geometry, placex.geometry)) 
458          AND rank_search > NEW.rank_search and indexed_status = 0 and ST_geometrytype(placex.geometry) = 'ST_Point' and (rank_search < 28 or name is not null or (NEW.rank_search >= 16 and address ? 'place'));
459         update placex set indexed_status = 2 where (st_covers(NEW.geometry, placex.geometry) OR ST_Intersects(NEW.geometry, placex.geometry)) 
460          AND rank_search > NEW.rank_search and indexed_status = 0 and ST_geometrytype(placex.geometry) != 'ST_Point' and (rank_search < 28 or name is not null or (NEW.rank_search >= 16 and address ? 'place'));
461       END IF;
462     ELSE
463       -- mark nearby items for re-indexing, where 'nearby' depends on the features rank_search and is a complete guess :(
464       diameter := update_place_diameter(NEW.rank_search);
465       IF diameter > 0 THEN
466   --      RAISE WARNING 'placex point insert: % % % % %',NEW.osm_type,NEW.osm_id,NEW.class,NEW.type,diameter;
467         IF NEW.rank_search >= 26 THEN
468           -- roads may cause reparenting for >27 rank places
469           update placex set indexed_status = 2 where indexed_status = 0 and rank_search > NEW.rank_search and ST_DWithin(placex.geometry, NEW.geometry, diameter);
470           -- reparenting also for OSM Interpolation Lines (and for Tiger?)
471           update location_property_osmline set indexed_status = 2 where indexed_status = 0 and ST_DWithin(location_property_osmline.linegeo, NEW.geometry, diameter);
472         ELSEIF NEW.rank_search >= 16 THEN
473           -- up to rank 16, street-less addresses may need reparenting
474           update placex set indexed_status = 2 where indexed_status = 0 and rank_search > NEW.rank_search and ST_DWithin(placex.geometry, NEW.geometry, diameter) and (rank_search < 28 or name is not null or address ? 'place');
475         ELSE
476           -- for all other places the search terms may change as well
477           update placex set indexed_status = 2 where indexed_status = 0 and rank_search > NEW.rank_search and ST_DWithin(placex.geometry, NEW.geometry, diameter) and (rank_search < 28 or name is not null);
478         END IF;
479       END IF;
480     END IF;
481   END IF;
482
483
484    -- add to tables for special search
485    -- Note: won't work on initial import because the classtype tables
486    -- do not yet exist. It won't hurt either.
487   classtable := 'place_classtype_' || NEW.class || '_' || NEW.type;
488   SELECT count(*)>0 FROM pg_tables WHERE tablename = classtable and schemaname = current_schema() INTO result;
489   IF result THEN
490     EXECUTE 'INSERT INTO ' || classtable::regclass || ' (place_id, centroid) VALUES ($1,$2)' 
491     USING NEW.place_id, ST_Centroid(NEW.geometry);
492   END IF;
493
494   RETURN NEW;
495
496 END;
497 $$
498 LANGUAGE plpgsql;
499
500 CREATE OR REPLACE FUNCTION get_parent_address_level(geom GEOMETRY, in_level SMALLINT)
501   RETURNS SMALLINT
502   AS $$
503 DECLARE
504   address_rank SMALLINT;
505 BEGIN
506   IF in_level <= 3 or in_level > 15 THEN
507     address_rank := 3;
508   ELSE
509     SELECT rank_address INTO address_rank
510       FROM placex
511       WHERE osm_type = 'R' and class = 'boundary' and type = 'administrative'
512             and admin_level < in_level
513             and geometry && geom and ST_Covers(geometry, geom)
514       ORDER BY admin_level desc LIMIT 1;
515   END IF;
516
517   IF address_rank is NULL or address_rank <= 3 THEN
518     RETURN 3;
519   END IF;
520
521   RETURN address_rank;
522 END;
523 $$
524 LANGUAGE plpgsql;
525
526
527 CREATE OR REPLACE FUNCTION placex_update()
528   RETURNS TRIGGER
529   AS $$
530 DECLARE
531   i INTEGER;
532   location RECORD;
533   relation_members TEXT[];
534
535   centroid GEOMETRY;
536   parent_address_level SMALLINT;
537
538   addr_street TEXT;
539   addr_place TEXT;
540
541   name_vector INTEGER[];
542   nameaddress_vector INTEGER[];
543
544   linked_node_id BIGINT;
545   linked_importance FLOAT;
546   linked_wikipedia TEXT;
547
548   result BOOLEAN;
549 BEGIN
550   -- deferred delete
551   IF OLD.indexed_status = 100 THEN
552     --DEBUG: RAISE WARNING 'placex_update delete % %',NEW.osm_type,NEW.osm_id;
553     delete from placex where place_id = OLD.place_id;
554     RETURN NULL;
555   END IF;
556
557   IF NEW.indexed_status != 0 OR OLD.indexed_status = 0 THEN
558     RETURN NEW;
559   END IF;
560
561   --DEBUG: RAISE WARNING 'placex_update % % (%)',NEW.osm_type,NEW.osm_id,NEW.place_id;
562
563   NEW.indexed_date = now();
564
565   IF NOT %REVERSE-ONLY% THEN
566     DELETE from search_name WHERE place_id = NEW.place_id;
567   END IF;
568   result := deleteSearchName(NEW.partition, NEW.place_id);
569   DELETE FROM place_addressline WHERE place_id = NEW.place_id;
570   result := deleteRoad(NEW.partition, NEW.place_id);
571   result := deleteLocationArea(NEW.partition, NEW.place_id, NEW.rank_search);
572   UPDATE placex set linked_place_id = null, indexed_status = 2
573          where linked_place_id = NEW.place_id;
574   -- update not necessary for osmline, cause linked_place_id does not exist
575
576   IF NEW.linked_place_id is not null THEN
577     --DEBUG: RAISE WARNING 'place already linked to %', NEW.linked_place_id;
578     RETURN NEW;
579   END IF;
580
581   -- recompute the ranks, they might change when linking changes
582   SELECT * INTO NEW.rank_search, NEW.rank_address
583     FROM compute_place_rank(NEW.country_code,
584                             CASE WHEN ST_GeometryType(NEW.geometry)
585                                         IN ('ST_Polygon','ST_MultiPolygon')
586                             THEN 'A' ELSE NEW.osm_type END,
587                             NEW.class, NEW.type, NEW.admin_level,
588                             (NEW.extratags->'capital') = 'yes',
589                             NEW.address->'postcode');
590   -- We must always increase the address level relative to the admin boundary.
591   IF NEW.class = 'boundary' and NEW.type = 'administrative' THEN
592     parent_address_level := get_parent_address_level(NEW.geometry, NEW.admin_level);
593     IF parent_address_level >= NEW.rank_address THEN
594       NEW.rank_address := parent_address_level + 2;
595     END IF;
596   ELSE
597     parent_address_level := 3;
598   END IF;
599
600   --DEBUG: RAISE WARNING 'Copy over address tags';
601   -- housenumber is a computed field, so start with an empty value
602   NEW.housenumber := NULL;
603   IF NEW.address is not NULL THEN
604       IF NEW.address ? 'conscriptionnumber' THEN
605         i := getorcreate_housenumber_id(make_standard_name(NEW.address->'conscriptionnumber'));
606         IF NEW.address ? 'streetnumber' THEN
607             i := getorcreate_housenumber_id(make_standard_name(NEW.address->'streetnumber'));
608             NEW.housenumber := (NEW.address->'conscriptionnumber') || '/' || (NEW.address->'streetnumber');
609         ELSE
610             NEW.housenumber := NEW.address->'conscriptionnumber';
611         END IF;
612       ELSEIF NEW.address ? 'streetnumber' THEN
613         NEW.housenumber := NEW.address->'streetnumber';
614         i := getorcreate_housenumber_id(make_standard_name(NEW.address->'streetnumber'));
615       ELSEIF NEW.address ? 'housenumber' THEN
616         NEW.housenumber := NEW.address->'housenumber';
617         i := getorcreate_housenumber_id(make_standard_name(NEW.housenumber));
618       END IF;
619
620       addr_street := NEW.address->'street';
621       addr_place := NEW.address->'place';
622
623       IF NEW.address ? 'postcode' and NEW.address->'postcode' not similar to '%(,|;)%' THEN
624         i := getorcreate_postcode_id(NEW.address->'postcode');
625       END IF;
626   END IF;
627
628   -- Speed up searches - just use the centroid of the feature
629   -- cheaper but less acurate
630   NEW.centroid := ST_PointOnSurface(NEW.geometry);
631   --DEBUG: RAISE WARNING 'Computing preliminary centroid at %',ST_AsText(NEW.centroid);
632
633   NEW.postcode := null;
634
635   -- recalculate country and partition
636   IF NEW.rank_search = 4 AND NEW.address is not NULL AND NEW.address ? 'country' THEN
637     -- for countries, believe the mapped country code,
638     -- so that we remain in the right partition if the boundaries
639     -- suddenly expand.
640     NEW.country_code := lower(NEW.address->'country');
641     NEW.partition := get_partition(lower(NEW.country_code));
642     IF NEW.partition = 0 THEN
643       NEW.country_code := lower(get_country_code(NEW.centroid));
644       NEW.partition := get_partition(NEW.country_code);
645     END IF;
646   ELSE
647     IF NEW.rank_search >= 4 THEN
648       NEW.country_code := lower(get_country_code(NEW.centroid));
649     ELSE
650       NEW.country_code := NULL;
651     END IF;
652     NEW.partition := get_partition(NEW.country_code);
653   END IF;
654   --DEBUG: RAISE WARNING 'Country updated: "%"', NEW.country_code;
655
656   -- waterway ways are linked when they are part of a relation and have the same class/type
657   IF NEW.osm_type = 'R' and NEW.class = 'waterway' THEN
658       FOR relation_members IN select members from planet_osm_rels r where r.id = NEW.osm_id and r.parts != array[]::bigint[]
659       LOOP
660           FOR i IN 1..array_upper(relation_members, 1) BY 2 LOOP
661               IF relation_members[i+1] in ('', 'main_stream', 'side_stream') AND substring(relation_members[i],1,1) = 'w' THEN
662                 --DEBUG: RAISE WARNING 'waterway parent %, child %/%', NEW.osm_id, i, relation_members[i];
663                 FOR linked_node_id IN SELECT place_id FROM placex
664                   WHERE osm_type = 'W' and osm_id = substring(relation_members[i],2,200)::bigint
665                   and class = NEW.class and type in ('river', 'stream', 'canal', 'drain', 'ditch')
666                   and ( relation_members[i+1] != 'side_stream' or NEW.name->'name' = name->'name')
667                 LOOP
668                   UPDATE placex SET linked_place_id = NEW.place_id WHERE place_id = linked_node_id;
669                   IF NOT %REVERSE-ONLY% THEN
670                     DELETE FROM search_name WHERE place_id = linked_node_id;
671                   END IF;
672                 END LOOP;
673               END IF;
674           END LOOP;
675       END LOOP;
676       --DEBUG: RAISE WARNING 'Waterway processed';
677   END IF;
678
679   NEW.importance := null;
680   SELECT wikipedia, importance
681     FROM compute_importance(NEW.extratags, NEW.country_code, NEW.osm_type, NEW.osm_id)
682     INTO NEW.wikipedia,NEW.importance;
683
684 --DEBUG: RAISE WARNING 'Importance computed from wikipedia: %', NEW.importance;
685
686   -- ---------------------------------------------------------------------------
687   -- For low level elements we inherit from our parent road
688   IF (NEW.rank_search > 27 OR (NEW.type = 'postcode' AND NEW.rank_search = 25)) THEN
689
690     --DEBUG: RAISE WARNING 'finding street for % %', NEW.osm_type, NEW.osm_id;
691     NEW.parent_place_id := null;
692
693     -- if we have a POI and there is no address information,
694     -- see if we can get it from a surrounding building
695     IF NEW.osm_type = 'N' AND addr_street IS NULL AND addr_place IS NULL
696        AND NEW.housenumber IS NULL THEN
697       FOR location IN
698         -- The additional && condition works around the misguided query
699         -- planner of postgis 3.0.
700         SELECT address from placex where ST_Covers(geometry, NEW.centroid)
701             and geometry && NEW.centroid
702             and (address ? 'housenumber' or address ? 'street' or address ? 'place')
703             and rank_search > 28 AND ST_GeometryType(geometry) in ('ST_Polygon','ST_MultiPolygon')
704             limit 1
705       LOOP
706         NEW.housenumber := location.address->'housenumber';
707         addr_street := location.address->'street';
708         addr_place := location.address->'place';
709       END LOOP;
710     END IF;
711
712     -- We have to find our parent road.
713     NEW.parent_place_id := find_parent_for_poi(NEW.osm_type, NEW.osm_id,
714                                                NEW.partition,
715                                                ST_Envelope(NEW.geometry),
716                                                addr_street, addr_place);
717
718     -- If we found the road take a shortcut here.
719     -- Otherwise fall back to the full address getting method below.
720     IF NEW.parent_place_id is not null THEN
721
722       -- Get the details of the parent road
723       SELECT p.country_code, p.postcode FROM placex p
724        WHERE p.place_id = NEW.parent_place_id INTO location;
725
726       NEW.country_code := location.country_code;
727       --DEBUG: RAISE WARNING 'Got parent details from search name';
728
729       -- determine postcode
730       IF NEW.address is not null AND NEW.address ? 'postcode' THEN
731           NEW.postcode = upper(trim(NEW.address->'postcode'));
732       ELSE
733          NEW.postcode := location.postcode;
734       END IF;
735       IF NEW.postcode is null THEN
736         NEW.postcode := get_nearest_postcode(NEW.country_code, NEW.geometry);
737       END IF;
738
739       -- If there is no name it isn't searchable, don't bother to create a search record
740       IF NEW.name is NULL THEN
741         --DEBUG: RAISE WARNING 'Not a searchable place % %', NEW.osm_type, NEW.osm_id;
742         return NEW;
743       END IF;
744
745       NEW.name := add_default_place_name(NEW.country_code, NEW.name);
746       name_vector := make_keywords(NEW.name);
747
748       -- Performance, it would be more acurate to do all the rest of the import
749       -- process but it takes too long
750       -- Just be happy with inheriting from parent road only
751       IF NEW.rank_search <= 25 and NEW.rank_address > 0 THEN
752         result := add_location(NEW.place_id, NEW.country_code, NEW.partition, name_vector, NEW.rank_search, NEW.rank_address, upper(trim(NEW.address->'postcode')), NEW.geometry);
753         --DEBUG: RAISE WARNING 'Place added to location table';
754       END IF;
755
756       result := insertSearchName(NEW.partition, NEW.place_id, name_vector,
757                                  NEW.rank_search, NEW.rank_address, NEW.geometry);
758
759       IF NOT %REVERSE-ONLY% THEN
760           -- Merge address from parent
761           SELECT array_merge(s.name_vector, s.nameaddress_vector)
762             INTO nameaddress_vector
763             FROM search_name s
764             WHERE s.place_id = NEW.parent_place_id;
765
766           INSERT INTO search_name (place_id, search_rank, address_rank,
767                                    importance, country_code, name_vector,
768                                    nameaddress_vector, centroid)
769                  VALUES (NEW.place_id, NEW.rank_search, NEW.rank_address,
770                          NEW.importance, NEW.country_code, name_vector,
771                          nameaddress_vector, NEW.centroid);
772           --DEBUG: RAISE WARNING 'Place added to search table';
773         END IF;
774
775       return NEW;
776     END IF;
777
778   END IF;
779
780   -- ---------------------------------------------------------------------------
781   -- Full indexing
782   --DEBUG: RAISE WARNING 'Using full index mode for % %', NEW.osm_type, NEW.osm_id;
783   SELECT * INTO location FROM find_linked_place(NEW);
784   IF location.place_id is not null THEN
785     --DEBUG: RAISE WARNING 'Linked %', location;
786
787     -- Use the linked point as the centre point of the geometry,
788     -- but only if it is within the area of the boundary.
789     centroid := coalesce(location.centroid, ST_Centroid(location.geometry));
790     IF centroid is not NULL AND ST_Within(centroid, NEW.geometry) THEN
791         NEW.centroid := centroid;
792     END IF;
793
794     --DEBUG: RAISE WARNING 'parent address: % rank address: %', parent_address_level, location.rank_address;
795     IF location.rank_address > parent_address_level
796        and location.rank_address < 26
797     THEN
798       NEW.rank_address := location.rank_address;
799     END IF;
800
801     -- merge in the label name
802     IF NOT location.name IS NULL THEN
803       NEW.name := location.name || NEW.name;
804     END IF;
805
806     -- merge in extra tags
807     NEW.extratags := hstore('linked_' || location.class, location.type)
808                      || coalesce(location.extratags, ''::hstore)
809                      || coalesce(NEW.extratags, ''::hstore);
810
811     -- mark the linked place (excludes from search results)
812     UPDATE placex set linked_place_id = NEW.place_id
813       WHERE place_id = location.place_id;
814     -- ensure that those places are not found anymore
815     IF NOT %REVERSE-ONLY% THEN
816       DELETE FROM search_name WHERE place_id = location.place_id;
817     END IF;
818     PERFORM deleteLocationArea(NEW.partition, location.place_id, NEW.rank_search);
819
820     SELECT wikipedia, importance
821       FROM compute_importance(location.extratags, NEW.country_code,
822                               'N', location.osm_id)
823       INTO linked_wikipedia,linked_importance;
824
825     -- Use the maximum importance if one could be computed from the linked object.
826     IF linked_importance is not null AND
827        (NEW.importance is null or NEW.importance < linked_importance)
828     THEN
829       NEW.importance = linked_importance;
830     END IF;
831   END IF;
832
833   -- Initialise the name vector using our name
834   NEW.name := add_default_place_name(NEW.country_code, NEW.name);
835   name_vector := make_keywords(NEW.name);
836
837   -- make sure all names are in the word table
838   IF NEW.admin_level = 2
839      AND NEW.class = 'boundary' AND NEW.type = 'administrative'
840      AND NEW.country_code IS NOT NULL AND NEW.osm_type = 'R'
841   THEN
842     PERFORM create_country(NEW.name, lower(NEW.country_code));
843     --DEBUG: RAISE WARNING 'Country names updated';
844   END IF;
845
846   SELECT * FROM insert_addresslines(NEW.place_id, NEW.partition,
847                                     NEW.rank_search, NEW.address,
848                                     CASE WHEN NEW.rank_search >= 26
849                                              AND NEW.rank_search < 30
850                                       THEN NEW.geometry ELSE NEW.centroid END)
851     INTO NEW.parent_place_id, NEW.postcode, nameaddress_vector;
852
853   --DEBUG: RAISE WARNING 'RETURN insert_addresslines: %, %, %', NEW.parent_place_id, NEW.postcode, nameaddress_vector;
854
855   IF NEW.address is not null AND NEW.address ? 'postcode' 
856      AND NEW.address->'postcode' not similar to '%(,|;)%' THEN
857     NEW.postcode := upper(trim(NEW.address->'postcode'));
858   END IF;
859
860   IF NEW.postcode is null AND NEW.rank_search > 8 THEN
861     NEW.postcode := get_nearest_postcode(NEW.country_code, NEW.geometry);
862   END IF;
863
864   -- if we have a name add this to the name search table
865   IF NEW.name IS NOT NULL THEN
866
867     IF NEW.rank_search <= 25 and NEW.rank_address > 0 THEN
868       result := add_location(NEW.place_id, NEW.country_code, NEW.partition, name_vector, NEW.rank_search, NEW.rank_address, upper(trim(NEW.address->'postcode')), NEW.geometry);
869       --DEBUG: RAISE WARNING 'added to location (full)';
870     END IF;
871
872     IF NEW.rank_search between 26 and 27 and NEW.class = 'highway' THEN
873       result := insertLocationRoad(NEW.partition, NEW.place_id, NEW.country_code, NEW.geometry);
874       --DEBUG: RAISE WARNING 'insert into road location table (full)';
875     END IF;
876
877     result := insertSearchName(NEW.partition, NEW.place_id, name_vector,
878                                NEW.rank_search, NEW.rank_address, NEW.geometry);
879     --DEBUG: RAISE WARNING 'added to search name (full)';
880
881     IF NOT %REVERSE-ONLY% THEN
882         INSERT INTO search_name (place_id, search_rank, address_rank,
883                                  importance, country_code, name_vector,
884                                  nameaddress_vector, centroid)
885                VALUES (NEW.place_id, NEW.rank_search, NEW.rank_address,
886                        NEW.importance, NEW.country_code, name_vector,
887                        nameaddress_vector, NEW.centroid);
888     END IF;
889
890   END IF;
891
892   --DEBUG: RAISE WARNING 'place update % % finsihed.', NEW.osm_type, NEW.osm_id;
893
894   RETURN NEW;
895 END;
896 $$
897 LANGUAGE plpgsql;
898
899
900 CREATE OR REPLACE FUNCTION placex_delete()
901   RETURNS TRIGGER
902   AS $$
903 DECLARE
904   b BOOLEAN;
905   classtable TEXT;
906 BEGIN
907   -- RAISE WARNING 'placex_delete % %',OLD.osm_type,OLD.osm_id;
908
909   update placex set linked_place_id = null, indexed_status = 2 where linked_place_id = OLD.place_id and indexed_status = 0;
910   --DEBUG: RAISE WARNING 'placex_delete:01 % %',OLD.osm_type,OLD.osm_id;
911   update placex set linked_place_id = null where linked_place_id = OLD.place_id;
912   --DEBUG: RAISE WARNING 'placex_delete:02 % %',OLD.osm_type,OLD.osm_id;
913
914   IF OLD.rank_address < 30 THEN
915
916     -- mark everything linked to this place for re-indexing
917     --DEBUG: RAISE WARNING 'placex_delete:03 % %',OLD.osm_type,OLD.osm_id;
918     UPDATE placex set indexed_status = 2 from place_addressline where address_place_id = OLD.place_id 
919       and placex.place_id = place_addressline.place_id and indexed_status = 0 and place_addressline.isaddress;
920
921     --DEBUG: RAISE WARNING 'placex_delete:04 % %',OLD.osm_type,OLD.osm_id;
922     DELETE FROM place_addressline where address_place_id = OLD.place_id;
923
924     --DEBUG: RAISE WARNING 'placex_delete:05 % %',OLD.osm_type,OLD.osm_id;
925     b := deleteRoad(OLD.partition, OLD.place_id);
926
927     --DEBUG: RAISE WARNING 'placex_delete:06 % %',OLD.osm_type,OLD.osm_id;
928     update placex set indexed_status = 2 where parent_place_id = OLD.place_id and indexed_status = 0;
929     --DEBUG: RAISE WARNING 'placex_delete:07 % %',OLD.osm_type,OLD.osm_id;
930     -- reparenting also for OSM Interpolation Lines (and for Tiger?)
931     update location_property_osmline set indexed_status = 2 where indexed_status = 0 and parent_place_id = OLD.place_id;
932
933   END IF;
934
935   --DEBUG: RAISE WARNING 'placex_delete:08 % %',OLD.osm_type,OLD.osm_id;
936
937   IF OLD.rank_address < 26 THEN
938     b := deleteLocationArea(OLD.partition, OLD.place_id, OLD.rank_search);
939   END IF;
940
941   --DEBUG: RAISE WARNING 'placex_delete:09 % %',OLD.osm_type,OLD.osm_id;
942
943   IF OLD.name is not null THEN
944     IF NOT %REVERSE-ONLY% THEN
945       DELETE from search_name WHERE place_id = OLD.place_id;
946     END IF;
947     b := deleteSearchName(OLD.partition, OLD.place_id);
948   END IF;
949
950   --DEBUG: RAISE WARNING 'placex_delete:10 % %',OLD.osm_type,OLD.osm_id;
951
952   DELETE FROM place_addressline where place_id = OLD.place_id;
953
954   --DEBUG: RAISE WARNING 'placex_delete:11 % %',OLD.osm_type,OLD.osm_id;
955
956   -- remove from tables for special search
957   classtable := 'place_classtype_' || OLD.class || '_' || OLD.type;
958   SELECT count(*)>0 FROM pg_tables WHERE tablename = classtable and schemaname = current_schema() INTO b;
959   IF b THEN
960     EXECUTE 'DELETE FROM ' || classtable::regclass || ' WHERE place_id = $1' USING OLD.place_id;
961   END IF;
962
963   --DEBUG: RAISE WARNING 'placex_delete:12 % %',OLD.osm_type,OLD.osm_id;
964
965   RETURN OLD;
966
967 END;
968 $$
969 LANGUAGE plpgsql;