]> git.openstreetmap.org Git - nominatim.git/blob - sql/functions/placex_triggers.sql
remove linked_place from extratags when updating
[nominatim.git] / sql / functions / placex_triggers.sql
1 -- Trigger functions for the placex table.
2
3 -- Find the parent road of a POI.
4 --
5 -- \returns Place ID of parent object or NULL if none
6 --
7 -- Copy data from linked items (POIs on ways, addr:street links, relations).
8 --
9 CREATE OR REPLACE FUNCTION find_parent_for_poi(poi_osm_type CHAR(1),
10                                                poi_osm_id BIGINT,
11                                                poi_partition SMALLINT,
12                                                bbox GEOMETRY,
13                                                addr_street TEXT,
14                                                addr_place TEXT,
15                                                fallback BOOL = true)
16   RETURNS BIGINT
17   AS $$
18 DECLARE
19   parent_place_id BIGINT DEFAULT NULL;
20   location RECORD;
21   parent RECORD;
22 BEGIN
23     --DEBUG: RAISE WARNING 'finding street for % %', poi_osm_type, poi_osm_id;
24
25     -- Is this object part of an associatedStreet relation?
26     FOR location IN
27       SELECT members FROM planet_osm_rels
28       WHERE parts @> ARRAY[poi_osm_id]
29         and members @> ARRAY[lower(poi_osm_type) || poi_osm_id]
30         and tags @> ARRAY['associatedStreet']
31     LOOP
32       FOR i IN 1..array_upper(location.members, 1) BY 2 LOOP
33         IF location.members[i+1] = 'street' THEN
34           FOR parent IN
35             SELECT place_id from placex
36              WHERE osm_type = 'W' and osm_id = substring(location.members[i],2)::bigint
37                and name is not null
38                and rank_search between 26 and 27
39           LOOP
40             RETURN parent.place_id;
41           END LOOP;
42         END IF;
43       END LOOP;
44     END LOOP;
45
46     parent_place_id := find_parent_for_address(addr_street, addr_place,
47                                                poi_partition, bbox);
48     IF parent_place_id is not null THEN
49       RETURN parent_place_id;
50     END IF;
51
52     IF poi_osm_type = 'N' THEN
53       -- Is this node part of an interpolation?
54       FOR parent IN
55         SELECT q.parent_place_id
56           FROM location_property_osmline q, planet_osm_ways x
57          WHERE q.linegeo && bbox and x.id = q.osm_id
58                and poi_osm_id = any(x.nodes)
59          LIMIT 1
60       LOOP
61         --DEBUG: RAISE WARNING 'Get parent from interpolation: %', parent.parent_place_id;
62         RETURN parent.parent_place_id;
63       END LOOP;
64
65       -- Is this node part of any other way?
66       FOR location IN
67         SELECT p.place_id, p.osm_id, p.rank_search, p.address,
68                coalesce(p.centroid, ST_Centroid(p.geometry)) as centroid
69           FROM placex p, planet_osm_ways w
70          WHERE p.osm_type = 'W' and p.rank_search >= 26
71                and p.geometry && bbox
72                and w.id = p.osm_id and poi_osm_id = any(w.nodes)
73       LOOP
74         --DEBUG: RAISE WARNING 'Node is part of way % ', location.osm_id;
75
76         -- Way IS a road then we are on it - that must be our road
77         IF location.rank_search < 28 THEN
78           --DEBUG: RAISE WARNING 'node in way that is a street %',location;
79           return location.place_id;
80         END IF;
81
82         SELECT find_parent_for_poi('W', location.osm_id, poi_partition,
83                                    location.centroid,
84                                    location.address->'street',
85                                    location.address->'place',
86                                    false)
87           INTO parent_place_id;
88         IF parent_place_id is not null THEN
89           RETURN parent_place_id;
90         END IF;
91       END LOOP;
92     END IF;
93
94     IF fallback THEN
95       IF ST_Area(bbox) < 0.01 THEN
96         -- for smaller features get the nearest road
97         SELECT getNearestRoadPlaceId(poi_partition, bbox) INTO parent_place_id;
98         --DEBUG: RAISE WARNING 'Checked for nearest way (%)', parent_place_id;
99       ELSE
100         -- for larger features simply find the area with the largest rank that
101         -- contains the bbox, only use addressable features
102         FOR location IN
103           SELECT place_id FROM placex
104             WHERE bbox @ geometry AND _ST_Covers(geometry, ST_Centroid(bbox))
105                   AND rank_address between 5 and 25
106             ORDER BY rank_address desc
107         LOOP
108             RETURN location.place_id;
109         END LOOP;
110       END IF;
111     END IF;
112
113     RETURN parent_place_id;
114 END;
115 $$
116 LANGUAGE plpgsql STABLE;
117
118 -- Try to find a linked place for the given object.
119 CREATE OR REPLACE FUNCTION find_linked_place(bnd placex)
120   RETURNS placex
121   AS $$
122 DECLARE
123   relation_members TEXT[];
124   rel_member RECORD;
125   linked_placex placex%ROWTYPE;
126   bnd_name TEXT;
127 BEGIN
128   IF bnd.rank_search >= 26 or bnd.rank_address = 0
129      or ST_GeometryType(bnd.geometry) NOT IN ('ST_Polygon','ST_MultiPolygon')
130   THEN
131     RETURN NULL;
132   END IF;
133
134   IF bnd.osm_type = 'R' THEN
135     -- see if we have any special relation members
136     SELECT members FROM planet_osm_rels WHERE id = bnd.osm_id INTO relation_members;
137     --DEBUG: RAISE WARNING 'Got relation members';
138
139     -- Search for relation members with role 'lable'.
140     IF relation_members IS NOT NULL THEN
141       FOR rel_member IN
142         SELECT get_rel_node_members(relation_members, ARRAY['label']) as member
143       LOOP
144         --DEBUG: RAISE WARNING 'Found label member %', rel_member.member;
145
146         FOR linked_placex IN
147           SELECT * from placex
148           WHERE osm_type = 'N' and osm_id = rel_member.member
149             and class = 'place'
150         LOOP
151           --DEBUG: RAISE WARNING 'Linked label member';
152           RETURN linked_placex;
153         END LOOP;
154
155       END LOOP;
156     END IF;
157   END IF;
158
159   IF bnd.name ? 'name' THEN
160     bnd_name := make_standard_name(bnd.name->'name');
161     IF bnd_name = '' THEN
162       bnd_name := NULL;
163     END IF;
164   END IF;
165
166   -- If extratags has a place tag, look for linked nodes by their place type.
167   -- Area and node still have to have the same name.
168   IF bnd.extratags ? 'place' and bnd_name is not null THEN
169     FOR linked_placex IN
170       SELECT * FROM placex
171       WHERE make_standard_name(name->'name') = bnd_name
172         AND placex.class = 'place' AND placex.type = bnd.extratags->'place'
173         AND placex.osm_type = 'N'
174         AND placex.rank_search < 26 -- needed to select the right index
175         AND _st_covers(bnd.geometry, placex.geometry)
176     LOOP
177       --DEBUG: RAISE WARNING 'Found type-matching place node %', linked_placex.osm_id;
178       RETURN linked_placex;
179     END LOOP;
180   END IF;
181
182   IF bnd.extratags ? 'wikidata' THEN
183     FOR linked_placex IN
184       SELECT * FROM placex
185       WHERE placex.class = 'place' AND placex.osm_type = 'N'
186         AND placex.extratags ? 'wikidata' -- needed to select right index
187         AND placex.extratags->'wikidata' = bnd.extratags->'wikidata'
188         AND placex.rank_search < 26
189         AND _st_covers(bnd.geometry, placex.geometry)
190       ORDER BY make_standard_name(name->'name') = bnd_name desc
191     LOOP
192       --DEBUG: RAISE WARNING 'Found wikidata-matching place node %', linked_placex.osm_id;
193       RETURN linked_placex;
194     END LOOP;
195   END IF;
196
197   -- Name searches can be done for ways as well as relations
198   IF bnd_name is not null THEN
199     --DEBUG: RAISE WARNING 'Looking for nodes with matching names';
200     FOR linked_placex IN
201       SELECT placex.* from placex
202       WHERE make_standard_name(name->'name') = bnd_name
203         AND ((bnd.rank_address > 0 and placex.rank_address = bnd.rank_address)
204              OR (bnd.rank_address = 0 and placex.rank_search = bnd.rank_search))
205         AND placex.osm_type = 'N'
206         AND placex.rank_search < 26 -- needed to select the right index
207         AND _st_covers(bnd.geometry, placex.geometry)
208     LOOP
209       --DEBUG: RAISE WARNING 'Found matching place node %', linked_placex.osm_id;
210       RETURN linked_placex;
211     END LOOP;
212   END IF;
213
214   RETURN NULL;
215 END;
216 $$
217 LANGUAGE plpgsql STABLE;
218
219
220 -- Insert address of a place into the place_addressline table.
221 --
222 -- \param obj_place_id  Place_id of the place to compute the address for.
223 -- \param partition     Partition number where the place is in.
224 -- \param maxrank       Rank of the place. All address features must have
225 --                      a search rank lower than the given rank.
226 -- \param address       Address terms for the place.
227 -- \param geoemtry      Geometry to which the address objects should be close.
228 --
229 -- \retval parent_place_id  Place_id of the address object that is the direct
230 --                          ancestor.
231 -- \retval postcode         Postcode computed from the address. This is the
232 --                          addr:postcode of one of the address objects. If
233 --                          more than one of has a postcode, the highest ranking
234 --                          one is used. May be NULL.
235 -- \retval nameaddress_vector  Search terms for the address. This is the sum
236 --                             of name terms of all address objects.
237 CREATE OR REPLACE FUNCTION insert_addresslines(obj_place_id BIGINT,
238                                                partition SMALLINT,
239                                                maxrank SMALLINT,
240                                                address HSTORE,
241                                                geometry GEOMETRY,
242                                                OUT parent_place_id BIGINT,
243                                                OUT postcode TEXT,
244                                                OUT nameaddress_vector INT[])
245   AS $$
246 DECLARE
247   current_rank_address INTEGER := 0;
248   location_distance FLOAT := 0;
249   location_parent GEOMETRY := NULL;
250   parent_place_id_rank SMALLINT := 0;
251
252   location_isaddress BOOLEAN;
253
254   address_havelevel BOOLEAN[];
255   location_keywords INT[];
256
257   location RECORD;
258   addr_item RECORD;
259
260   isin_tokens INT[];
261   isin TEXT[];
262 BEGIN
263   parent_place_id := 0;
264   nameaddress_vector := '{}'::int[];
265   isin_tokens := '{}'::int[];
266
267   ---- convert address store to array of tokenids
268   IF address IS NOT NULL THEN
269     FOR addr_item IN SELECT * FROM each(address)
270     LOOP
271       IF addr_item.key IN ('city', 'tiger:county', 'state', 'suburb', 'province',
272                            'district', 'region', 'county', 'municipality',
273                            'hamlet', 'village', 'subdistrict', 'town',
274                            'neighbourhood', 'quarter', 'parish')
275       THEN
276         isin_tokens := array_merge(isin_tokens,
277                                    word_ids_from_name(addr_item.value));
278         IF NOT %REVERSE-ONLY% THEN
279           nameaddress_vector := array_merge(nameaddress_vector,
280                                             addr_ids_from_name(addr_item.value));
281         END IF;
282       END IF;
283     END LOOP;
284
285     IF address ? 'is_in' THEN
286       -- is_in items need splitting
287       isin := regexp_split_to_array(address->'is_in', E'[;,]');
288       IF array_upper(isin, 1) IS NOT NULL THEN
289         FOR i IN 1..array_upper(isin, 1) LOOP
290           isin_tokens := array_merge(isin_tokens,
291                                      word_ids_from_name(isin[i]));
292
293           -- merge word into address vector
294           IF NOT %REVERSE-ONLY% THEN
295             nameaddress_vector := array_merge(nameaddress_vector,
296                                               addr_ids_from_name(isin[i]));
297           END IF;
298         END LOOP;
299       END IF;
300     END IF;
301   END IF;
302   IF NOT %REVERSE-ONLY% THEN
303     nameaddress_vector := array_merge(nameaddress_vector, isin_tokens);
304   END IF;
305
306   ---- now compute the address terms
307   FOR i IN 1..28 LOOP
308     address_havelevel[i] := false;
309   END LOOP;
310
311   FOR location IN
312     SELECT * FROM getNearFeatures(partition, geometry, maxrank, isin_tokens)
313   LOOP
314     IF location.rank_address != current_rank_address THEN
315       current_rank_address := location.rank_address;
316       IF location.isguess THEN
317         location_distance := location.distance * 1.5;
318       ELSE
319         IF location.rank_address <= 12 THEN
320           -- for county and above, if we have an area consider that exact
321           -- (It would be nice to relax the constraint for places close to
322           --  the boundary but we'd need the exact geometry for that. Too
323           --  expensive.)
324           location_distance = 0;
325         ELSE
326           -- Below county level remain slightly fuzzy.
327           location_distance := location.distance * 0.5;
328         END IF;
329       END IF;
330     ELSE
331       CONTINUE WHEN location.keywords <@ location_keywords;
332     END IF;
333
334     IF location.distance < location_distance OR NOT location.isguess THEN
335       location_keywords := location.keywords;
336
337       location_isaddress := NOT address_havelevel[location.rank_address];
338       --DEBUG: RAISE WARNING 'should be address: %, is guess: %, rank: %', location_isaddress, location.isguess, location.rank_address;
339       IF location_isaddress AND location.isguess AND location_parent IS NOT NULL THEN
340           location_isaddress := ST_Contains(location_parent, location.centroid);
341       END IF;
342
343       --DEBUG: RAISE WARNING '% isaddress: %', location.place_id, location_isaddress;
344       -- Add it to the list of search terms
345       IF NOT %REVERSE-ONLY% THEN
346           nameaddress_vector := array_merge(nameaddress_vector,
347                                             location.keywords::integer[]);
348       END IF;
349
350       INSERT INTO place_addressline (place_id, address_place_id, fromarea,
351                                      isaddress, distance, cached_rank_address)
352         VALUES (obj_place_id, location.place_id, true,
353                 location_isaddress, location.distance, location.rank_address);
354
355       IF location_isaddress THEN
356         -- add postcode if we have one
357         -- (If multiple postcodes are available, we end up with the highest ranking one.)
358         IF location.postcode is not null THEN
359             postcode = location.postcode;
360         END IF;
361
362         address_havelevel[location.rank_address] := true;
363         -- add a hack against postcode ranks
364         IF NOT location.isguess
365            AND location.rank_address != 11 AND location.rank_address != 5
366         THEN
367           SELECT p.geometry FROM placex p
368             WHERE p.place_id = location.place_id INTO location_parent;
369         END IF;
370
371         IF location.rank_address > parent_place_id_rank THEN
372           parent_place_id = location.place_id;
373           parent_place_id_rank = location.rank_address;
374         END IF;
375       END IF;
376     END IF;
377
378   END LOOP;
379 END;
380 $$
381 LANGUAGE plpgsql;
382
383
384 CREATE OR REPLACE FUNCTION placex_insert()
385   RETURNS TRIGGER
386   AS $$
387 DECLARE
388   postcode TEXT;
389   result BOOLEAN;
390   is_area BOOLEAN;
391   country_code VARCHAR(2);
392   diameter FLOAT;
393   classtable TEXT;
394 BEGIN
395   --DEBUG: RAISE WARNING '% % % %',NEW.osm_type,NEW.osm_id,NEW.class,NEW.type;
396
397   NEW.place_id := nextval('seq_place');
398   NEW.indexed_status := 1; --STATUS_NEW
399
400   NEW.country_code := lower(get_country_code(NEW.geometry));
401
402   NEW.partition := get_partition(NEW.country_code);
403   NEW.geometry_sector := geometry_sector(NEW.partition, NEW.geometry);
404
405   IF NEW.osm_type = 'X' THEN
406     -- E'X'ternal records should already be in the right format so do nothing
407   ELSE
408     is_area := ST_GeometryType(NEW.geometry) IN ('ST_Polygon','ST_MultiPolygon');
409
410     IF NEW.class in ('place','boundary')
411        AND NEW.type in ('postcode','postal_code')
412     THEN
413       IF NEW.address IS NULL OR NOT NEW.address ? 'postcode' THEN
414           -- most likely just a part of a multipolygon postcode boundary, throw it away
415           RETURN NULL;
416       END IF;
417
418       NEW.name := hstore('ref', NEW.address->'postcode');
419
420     ELSEIF NEW.class = 'boundary' AND NOT is_area THEN
421         RETURN NULL;
422     ELSEIF NEW.class = 'boundary' AND NEW.type = 'administrative'
423            AND NEW.admin_level <= 4 AND NEW.osm_type = 'W'
424     THEN
425         RETURN NULL;
426     END IF;
427
428     SELECT * INTO NEW.rank_search, NEW.rank_address
429       FROM compute_place_rank(NEW.country_code,
430                               CASE WHEN is_area THEN 'A' ELSE NEW.osm_type END,
431                               NEW.class, NEW.type, NEW.admin_level,
432                               (NEW.extratags->'capital') = 'yes',
433                               NEW.address->'postcode');
434
435     -- a country code make no sense below rank 4 (country)
436     IF NEW.rank_search < 4 THEN
437       NEW.country_code := NULL;
438     END IF;
439
440   END IF;
441
442   --DEBUG: RAISE WARNING 'placex_insert:END: % % % %',NEW.osm_type,NEW.osm_id,NEW.class,NEW.type;
443
444   RETURN NEW; -- %DIFFUPDATES% The following is not needed until doing diff updates, and slows the main index process down
445
446   IF NEW.osm_type = 'N' and NEW.rank_search > 28 THEN
447       -- might be part of an interpolation
448       result := osmline_reinsert(NEW.osm_id, NEW.geometry);
449   ELSEIF NEW.rank_address > 0 THEN
450     IF (ST_GeometryType(NEW.geometry) in ('ST_Polygon','ST_MultiPolygon') AND ST_IsValid(NEW.geometry)) THEN
451       -- Performance: We just can't handle re-indexing for country level changes
452       IF st_area(NEW.geometry) < 1 THEN
453         -- mark items within the geometry for re-indexing
454   --    RAISE WARNING 'placex poly insert: % % % %',NEW.osm_type,NEW.osm_id,NEW.class,NEW.type;
455
456         -- work around bug in postgis, this may have been fixed in 2.0.0 (see http://trac.osgeo.org/postgis/ticket/547)
457         update placex set indexed_status = 2 where (st_covers(NEW.geometry, placex.geometry) OR ST_Intersects(NEW.geometry, placex.geometry)) 
458          AND rank_search > NEW.rank_search and indexed_status = 0 and ST_geometrytype(placex.geometry) = 'ST_Point' and (rank_search < 28 or name is not null or (NEW.rank_search >= 16 and address ? 'place'));
459         update placex set indexed_status = 2 where (st_covers(NEW.geometry, placex.geometry) OR ST_Intersects(NEW.geometry, placex.geometry)) 
460          AND rank_search > NEW.rank_search and indexed_status = 0 and ST_geometrytype(placex.geometry) != 'ST_Point' and (rank_search < 28 or name is not null or (NEW.rank_search >= 16 and address ? 'place'));
461       END IF;
462     ELSE
463       -- mark nearby items for re-indexing, where 'nearby' depends on the features rank_search and is a complete guess :(
464       diameter := update_place_diameter(NEW.rank_search);
465       IF diameter > 0 THEN
466   --      RAISE WARNING 'placex point insert: % % % % %',NEW.osm_type,NEW.osm_id,NEW.class,NEW.type,diameter;
467         IF NEW.rank_search >= 26 THEN
468           -- roads may cause reparenting for >27 rank places
469           update placex set indexed_status = 2 where indexed_status = 0 and rank_search > NEW.rank_search and ST_DWithin(placex.geometry, NEW.geometry, diameter);
470           -- reparenting also for OSM Interpolation Lines (and for Tiger?)
471           update location_property_osmline set indexed_status = 2 where indexed_status = 0 and ST_DWithin(location_property_osmline.linegeo, NEW.geometry, diameter);
472         ELSEIF NEW.rank_search >= 16 THEN
473           -- up to rank 16, street-less addresses may need reparenting
474           update placex set indexed_status = 2 where indexed_status = 0 and rank_search > NEW.rank_search and ST_DWithin(placex.geometry, NEW.geometry, diameter) and (rank_search < 28 or name is not null or address ? 'place');
475         ELSE
476           -- for all other places the search terms may change as well
477           update placex set indexed_status = 2 where indexed_status = 0 and rank_search > NEW.rank_search and ST_DWithin(placex.geometry, NEW.geometry, diameter) and (rank_search < 28 or name is not null);
478         END IF;
479       END IF;
480     END IF;
481   END IF;
482
483
484    -- add to tables for special search
485    -- Note: won't work on initial import because the classtype tables
486    -- do not yet exist. It won't hurt either.
487   classtable := 'place_classtype_' || NEW.class || '_' || NEW.type;
488   SELECT count(*)>0 FROM pg_tables WHERE tablename = classtable and schemaname = current_schema() INTO result;
489   IF result THEN
490     EXECUTE 'INSERT INTO ' || classtable::regclass || ' (place_id, centroid) VALUES ($1,$2)' 
491     USING NEW.place_id, ST_Centroid(NEW.geometry);
492   END IF;
493
494   RETURN NEW;
495
496 END;
497 $$
498 LANGUAGE plpgsql;
499
500 CREATE OR REPLACE FUNCTION get_parent_address_level(geom GEOMETRY, in_level SMALLINT)
501   RETURNS SMALLINT
502   AS $$
503 DECLARE
504   address_rank SMALLINT;
505 BEGIN
506   IF in_level <= 3 or in_level > 15 THEN
507     address_rank := 3;
508   ELSE
509     SELECT rank_address INTO address_rank
510       FROM placex
511       WHERE osm_type = 'R' and class = 'boundary' and type = 'administrative'
512             and admin_level < in_level
513             and geometry && geom and ST_Covers(geometry, geom)
514       ORDER BY admin_level desc LIMIT 1;
515   END IF;
516
517   IF address_rank is NULL or address_rank <= 3 THEN
518     RETURN 3;
519   END IF;
520
521   RETURN address_rank;
522 END;
523 $$
524 LANGUAGE plpgsql;
525
526
527 CREATE OR REPLACE FUNCTION placex_update()
528   RETURNS TRIGGER
529   AS $$
530 DECLARE
531   i INTEGER;
532   location RECORD;
533   relation_members TEXT[];
534
535   centroid GEOMETRY;
536   parent_address_level SMALLINT;
537   place_address_level SMALLINT;
538
539   addr_street TEXT;
540   addr_place TEXT;
541
542   name_vector INTEGER[];
543   nameaddress_vector INTEGER[];
544
545   linked_node_id BIGINT;
546   linked_importance FLOAT;
547   linked_wikipedia TEXT;
548
549   result BOOLEAN;
550 BEGIN
551   -- deferred delete
552   IF OLD.indexed_status = 100 THEN
553     --DEBUG: RAISE WARNING 'placex_update delete % %',NEW.osm_type,NEW.osm_id;
554     delete from placex where place_id = OLD.place_id;
555     RETURN NULL;
556   END IF;
557
558   IF NEW.indexed_status != 0 OR OLD.indexed_status = 0 THEN
559     RETURN NEW;
560   END IF;
561
562   --DEBUG: RAISE WARNING 'placex_update % % (%)',NEW.osm_type,NEW.osm_id,NEW.place_id;
563
564   NEW.indexed_date = now();
565
566   IF NOT %REVERSE-ONLY% THEN
567     DELETE from search_name WHERE place_id = NEW.place_id;
568   END IF;
569   result := deleteSearchName(NEW.partition, NEW.place_id);
570   DELETE FROM place_addressline WHERE place_id = NEW.place_id;
571   result := deleteRoad(NEW.partition, NEW.place_id);
572   result := deleteLocationArea(NEW.partition, NEW.place_id, NEW.rank_search);
573   UPDATE placex set linked_place_id = null, indexed_status = 2
574          where linked_place_id = NEW.place_id;
575   -- update not necessary for osmline, cause linked_place_id does not exist
576
577   NEW.extratags := NEW.extratags - 'linked_place'::TEXT;
578
579   IF NEW.linked_place_id is not null THEN
580     --DEBUG: RAISE WARNING 'place already linked to %', NEW.linked_place_id;
581     RETURN NEW;
582   END IF;
583
584   -- recompute the ranks, they might change when linking changes
585   SELECT * INTO NEW.rank_search, NEW.rank_address
586     FROM compute_place_rank(NEW.country_code,
587                             CASE WHEN ST_GeometryType(NEW.geometry)
588                                         IN ('ST_Polygon','ST_MultiPolygon')
589                             THEN 'A' ELSE NEW.osm_type END,
590                             NEW.class, NEW.type, NEW.admin_level,
591                             (NEW.extratags->'capital') = 'yes',
592                             NEW.address->'postcode');
593   -- We must always increase the address level relative to the admin boundary.
594   IF NEW.class = 'boundary' and NEW.type = 'administrative' THEN
595     parent_address_level := get_parent_address_level(NEW.geometry, NEW.admin_level);
596     IF parent_address_level >= NEW.rank_address THEN
597       IF parent_address_level >= 24 THEN
598         NEW.rank_address := 25;
599       ELSE
600         NEW.rank_address := parent_address_level + 2;
601       END IF;
602     END IF;
603   ELSE
604     parent_address_level := 3;
605   END IF;
606
607   --DEBUG: RAISE WARNING 'Copy over address tags';
608   -- housenumber is a computed field, so start with an empty value
609   NEW.housenumber := NULL;
610   IF NEW.address is not NULL THEN
611       IF NEW.address ? 'conscriptionnumber' THEN
612         i := getorcreate_housenumber_id(make_standard_name(NEW.address->'conscriptionnumber'));
613         IF NEW.address ? 'streetnumber' THEN
614             i := getorcreate_housenumber_id(make_standard_name(NEW.address->'streetnumber'));
615             NEW.housenumber := (NEW.address->'conscriptionnumber') || '/' || (NEW.address->'streetnumber');
616         ELSE
617             NEW.housenumber := NEW.address->'conscriptionnumber';
618         END IF;
619       ELSEIF NEW.address ? 'streetnumber' THEN
620         NEW.housenumber := NEW.address->'streetnumber';
621         i := getorcreate_housenumber_id(make_standard_name(NEW.address->'streetnumber'));
622       ELSEIF NEW.address ? 'housenumber' THEN
623         NEW.housenumber := NEW.address->'housenumber';
624         i := getorcreate_housenumber_id(make_standard_name(NEW.housenumber));
625       END IF;
626
627       addr_street := NEW.address->'street';
628       addr_place := NEW.address->'place';
629
630       IF NEW.address ? 'postcode' and NEW.address->'postcode' not similar to '%(,|;)%' THEN
631         i := getorcreate_postcode_id(NEW.address->'postcode');
632       END IF;
633   END IF;
634
635   -- Speed up searches - just use the centroid of the feature
636   -- cheaper but less acurate
637   NEW.centroid := ST_PointOnSurface(NEW.geometry);
638   --DEBUG: RAISE WARNING 'Computing preliminary centroid at %',ST_AsText(NEW.centroid);
639
640   NEW.postcode := null;
641
642   -- recalculate country and partition
643   IF NEW.rank_search = 4 AND NEW.address is not NULL AND NEW.address ? 'country' THEN
644     -- for countries, believe the mapped country code,
645     -- so that we remain in the right partition if the boundaries
646     -- suddenly expand.
647     NEW.country_code := lower(NEW.address->'country');
648     NEW.partition := get_partition(lower(NEW.country_code));
649     IF NEW.partition = 0 THEN
650       NEW.country_code := lower(get_country_code(NEW.centroid));
651       NEW.partition := get_partition(NEW.country_code);
652     END IF;
653   ELSE
654     IF NEW.rank_search >= 4 THEN
655       NEW.country_code := lower(get_country_code(NEW.centroid));
656     ELSE
657       NEW.country_code := NULL;
658     END IF;
659     NEW.partition := get_partition(NEW.country_code);
660   END IF;
661   --DEBUG: RAISE WARNING 'Country updated: "%"', NEW.country_code;
662
663   -- waterway ways are linked when they are part of a relation and have the same class/type
664   IF NEW.osm_type = 'R' and NEW.class = 'waterway' THEN
665       FOR relation_members IN select members from planet_osm_rels r where r.id = NEW.osm_id and r.parts != array[]::bigint[]
666       LOOP
667           FOR i IN 1..array_upper(relation_members, 1) BY 2 LOOP
668               IF relation_members[i+1] in ('', 'main_stream', 'side_stream') AND substring(relation_members[i],1,1) = 'w' THEN
669                 --DEBUG: RAISE WARNING 'waterway parent %, child %/%', NEW.osm_id, i, relation_members[i];
670                 FOR linked_node_id IN SELECT place_id FROM placex
671                   WHERE osm_type = 'W' and osm_id = substring(relation_members[i],2,200)::bigint
672                   and class = NEW.class and type in ('river', 'stream', 'canal', 'drain', 'ditch')
673                   and ( relation_members[i+1] != 'side_stream' or NEW.name->'name' = name->'name')
674                 LOOP
675                   UPDATE placex SET linked_place_id = NEW.place_id WHERE place_id = linked_node_id;
676                   IF NOT %REVERSE-ONLY% THEN
677                     DELETE FROM search_name WHERE place_id = linked_node_id;
678                   END IF;
679                 END LOOP;
680               END IF;
681           END LOOP;
682       END LOOP;
683       --DEBUG: RAISE WARNING 'Waterway processed';
684   END IF;
685
686   NEW.importance := null;
687   SELECT wikipedia, importance
688     FROM compute_importance(NEW.extratags, NEW.country_code, NEW.osm_type, NEW.osm_id)
689     INTO NEW.wikipedia,NEW.importance;
690
691 --DEBUG: RAISE WARNING 'Importance computed from wikipedia: %', NEW.importance;
692
693   -- ---------------------------------------------------------------------------
694   -- For low level elements we inherit from our parent road
695   IF (NEW.rank_search > 27 OR (NEW.type = 'postcode' AND NEW.rank_search = 25)) THEN
696
697     --DEBUG: RAISE WARNING 'finding street for % %', NEW.osm_type, NEW.osm_id;
698     NEW.parent_place_id := null;
699
700     -- if we have a POI and there is no address information,
701     -- see if we can get it from a surrounding building
702     IF NEW.osm_type = 'N' AND addr_street IS NULL AND addr_place IS NULL
703        AND NEW.housenumber IS NULL THEN
704       FOR location IN
705         -- The additional && condition works around the misguided query
706         -- planner of postgis 3.0.
707         SELECT address from placex where ST_Covers(geometry, NEW.centroid)
708             and geometry && NEW.centroid
709             and (address ? 'housenumber' or address ? 'street' or address ? 'place')
710             and rank_search > 28 AND ST_GeometryType(geometry) in ('ST_Polygon','ST_MultiPolygon')
711             limit 1
712       LOOP
713         NEW.housenumber := location.address->'housenumber';
714         addr_street := location.address->'street';
715         addr_place := location.address->'place';
716       END LOOP;
717     END IF;
718
719     -- We have to find our parent road.
720     NEW.parent_place_id := find_parent_for_poi(NEW.osm_type, NEW.osm_id,
721                                                NEW.partition,
722                                                ST_Envelope(NEW.geometry),
723                                                addr_street, addr_place);
724
725     -- If we found the road take a shortcut here.
726     -- Otherwise fall back to the full address getting method below.
727     IF NEW.parent_place_id is not null THEN
728
729       -- Get the details of the parent road
730       SELECT p.country_code, p.postcode FROM placex p
731        WHERE p.place_id = NEW.parent_place_id INTO location;
732
733       NEW.country_code := location.country_code;
734       --DEBUG: RAISE WARNING 'Got parent details from search name';
735
736       -- determine postcode
737       IF NEW.address is not null AND NEW.address ? 'postcode' THEN
738           NEW.postcode = upper(trim(NEW.address->'postcode'));
739       ELSE
740          NEW.postcode := location.postcode;
741       END IF;
742       IF NEW.postcode is null THEN
743         NEW.postcode := get_nearest_postcode(NEW.country_code, NEW.geometry);
744       END IF;
745
746       -- If there is no name it isn't searchable, don't bother to create a search record
747       IF NEW.name is NULL THEN
748         --DEBUG: RAISE WARNING 'Not a searchable place % %', NEW.osm_type, NEW.osm_id;
749         return NEW;
750       END IF;
751
752       NEW.name := add_default_place_name(NEW.country_code, NEW.name);
753       name_vector := make_keywords(NEW.name);
754
755       -- Performance, it would be more acurate to do all the rest of the import
756       -- process but it takes too long
757       -- Just be happy with inheriting from parent road only
758       IF NEW.rank_search <= 25 and NEW.rank_address > 0 THEN
759         result := add_location(NEW.place_id, NEW.country_code, NEW.partition, name_vector, NEW.rank_search, NEW.rank_address, upper(trim(NEW.address->'postcode')), NEW.geometry);
760         --DEBUG: RAISE WARNING 'Place added to location table';
761       END IF;
762
763       result := insertSearchName(NEW.partition, NEW.place_id, name_vector,
764                                  NEW.rank_search, NEW.rank_address, NEW.geometry);
765
766       IF NOT %REVERSE-ONLY% THEN
767           -- Merge address from parent
768           SELECT array_merge(s.name_vector, s.nameaddress_vector)
769             INTO nameaddress_vector
770             FROM search_name s
771             WHERE s.place_id = NEW.parent_place_id;
772
773           INSERT INTO search_name (place_id, search_rank, address_rank,
774                                    importance, country_code, name_vector,
775                                    nameaddress_vector, centroid)
776                  VALUES (NEW.place_id, NEW.rank_search, NEW.rank_address,
777                          NEW.importance, NEW.country_code, name_vector,
778                          nameaddress_vector, NEW.centroid);
779           --DEBUG: RAISE WARNING 'Place added to search table';
780         END IF;
781
782       return NEW;
783     END IF;
784
785   END IF;
786
787   -- ---------------------------------------------------------------------------
788   -- Full indexing
789   --DEBUG: RAISE WARNING 'Using full index mode for % %', NEW.osm_type, NEW.osm_id;
790   SELECT * INTO location FROM find_linked_place(NEW);
791   IF location.place_id is not null THEN
792     --DEBUG: RAISE WARNING 'Linked %', location;
793
794     -- Use the linked point as the centre point of the geometry,
795     -- but only if it is within the area of the boundary.
796     centroid := coalesce(location.centroid, ST_Centroid(location.geometry));
797     IF centroid is not NULL AND ST_Within(centroid, NEW.geometry) THEN
798         NEW.centroid := centroid;
799     END IF;
800
801     --DEBUG: RAISE WARNING 'parent address: % rank address: %', parent_address_level, location.rank_address;
802     IF location.rank_address > parent_address_level
803        and location.rank_address < 26
804     THEN
805       NEW.rank_address := location.rank_address;
806     END IF;
807
808     -- merge in the label name
809     IF NOT location.name IS NULL THEN
810       NEW.name := location.name || NEW.name;
811     END IF;
812
813     -- merge in extra tags
814     NEW.extratags := hstore('linked_' || location.class, location.type)
815                      || coalesce(location.extratags, ''::hstore)
816                      || coalesce(NEW.extratags, ''::hstore);
817
818     -- mark the linked place (excludes from search results)
819     UPDATE placex set linked_place_id = NEW.place_id
820       WHERE place_id = location.place_id;
821     -- ensure that those places are not found anymore
822     IF NOT %REVERSE-ONLY% THEN
823       DELETE FROM search_name WHERE place_id = location.place_id;
824     END IF;
825     PERFORM deleteLocationArea(NEW.partition, location.place_id, NEW.rank_search);
826
827     SELECT wikipedia, importance
828       FROM compute_importance(location.extratags, NEW.country_code,
829                               'N', location.osm_id)
830       INTO linked_wikipedia,linked_importance;
831
832     -- Use the maximum importance if one could be computed from the linked object.
833     IF linked_importance is not null AND
834        (NEW.importance is null or NEW.importance < linked_importance)
835     THEN
836       NEW.importance = linked_importance;
837     END IF;
838   ELSE
839     -- No linked place? As a last resort check if the boundary is tagged with
840     -- a place type and adapt the rank address.
841     IF NEW.rank_address > 0 and NEW.extratags ? 'place' THEN
842       SELECT address_rank INTO place_address_level
843         FROM compute_place_rank(NEW.country_code, 'A', 'place',
844                                 NEW.extratags->'place', 0::SMALLINT, False, null);
845       IF place_address_level > parent_address_level and
846          place_address_level < 26 THEN
847         NEW.rank_address := place_address_level;
848       END IF;
849     END IF;
850   END IF;
851
852   -- Initialise the name vector using our name
853   NEW.name := add_default_place_name(NEW.country_code, NEW.name);
854   name_vector := make_keywords(NEW.name);
855
856   -- make sure all names are in the word table
857   IF NEW.admin_level = 2
858      AND NEW.class = 'boundary' AND NEW.type = 'administrative'
859      AND NEW.country_code IS NOT NULL AND NEW.osm_type = 'R'
860   THEN
861     PERFORM create_country(NEW.name, lower(NEW.country_code));
862     --DEBUG: RAISE WARNING 'Country names updated';
863   END IF;
864
865   SELECT * FROM insert_addresslines(NEW.place_id, NEW.partition,
866                                     CASE WHEN NEW.rank_address = 0
867                                       THEN NEW.rank_search ELSE NEW.rank_address END,
868                                     NEW.address,
869                                     CASE WHEN NEW.rank_search >= 26
870                                              AND NEW.rank_search < 30
871                                       THEN NEW.geometry ELSE NEW.centroid END)
872     INTO NEW.parent_place_id, NEW.postcode, nameaddress_vector;
873
874   --DEBUG: RAISE WARNING 'RETURN insert_addresslines: %, %, %', NEW.parent_place_id, NEW.postcode, nameaddress_vector;
875
876   IF NEW.address is not null AND NEW.address ? 'postcode' 
877      AND NEW.address->'postcode' not similar to '%(,|;)%' THEN
878     NEW.postcode := upper(trim(NEW.address->'postcode'));
879   END IF;
880
881   IF NEW.postcode is null AND NEW.rank_search > 8 THEN
882     NEW.postcode := get_nearest_postcode(NEW.country_code, NEW.geometry);
883   END IF;
884
885   -- if we have a name add this to the name search table
886   IF NEW.name IS NOT NULL THEN
887
888     IF NEW.rank_search <= 25 and NEW.rank_address > 0 THEN
889       result := add_location(NEW.place_id, NEW.country_code, NEW.partition, name_vector, NEW.rank_search, NEW.rank_address, upper(trim(NEW.address->'postcode')), NEW.geometry);
890       --DEBUG: RAISE WARNING 'added to location (full)';
891     END IF;
892
893     IF NEW.rank_search between 26 and 27 and NEW.class = 'highway' THEN
894       result := insertLocationRoad(NEW.partition, NEW.place_id, NEW.country_code, NEW.geometry);
895       --DEBUG: RAISE WARNING 'insert into road location table (full)';
896     END IF;
897
898     result := insertSearchName(NEW.partition, NEW.place_id, name_vector,
899                                NEW.rank_search, NEW.rank_address, NEW.geometry);
900     --DEBUG: RAISE WARNING 'added to search name (full)';
901
902     IF NOT %REVERSE-ONLY% THEN
903         INSERT INTO search_name (place_id, search_rank, address_rank,
904                                  importance, country_code, name_vector,
905                                  nameaddress_vector, centroid)
906                VALUES (NEW.place_id, NEW.rank_search, NEW.rank_address,
907                        NEW.importance, NEW.country_code, name_vector,
908                        nameaddress_vector, NEW.centroid);
909     END IF;
910
911   END IF;
912
913   --DEBUG: RAISE WARNING 'place update % % finsihed.', NEW.osm_type, NEW.osm_id;
914
915   RETURN NEW;
916 END;
917 $$
918 LANGUAGE plpgsql;
919
920
921 CREATE OR REPLACE FUNCTION placex_delete()
922   RETURNS TRIGGER
923   AS $$
924 DECLARE
925   b BOOLEAN;
926   classtable TEXT;
927 BEGIN
928   -- RAISE WARNING 'placex_delete % %',OLD.osm_type,OLD.osm_id;
929
930   IF OLD.linked_place_id is null THEN
931     update placex set linked_place_id = null, indexed_status = 2 where linked_place_id = OLD.place_id and indexed_status = 0;
932     --DEBUG: RAISE WARNING 'placex_delete:01 % %',OLD.osm_type,OLD.osm_id;
933     update placex set linked_place_id = null where linked_place_id = OLD.place_id;
934     --DEBUG: RAISE WARNING 'placex_delete:02 % %',OLD.osm_type,OLD.osm_id;
935   ELSE
936     update placex set indexed_status = 2 where place_id = OLD.linked_place_id and indexed_status = 0;
937   END IF;
938
939   IF OLD.rank_address < 30 THEN
940
941     -- mark everything linked to this place for re-indexing
942     --DEBUG: RAISE WARNING 'placex_delete:03 % %',OLD.osm_type,OLD.osm_id;
943     UPDATE placex set indexed_status = 2 from place_addressline where address_place_id = OLD.place_id 
944       and placex.place_id = place_addressline.place_id and indexed_status = 0 and place_addressline.isaddress;
945
946     --DEBUG: RAISE WARNING 'placex_delete:04 % %',OLD.osm_type,OLD.osm_id;
947     DELETE FROM place_addressline where address_place_id = OLD.place_id;
948
949     --DEBUG: RAISE WARNING 'placex_delete:05 % %',OLD.osm_type,OLD.osm_id;
950     b := deleteRoad(OLD.partition, OLD.place_id);
951
952     --DEBUG: RAISE WARNING 'placex_delete:06 % %',OLD.osm_type,OLD.osm_id;
953     update placex set indexed_status = 2 where parent_place_id = OLD.place_id and indexed_status = 0;
954     --DEBUG: RAISE WARNING 'placex_delete:07 % %',OLD.osm_type,OLD.osm_id;
955     -- reparenting also for OSM Interpolation Lines (and for Tiger?)
956     update location_property_osmline set indexed_status = 2 where indexed_status = 0 and parent_place_id = OLD.place_id;
957
958   END IF;
959
960   --DEBUG: RAISE WARNING 'placex_delete:08 % %',OLD.osm_type,OLD.osm_id;
961
962   IF OLD.rank_address < 26 THEN
963     b := deleteLocationArea(OLD.partition, OLD.place_id, OLD.rank_search);
964   END IF;
965
966   --DEBUG: RAISE WARNING 'placex_delete:09 % %',OLD.osm_type,OLD.osm_id;
967
968   IF OLD.name is not null THEN
969     IF NOT %REVERSE-ONLY% THEN
970       DELETE from search_name WHERE place_id = OLD.place_id;
971     END IF;
972     b := deleteSearchName(OLD.partition, OLD.place_id);
973   END IF;
974
975   --DEBUG: RAISE WARNING 'placex_delete:10 % %',OLD.osm_type,OLD.osm_id;
976
977   DELETE FROM place_addressline where place_id = OLD.place_id;
978
979   --DEBUG: RAISE WARNING 'placex_delete:11 % %',OLD.osm_type,OLD.osm_id;
980
981   -- remove from tables for special search
982   classtable := 'place_classtype_' || OLD.class || '_' || OLD.type;
983   SELECT count(*)>0 FROM pg_tables WHERE tablename = classtable and schemaname = current_schema() INTO b;
984   IF b THEN
985     EXECUTE 'DELETE FROM ' || classtable::regclass || ' WHERE place_id = $1' USING OLD.place_id;
986   END IF;
987
988   --DEBUG: RAISE WARNING 'placex_delete:12 % %',OLD.osm_type,OLD.osm_id;
989
990   RETURN OLD;
991
992 END;
993 $$
994 LANGUAGE plpgsql;