]> git.openstreetmap.org Git - nominatim.git/blob - sql/functions/placex_triggers.sql
Merge pull request #1745 from lonvia/shuffle-sql-functions
[nominatim.git] / sql / functions / placex_triggers.sql
1 -- Trigger functions for the placex table.
2
3 -- Find the parent road of a POI.
4 --
5 -- \returns Place ID of parent object or NULL if none
6 --
7 -- Copy data from linked items (POIs on ways, addr:street links, relations).
8 --
9 CREATE OR REPLACE FUNCTION find_parent_for_poi(poi_osm_type CHAR(1),
10                                                poi_osm_id BIGINT,
11                                                poi_partition SMALLINT,
12                                                bbox GEOMETRY,
13                                                addr_street TEXT,
14                                                addr_place TEXT,
15                                                fallback BOOL = true)
16   RETURNS BIGINT
17   AS $$
18 DECLARE
19   parent_place_id BIGINT DEFAULT NULL;
20   location RECORD;
21   parent RECORD;
22 BEGIN
23     --DEBUG: RAISE WARNING 'finding street for % %', poi_osm_type, poi_osm_id;
24
25     -- Is this object part of an associatedStreet relation?
26     FOR location IN
27       SELECT members FROM planet_osm_rels
28       WHERE parts @> ARRAY[poi_osm_id]
29         and members @> ARRAY[lower(poi_osm_type) || poi_osm_id]
30         and tags @> ARRAY['associatedStreet']
31     LOOP
32       FOR i IN 1..array_upper(location.members, 1) BY 2 LOOP
33         IF location.members[i+1] = 'street' THEN
34           --DEBUG: RAISE WARNING 'node in relation %',relation;
35           FOR parent IN
36             SELECT place_id from placex
37              WHERE osm_type = 'W' and osm_id = substring(location.members[i],2)::bigint
38                and name is not null
39                and rank_search between 26 and 27
40           LOOP
41             RETURN parent.place_id;
42           END LOOP;
43         END IF;
44       END LOOP;
45     END LOOP;
46
47     parent_place_id := find_parent_for_address(addr_street, addr_place,
48                                                poi_partition, bbox);
49     IF parent_place_id is not null THEN
50       RETURN parent_place_id;
51     END IF;
52
53     IF poi_osm_type = 'N' THEN
54       -- Is this node part of an interpolation?
55       FOR parent IN
56         SELECT q.parent_place_id
57           FROM location_property_osmline q, planet_osm_ways x
58          WHERE q.linegeo && bbox and x.id = q.osm_id
59                and poi_osm_id = any(x.nodes)
60          LIMIT 1
61       LOOP
62         --DEBUG: RAISE WARNING 'Get parent from interpolation: %', parent.parent_place_id;
63         RETURN parent.parent_place_id;
64       END LOOP;
65
66       -- Is this node part of any other way?
67       FOR location IN
68         SELECT p.place_id, p.osm_id, p.rank_search, p.address,
69                coalesce(p.centroid, ST_Centroid(p.geometry)) as centroid
70           FROM placex p, planet_osm_ways w
71          WHERE p.osm_type = 'W' and p.rank_search >= 26
72                and p.geometry && bbox
73                and w.id = p.osm_id and poi_osm_id = any(w.nodes)
74       LOOP
75         --DEBUG: RAISE WARNING 'Node is part of way % ', location.osm_id;
76
77         -- Way IS a road then we are on it - that must be our road
78         IF location.rank_search < 28 THEN
79           --DEBUG: RAISE WARNING 'node in way that is a street %',location;
80           return location.place_id;
81         END IF;
82
83         SELECT find_parent_for_poi('W', location.osm_id, poi_partition,
84                                    location.centroid,
85                                    location.address->'street',
86                                    location.address->'place',
87                                    false)
88           INTO parent_place_id;
89         IF parent_place_id is not null THEN
90           RETURN parent_place_id;
91         END IF;
92       END LOOP;
93     END IF;
94
95     IF fallback THEN
96       IF ST_Area(bbox) < 0.01 THEN
97         -- for smaller features get the nearest road
98         SELECT getNearestRoadPlaceId(poi_partition, bbox) INTO parent_place_id;
99         --DEBUG: RAISE WARNING 'Checked for nearest way (%)', parent_place_id;
100       ELSE
101         -- for larger features simply find the area with the largest rank that
102         -- contains the bbox
103         FOR location IN
104           SELECT place_id FROM placex
105             WHERE bbox @ geometry AND _ST_Covers(geometry, ST_Centroid(bbox))
106                   AND rank_search between 5 and 25
107             ORDER BY rank_search desc
108         LOOP
109             RETURN location.place_id;
110         END LOOP;
111       END IF;
112     END IF;
113
114     RETURN parent_place_id;
115 END;
116 $$
117 LANGUAGE plpgsql STABLE;
118
119 -- Try to find a linked place for the given object.
120 CREATE OR REPLACE FUNCTION find_linked_place(bnd placex)
121   RETURNS placex
122   AS $$
123 DECLARE
124   relation_members TEXT[];
125   rel_member RECORD;
126   linked_placex placex%ROWTYPE;
127   bnd_name TEXT;
128 BEGIN
129   IF bnd.rank_search >= 26 or bnd.rank_address = 0
130      or ST_GeometryType(bnd.geometry) NOT IN ('ST_Polygon','ST_MultiPolygon')
131   THEN
132     RETURN NULL;
133   END IF;
134
135   IF bnd.osm_type = 'R' THEN
136     -- see if we have any special relation members
137     SELECT members FROM planet_osm_rels WHERE id = bnd.osm_id INTO relation_members;
138     --DEBUG: RAISE WARNING 'Got relation members';
139
140     -- Search for relation members with role 'lable'.
141     IF relation_members IS NOT NULL THEN
142       FOR rel_member IN
143         SELECT get_rel_node_members(relation_members, ARRAY['label']) as member
144       LOOP
145         --DEBUG: RAISE WARNING 'Found label member %', rel_member.member;
146
147         FOR linked_placex IN
148           SELECT * from placex
149           WHERE osm_type = 'N' and osm_id = rel_member.member
150             and class = 'place'
151         LOOP
152           --DEBUG: RAISE WARNING 'Linked label member';
153           RETURN linked_placex;
154         END LOOP;
155
156       END LOOP;
157     END IF;
158   END IF;
159
160   IF bnd.name ? 'name' THEN
161     bnd_name := make_standard_name(bnd.name->'name');
162     IF bnd_name = '' THEN
163       bnd_name := NULL;
164     END IF;
165   END IF;
166
167   -- If extratags has a place tag, look for linked nodes by their place type.
168   -- Area and node still have to have the same name.
169   IF bnd.extratags ? 'place' and bnd_name is not null THEN
170     FOR linked_placex IN
171       SELECT * FROM placex
172       WHERE make_standard_name(name->'name') = bnd_name
173         AND placex.class = 'place' AND placex.type = bnd.extratags->'place'
174         AND placex.osm_type = 'N'
175         AND placex.rank_search < 26 -- needed to select the right index
176         AND _st_covers(bnd.geometry, placex.geometry)
177     LOOP
178       --DEBUG: RAISE WARNING 'Found type-matching place node %', linked_placex.osm_id;
179       RETURN linked_placex;
180     END LOOP;
181   END IF;
182
183   IF bnd.extratags ? 'wikidata' THEN
184     FOR linked_placex IN
185       SELECT * FROM placex
186       WHERE placex.class = 'place' AND placex.osm_type = 'N'
187         AND placex.extratags ? 'wikidata' -- needed to select right index
188         AND placex.extratags->'wikidata' = bnd.extratags->'wikidata'
189         AND placex.rank_search < 26
190         AND _st_covers(bnd.geometry, placex.geometry)
191       ORDER BY make_standard_name(name->'name') = bnd_name desc
192     LOOP
193       --DEBUG: RAISE WARNING 'Found wikidata-matching place node %', linked_placex.osm_id;
194       RETURN linked_placex;
195     END LOOP;
196   END IF;
197
198   -- Name searches can be done for ways as well as relations
199   IF bnd_name is not null THEN
200     --DEBUG: RAISE WARNING 'Looking for nodes with matching names';
201     FOR linked_placex IN
202       SELECT placex.* from placex
203       WHERE make_standard_name(name->'name') = bnd_name
204         AND ((bnd.rank_address > 0 and placex.rank_address = bnd.rank_address)
205              OR (bnd.rank_address = 0 and placex.rank_search = bnd.rank_search))
206         AND placex.osm_type = 'N'
207         AND placex.rank_search < 26 -- needed to select the right index
208         AND _st_covers(bnd.geometry, placex.geometry)
209     LOOP
210       --DEBUG: RAISE WARNING 'Found matching place node %', linked_placex.osm_id;
211       RETURN linked_placex;
212     END LOOP;
213   END IF;
214
215   RETURN NULL;
216 END;
217 $$
218 LANGUAGE plpgsql STABLE;
219
220
221 -- Insert address of a place into the place_addressline table.
222 --
223 -- \param obj_place_id  Place_id of the place to compute the address for.
224 -- \param partition     Partition number where the place is in.
225 -- \param maxrank       Rank of the place. All address features must have
226 --                      a search rank lower than the given rank.
227 -- \param address       Address terms for the place.
228 -- \param geoemtry      Geometry to which the address objects should be close.
229 --
230 -- \retval parent_place_id  Place_id of the address object that is the direct
231 --                          ancestor.
232 -- \retval postcode         Postcode computed from the address. This is the
233 --                          addr:postcode of one of the address objects. If
234 --                          more than one of has a postcode, the highest ranking
235 --                          one is used. May be NULL.
236 -- \retval nameaddress_vector  Search terms for the address. This is the sum
237 --                             of name terms of all address objects.
238 CREATE OR REPLACE FUNCTION insert_addresslines(obj_place_id BIGINT,
239                                                partition SMALLINT,
240                                                maxrank SMALLINT,
241                                                address HSTORE,
242                                                geometry GEOMETRY,
243                                                OUT parent_place_id BIGINT,
244                                                OUT postcode TEXT,
245                                                OUT nameaddress_vector INT[])
246   AS $$
247 DECLARE
248   current_rank_address INTEGER := 0;
249   location_distance FLOAT := 0;
250   location_parent GEOMETRY := NULL;
251   parent_place_id_rank SMALLINT := 0;
252
253   location_isaddress BOOLEAN;
254
255   address_havelevel BOOLEAN[];
256   location_keywords INT[];
257
258   location RECORD;
259   addr_item RECORD;
260
261   isin_tokens INT[];
262   isin TEXT[];
263 BEGIN
264   parent_place_id := 0;
265   nameaddress_vector := '{}'::int[];
266   isin_tokens := '{}'::int[];
267
268   ---- convert address store to array of tokenids
269   IF address IS NOT NULL THEN
270     FOR addr_item IN SELECT * FROM each(address)
271     LOOP
272       IF addr_item.key IN ('city', 'tiger:county', 'state', 'suburb', 'province',
273                            'district', 'region', 'county', 'municipality',
274                            'hamlet', 'village', 'subdistrict', 'town',
275                            'neighbourhood', 'quarter', 'parish')
276       THEN
277         isin_tokens := array_merge(isin_tokens,
278                                    word_ids_from_name(addr_item.value));
279         IF NOT %REVERSE-ONLY% THEN
280           nameaddress_vector := array_merge(nameaddress_vector,
281                                             addr_ids_from_name(addr_item.value));
282         END IF;
283       END IF;
284     END LOOP;
285
286     IF address ? 'is_in' THEN
287       -- is_in items need splitting
288       isin := regexp_split_to_array(address->'is_in', E'[;,]');
289       IF array_upper(isin, 1) IS NOT NULL THEN
290         FOR i IN 1..array_upper(isin, 1) LOOP
291           isin_tokens := array_merge(isin_tokens,
292                                      word_ids_from_name(isin[i]));
293
294           -- merge word into address vector
295           IF NOT %REVERSE-ONLY% THEN
296             nameaddress_vector := array_merge(nameaddress_vector,
297                                               addr_ids_from_name(isin[i]));
298           END IF;
299         END LOOP;
300       END IF;
301     END IF;
302   END IF;
303   IF NOT %REVERSE-ONLY% THEN
304     nameaddress_vector := array_merge(nameaddress_vector, isin_tokens);
305   END IF;
306
307   ---- now compute the address terms
308   FOR i IN 1..28 LOOP
309     address_havelevel[i] := false;
310   END LOOP;
311
312   FOR location IN
313     SELECT * FROM getNearFeatures(partition, geometry, maxrank, isin_tokens)
314   LOOP
315     IF location.rank_address != current_rank_address THEN
316       current_rank_address := location.rank_address;
317       IF location.isguess THEN
318         location_distance := location.distance * 1.5;
319       ELSE
320         IF location.rank_address <= 12 THEN
321           -- for county and above, if we have an area consider that exact
322           -- (It would be nice to relax the constraint for places close to
323           --  the boundary but we'd need the exact geometry for that. Too
324           --  expensive.)
325           location_distance = 0;
326         ELSE
327           -- Below county level remain slightly fuzzy.
328           location_distance := location.distance * 0.5;
329         END IF;
330       END IF;
331     ELSE
332       CONTINUE WHEN location.keywords <@ location_keywords;
333     END IF;
334
335     IF location.distance < location_distance OR NOT location.isguess THEN
336       location_keywords := location.keywords;
337
338       location_isaddress := NOT address_havelevel[location.rank_address];
339       --DEBUG: RAISE WARNING 'should be address: %, is guess: %, rank: %', location_isaddress, location.isguess, location.rank_address;
340       IF location_isaddress AND location.isguess AND location_parent IS NOT NULL THEN
341           location_isaddress := ST_Contains(location_parent, location.centroid);
342       END IF;
343
344       --DEBUG: RAISE WARNING '% isaddress: %', location.place_id, location_isaddress;
345       -- Add it to the list of search terms
346       IF NOT %REVERSE-ONLY% THEN
347           nameaddress_vector := array_merge(nameaddress_vector,
348                                             location.keywords::integer[]);
349       END IF;
350
351       INSERT INTO place_addressline (place_id, address_place_id, fromarea,
352                                      isaddress, distance, cached_rank_address)
353         VALUES (obj_place_id, location.place_id, true,
354                 location_isaddress, location.distance, location.rank_address);
355
356       IF location_isaddress THEN
357         -- add postcode if we have one
358         -- (If multiple postcodes are available, we end up with the highest ranking one.)
359         IF location.postcode is not null THEN
360             postcode = location.postcode;
361         END IF;
362
363         address_havelevel[location.rank_address] := true;
364         -- add a hack against postcode ranks
365         IF NOT location.isguess
366            AND location.rank_address != 11 AND location.rank_address != 5
367         THEN
368           SELECT p.geometry FROM placex p
369             WHERE p.place_id = location.place_id INTO location_parent;
370         END IF;
371
372         IF location.rank_address > parent_place_id_rank THEN
373           parent_place_id = location.place_id;
374           parent_place_id_rank = location.rank_address;
375         END IF;
376       END IF;
377     END IF;
378
379   END LOOP;
380 END;
381 $$
382 LANGUAGE plpgsql;
383
384
385 CREATE OR REPLACE FUNCTION placex_insert()
386   RETURNS TRIGGER
387   AS $$
388 DECLARE
389   postcode TEXT;
390   result BOOLEAN;
391   is_area BOOLEAN;
392   country_code VARCHAR(2);
393   diameter FLOAT;
394   classtable TEXT;
395   classtype TEXT;
396 BEGIN
397   --DEBUG: RAISE WARNING '% % % %',NEW.osm_type,NEW.osm_id,NEW.class,NEW.type;
398
399   NEW.place_id := nextval('seq_place');
400   NEW.indexed_status := 1; --STATUS_NEW
401
402   NEW.country_code := lower(get_country_code(NEW.geometry));
403
404   NEW.partition := get_partition(NEW.country_code);
405   NEW.geometry_sector := geometry_sector(NEW.partition, NEW.geometry);
406
407   IF NEW.osm_type = 'X' THEN
408     -- E'X'ternal records should already be in the right format so do nothing
409   ELSE
410     is_area := ST_GeometryType(NEW.geometry) IN ('ST_Polygon','ST_MultiPolygon');
411
412     IF NEW.class in ('place','boundary')
413        AND NEW.type in ('postcode','postal_code') THEN
414
415       IF NEW.address IS NULL OR NOT NEW.address ? 'postcode' THEN
416           -- most likely just a part of a multipolygon postcode boundary, throw it away
417           RETURN NULL;
418       END IF;
419
420       NEW.name := hstore('ref', NEW.address->'postcode');
421
422       SELECT * FROM get_postcode_rank(NEW.country_code, NEW.address->'postcode')
423         INTO NEW.rank_search, NEW.rank_address;
424
425       IF NOT is_area THEN
426           NEW.rank_address := 0;
427       END IF;
428     ELSEIF NEW.class = 'boundary' AND NOT is_area THEN
429         return NULL;
430     ELSEIF NEW.class = 'boundary' AND NEW.type = 'administrative'
431            AND NEW.admin_level <= 4 AND NEW.osm_type = 'W' THEN
432         return NULL;
433     ELSEIF NEW.osm_type = 'N' AND NEW.class = 'highway' THEN
434         NEW.rank_search = 30;
435         NEW.rank_address = 0;
436     ELSEIF NEW.class = 'landuse' AND NOT is_area THEN
437         NEW.rank_search = 30;
438         NEW.rank_address = 0;
439     ELSE
440       -- do table lookup stuff
441       IF NEW.class = 'boundary' and NEW.type = 'administrative' THEN
442         classtype = NEW.type || NEW.admin_level::TEXT;
443       ELSE
444         classtype = NEW.type;
445       END IF;
446       SELECT l.rank_search, l.rank_address FROM address_levels l
447        WHERE (l.country_code = NEW.country_code or l.country_code is NULL)
448              AND l.class = NEW.class AND (l.type = classtype or l.type is NULL)
449        ORDER BY l.country_code, l.class, l.type LIMIT 1
450         INTO NEW.rank_search, NEW.rank_address;
451
452       IF NEW.rank_search is NULL THEN
453         NEW.rank_search := 30;
454       END IF;
455
456       IF NEW.rank_address is NULL THEN
457         NEW.rank_address := 30;
458       END IF;
459     END IF;
460
461     -- some postcorrections
462     IF NEW.class = 'waterway' AND NEW.osm_type = 'R' THEN
463         -- Slightly promote waterway relations so that they are processed
464         -- before their members.
465         NEW.rank_search := NEW.rank_search - 1;
466     END IF;
467
468     IF (NEW.extratags -> 'capital') = 'yes' THEN
469       NEW.rank_search := NEW.rank_search - 1;
470     END IF;
471
472   END IF;
473
474   -- a country code make no sense below rank 4 (country)
475   IF NEW.rank_search < 4 THEN
476     NEW.country_code := NULL;
477   END IF;
478
479   --DEBUG: RAISE WARNING 'placex_insert:END: % % % %',NEW.osm_type,NEW.osm_id,NEW.class,NEW.type;
480
481   RETURN NEW; -- %DIFFUPDATES% The following is not needed until doing diff updates, and slows the main index process down
482
483   IF NEW.osm_type = 'N' and NEW.rank_search > 28 THEN
484       -- might be part of an interpolation
485       result := osmline_reinsert(NEW.osm_id, NEW.geometry);
486   ELSEIF NEW.rank_address > 0 THEN
487     IF (ST_GeometryType(NEW.geometry) in ('ST_Polygon','ST_MultiPolygon') AND ST_IsValid(NEW.geometry)) THEN
488       -- Performance: We just can't handle re-indexing for country level changes
489       IF st_area(NEW.geometry) < 1 THEN
490         -- mark items within the geometry for re-indexing
491   --    RAISE WARNING 'placex poly insert: % % % %',NEW.osm_type,NEW.osm_id,NEW.class,NEW.type;
492
493         -- work around bug in postgis, this may have been fixed in 2.0.0 (see http://trac.osgeo.org/postgis/ticket/547)
494         update placex set indexed_status = 2 where (st_covers(NEW.geometry, placex.geometry) OR ST_Intersects(NEW.geometry, placex.geometry)) 
495          AND rank_search > NEW.rank_search and indexed_status = 0 and ST_geometrytype(placex.geometry) = 'ST_Point' and (rank_search < 28 or name is not null or (NEW.rank_search >= 16 and address ? 'place'));
496         update placex set indexed_status = 2 where (st_covers(NEW.geometry, placex.geometry) OR ST_Intersects(NEW.geometry, placex.geometry)) 
497          AND rank_search > NEW.rank_search and indexed_status = 0 and ST_geometrytype(placex.geometry) != 'ST_Point' and (rank_search < 28 or name is not null or (NEW.rank_search >= 16 and address ? 'place'));
498       END IF;
499     ELSE
500       -- mark nearby items for re-indexing, where 'nearby' depends on the features rank_search and is a complete guess :(
501       diameter := update_place_diameter(NEW.rank_search);
502       IF diameter > 0 THEN
503   --      RAISE WARNING 'placex point insert: % % % % %',NEW.osm_type,NEW.osm_id,NEW.class,NEW.type,diameter;
504         IF NEW.rank_search >= 26 THEN
505           -- roads may cause reparenting for >27 rank places
506           update placex set indexed_status = 2 where indexed_status = 0 and rank_search > NEW.rank_search and ST_DWithin(placex.geometry, NEW.geometry, diameter);
507           -- reparenting also for OSM Interpolation Lines (and for Tiger?)
508           update location_property_osmline set indexed_status = 2 where indexed_status = 0 and ST_DWithin(location_property_osmline.linegeo, NEW.geometry, diameter);
509         ELSEIF NEW.rank_search >= 16 THEN
510           -- up to rank 16, street-less addresses may need reparenting
511           update placex set indexed_status = 2 where indexed_status = 0 and rank_search > NEW.rank_search and ST_DWithin(placex.geometry, NEW.geometry, diameter) and (rank_search < 28 or name is not null or address ? 'place');
512         ELSE
513           -- for all other places the search terms may change as well
514           update placex set indexed_status = 2 where indexed_status = 0 and rank_search > NEW.rank_search and ST_DWithin(placex.geometry, NEW.geometry, diameter) and (rank_search < 28 or name is not null);
515         END IF;
516       END IF;
517     END IF;
518   END IF;
519
520
521    -- add to tables for special search
522    -- Note: won't work on initial import because the classtype tables
523    -- do not yet exist. It won't hurt either.
524   classtable := 'place_classtype_' || NEW.class || '_' || NEW.type;
525   SELECT count(*)>0 FROM pg_tables WHERE tablename = classtable and schemaname = current_schema() INTO result;
526   IF result THEN
527     EXECUTE 'INSERT INTO ' || classtable::regclass || ' (place_id, centroid) VALUES ($1,$2)' 
528     USING NEW.place_id, ST_Centroid(NEW.geometry);
529   END IF;
530
531   RETURN NEW;
532
533 END;
534 $$
535 LANGUAGE plpgsql;
536
537
538 CREATE OR REPLACE FUNCTION placex_update()
539   RETURNS TRIGGER
540   AS $$
541 DECLARE
542   i INTEGER;
543   location RECORD;
544   relation_members TEXT[];
545
546   centroid GEOMETRY;
547
548   addr_street TEXT;
549   addr_place TEXT;
550
551   name_vector INTEGER[];
552   nameaddress_vector INTEGER[];
553
554   linked_node_id BIGINT;
555   linked_importance FLOAT;
556   linked_wikipedia TEXT;
557
558   result BOOLEAN;
559 BEGIN
560   -- deferred delete
561   IF OLD.indexed_status = 100 THEN
562     --DEBUG: RAISE WARNING 'placex_update delete % %',NEW.osm_type,NEW.osm_id;
563     delete from placex where place_id = OLD.place_id;
564     RETURN NULL;
565   END IF;
566
567   IF NEW.indexed_status != 0 OR OLD.indexed_status = 0 THEN
568     RETURN NEW;
569   END IF;
570
571   --DEBUG: RAISE WARNING 'placex_update % % (%)',NEW.osm_type,NEW.osm_id,NEW.place_id;
572
573   NEW.indexed_date = now();
574
575   IF NOT %REVERSE-ONLY% THEN
576     DELETE from search_name WHERE place_id = NEW.place_id;
577   END IF;
578   result := deleteSearchName(NEW.partition, NEW.place_id);
579   DELETE FROM place_addressline WHERE place_id = NEW.place_id;
580   result := deleteRoad(NEW.partition, NEW.place_id);
581   result := deleteLocationArea(NEW.partition, NEW.place_id, NEW.rank_search);
582   UPDATE placex set linked_place_id = null, indexed_status = 2
583          where linked_place_id = NEW.place_id;
584   -- update not necessary for osmline, cause linked_place_id does not exist
585
586   IF NEW.linked_place_id is not null THEN
587     --DEBUG: RAISE WARNING 'place already linked to %', NEW.linked_place_id;
588     RETURN NEW;
589   END IF;
590
591   --DEBUG: RAISE WARNING 'Copy over address tags';
592   -- housenumber is a computed field, so start with an empty value
593   NEW.housenumber := NULL;
594   IF NEW.address is not NULL THEN
595       IF NEW.address ? 'conscriptionnumber' THEN
596         i := getorcreate_housenumber_id(make_standard_name(NEW.address->'conscriptionnumber'));
597         IF NEW.address ? 'streetnumber' THEN
598             i := getorcreate_housenumber_id(make_standard_name(NEW.address->'streetnumber'));
599             NEW.housenumber := (NEW.address->'conscriptionnumber') || '/' || (NEW.address->'streetnumber');
600         ELSE
601             NEW.housenumber := NEW.address->'conscriptionnumber';
602         END IF;
603       ELSEIF NEW.address ? 'streetnumber' THEN
604         NEW.housenumber := NEW.address->'streetnumber';
605         i := getorcreate_housenumber_id(make_standard_name(NEW.address->'streetnumber'));
606       ELSEIF NEW.address ? 'housenumber' THEN
607         NEW.housenumber := NEW.address->'housenumber';
608         i := getorcreate_housenumber_id(make_standard_name(NEW.housenumber));
609       END IF;
610
611       addr_street := NEW.address->'street';
612       addr_place := NEW.address->'place';
613
614       IF NEW.address ? 'postcode' and NEW.address->'postcode' not similar to '%(,|;)%' THEN
615         i := getorcreate_postcode_id(NEW.address->'postcode');
616       END IF;
617   END IF;
618
619   -- Speed up searches - just use the centroid of the feature
620   -- cheaper but less acurate
621   NEW.centroid := ST_PointOnSurface(NEW.geometry);
622   --DEBUG: RAISE WARNING 'Computing preliminary centroid at %',ST_AsText(NEW.centroid);
623
624   NEW.postcode := null;
625
626   -- recalculate country and partition
627   IF NEW.rank_search = 4 AND NEW.address is not NULL AND NEW.address ? 'country' THEN
628     -- for countries, believe the mapped country code,
629     -- so that we remain in the right partition if the boundaries
630     -- suddenly expand.
631     NEW.country_code := lower(NEW.address->'country');
632     NEW.partition := get_partition(lower(NEW.country_code));
633     IF NEW.partition = 0 THEN
634       NEW.country_code := lower(get_country_code(NEW.centroid));
635       NEW.partition := get_partition(NEW.country_code);
636     END IF;
637   ELSE
638     IF NEW.rank_search >= 4 THEN
639       NEW.country_code := lower(get_country_code(NEW.centroid));
640     ELSE
641       NEW.country_code := NULL;
642     END IF;
643     NEW.partition := get_partition(NEW.country_code);
644   END IF;
645   --DEBUG: RAISE WARNING 'Country updated: "%"', NEW.country_code;
646
647   -- waterway ways are linked when they are part of a relation and have the same class/type
648   IF NEW.osm_type = 'R' and NEW.class = 'waterway' THEN
649       FOR relation_members IN select members from planet_osm_rels r where r.id = NEW.osm_id and r.parts != array[]::bigint[]
650       LOOP
651           FOR i IN 1..array_upper(relation_members, 1) BY 2 LOOP
652               IF relation_members[i+1] in ('', 'main_stream', 'side_stream') AND substring(relation_members[i],1,1) = 'w' THEN
653                 --DEBUG: RAISE WARNING 'waterway parent %, child %/%', NEW.osm_id, i, relation_members[i];
654                 FOR linked_node_id IN SELECT place_id FROM placex
655                   WHERE osm_type = 'W' and osm_id = substring(relation_members[i],2,200)::bigint
656                   and class = NEW.class and type in ('river', 'stream', 'canal', 'drain', 'ditch')
657                   and ( relation_members[i+1] != 'side_stream' or NEW.name->'name' = name->'name')
658                 LOOP
659                   UPDATE placex SET linked_place_id = NEW.place_id WHERE place_id = linked_node_id;
660                   IF NOT %REVERSE-ONLY% THEN
661                     DELETE FROM search_name WHERE place_id = linked_node_id;
662                   END IF;
663                 END LOOP;
664               END IF;
665           END LOOP;
666       END LOOP;
667       --DEBUG: RAISE WARNING 'Waterway processed';
668   END IF;
669
670   NEW.importance := null;
671   SELECT wikipedia, importance
672     FROM compute_importance(NEW.extratags, NEW.country_code, NEW.osm_type, NEW.osm_id)
673     INTO NEW.wikipedia,NEW.importance;
674
675 --DEBUG: RAISE WARNING 'Importance computed from wikipedia: %', NEW.importance;
676
677   -- ---------------------------------------------------------------------------
678   -- For low level elements we inherit from our parent road
679   IF (NEW.rank_search > 27 OR (NEW.type = 'postcode' AND NEW.rank_search = 25)) THEN
680
681     --DEBUG: RAISE WARNING 'finding street for % %', NEW.osm_type, NEW.osm_id;
682     NEW.parent_place_id := null;
683
684     -- if we have a POI and there is no address information,
685     -- see if we can get it from a surrounding building
686     IF NEW.osm_type = 'N' AND addr_street IS NULL AND addr_place IS NULL
687        AND NEW.housenumber IS NULL THEN
688       FOR location IN
689         -- The additional && condition works around the misguided query
690         -- planner of postgis 3.0.
691         SELECT address from placex where ST_Covers(geometry, NEW.centroid)
692             and geometry && NEW.centroid
693             and (address ? 'housenumber' or address ? 'street' or address ? 'place')
694             and rank_search > 28 AND ST_GeometryType(geometry) in ('ST_Polygon','ST_MultiPolygon')
695             limit 1
696       LOOP
697         NEW.housenumber := location.address->'housenumber';
698         addr_street := location.address->'street';
699         addr_place := location.address->'place';
700         --DEBUG: RAISE WARNING 'Found surrounding building % %', location.osm_type, location.osm_id;
701       END LOOP;
702     END IF;
703
704     -- We have to find our parent road.
705     NEW.parent_place_id := find_parent_for_poi(NEW.osm_type, NEW.osm_id,
706                                                NEW.partition,
707                                                ST_Envelope(NEW.geometry),
708                                                addr_street, addr_place);
709
710     -- If we found the road take a shortcut here.
711     -- Otherwise fall back to the full address getting method below.
712     IF NEW.parent_place_id is not null THEN
713
714       -- Get the details of the parent road
715       SELECT p.country_code, p.postcode FROM placex p
716        WHERE p.place_id = NEW.parent_place_id INTO location;
717
718       NEW.country_code := location.country_code;
719       --DEBUG: RAISE WARNING 'Got parent details from search name';
720
721       -- determine postcode
722       IF NEW.address is not null AND NEW.address ? 'postcode' THEN
723           NEW.postcode = upper(trim(NEW.address->'postcode'));
724       ELSE
725          NEW.postcode := location.postcode;
726       END IF;
727       IF NEW.postcode is null THEN
728         NEW.postcode := get_nearest_postcode(NEW.country_code, NEW.geometry);
729       END IF;
730
731       -- If there is no name it isn't searchable, don't bother to create a search record
732       IF NEW.name is NULL THEN
733         --DEBUG: RAISE WARNING 'Not a searchable place % %', NEW.osm_type, NEW.osm_id;
734         return NEW;
735       END IF;
736
737       NEW.name := add_default_place_name(NEW.country_code, NEW.name);
738       name_vector := make_keywords(NEW.name);
739
740       -- Performance, it would be more acurate to do all the rest of the import
741       -- process but it takes too long
742       -- Just be happy with inheriting from parent road only
743       IF NEW.rank_search <= 25 and NEW.rank_address > 0 THEN
744         result := add_location(NEW.place_id, NEW.country_code, NEW.partition, name_vector, NEW.rank_search, NEW.rank_address, upper(trim(NEW.address->'postcode')), NEW.geometry);
745         --DEBUG: RAISE WARNING 'Place added to location table';
746       END IF;
747
748       result := insertSearchName(NEW.partition, NEW.place_id, name_vector,
749                                  NEW.rank_search, NEW.rank_address, NEW.geometry);
750
751       IF NOT %REVERSE-ONLY% THEN
752           -- Merge address from parent
753           SELECT array_merge(s.name_vector, s.nameaddress_vector)
754             INTO nameaddress_vector
755             FROM search_name s
756             WHERE s.place_id = NEW.parent_place_id;
757
758           INSERT INTO search_name (place_id, search_rank, address_rank,
759                                    importance, country_code, name_vector,
760                                    nameaddress_vector, centroid)
761                  VALUES (NEW.place_id, NEW.rank_search, NEW.rank_address,
762                          NEW.importance, NEW.country_code, name_vector,
763                          nameaddress_vector, NEW.centroid);
764           --DEBUG: RAISE WARNING 'Place added to search table';
765         END IF;
766
767       return NEW;
768     END IF;
769
770   END IF;
771
772   -- ---------------------------------------------------------------------------
773   -- Full indexing
774   --DEBUG: RAISE WARNING 'Using full index mode for % %', NEW.osm_type, NEW.osm_id;
775   SELECT * INTO location FROM find_linked_place(NEW);
776   IF location.place_id is not null THEN
777     --DEBUG: RAISE WARNING 'Linked %', location;
778
779     -- Use the linked point as the centre point of the geometry,
780     -- but only if it is within the area of the boundary.
781     centroid := coalesce(location.centroid, ST_Centroid(location.geometry));
782     IF centroid is not NULL AND ST_Within(centroid, NEW.geometry) THEN
783         NEW.centroid := centroid;
784     END IF;
785
786     -- Use the address rank of the linked place, if it has one
787     IF location.rank_address between 5 and 25 THEN
788       NEW.rank_address := location.rank_address;
789     END IF;
790
791     -- merge in the label name
792     IF NOT location.name IS NULL THEN
793       NEW.name := location.name || NEW.name;
794     END IF;
795
796     -- merge in extra tags
797     NEW.extratags := hstore('linked_' || location.class, location.type)
798                      || coalesce(location.extratags, ''::hstore)
799                      || coalesce(NEW.extratags, ''::hstore);
800
801     -- mark the linked place (excludes from search results)
802     UPDATE placex set linked_place_id = NEW.place_id
803       WHERE place_id = location.place_id;
804     -- ensure that those places are not found anymore
805     IF NOT %REVERSE-ONLY% THEN
806       DELETE FROM search_name WHERE place_id = location.place_id;
807     END IF;
808
809     SELECT wikipedia, importance
810       FROM compute_importance(location.extratags, NEW.country_code,
811                               'N', location.osm_id)
812       INTO linked_wikipedia,linked_importance;
813
814     -- Use the maximum importance if one could be computed from the linked object.
815     IF linked_importance is not null AND
816        (NEW.importance is null or NEW.importance < linked_importance)
817     THEN
818       NEW.importance = linked_importance;
819     END IF;
820   END IF;
821
822   -- Initialise the name vector using our name
823   NEW.name := add_default_place_name(NEW.country_code, NEW.name);
824   name_vector := make_keywords(NEW.name);
825
826   -- make sure all names are in the word table
827   IF NEW.admin_level = 2
828      AND NEW.class = 'boundary' AND NEW.type = 'administrative'
829      AND NEW.country_code IS NOT NULL AND NEW.osm_type = 'R'
830   THEN
831     PERFORM create_country(NEW.name, lower(NEW.country_code));
832     --DEBUG: RAISE WARNING 'Country names updated';
833   END IF;
834
835   SELECT * FROM insert_addresslines(NEW.place_id, NEW.partition,
836                                     NEW.rank_search, NEW.address,
837                                     CASE WHEN NEW.rank_search >= 26
838                                              AND NEW.rank_search < 30
839                                       THEN NEW.geometry ELSE NEW.centroid END)
840     INTO NEW.parent_place_id, NEW.postcode, nameaddress_vector;
841
842   --DEBUG: RAISE WARNING 'RETURN insert_addresslines: %, %, %', NEW.parent_place_id, NEW.postcode, nameaddress_vector;
843
844   IF NEW.address is not null AND NEW.address ? 'postcode' 
845      AND NEW.address->'postcode' not similar to '%(,|;)%' THEN
846     NEW.postcode := upper(trim(NEW.address->'postcode'));
847   END IF;
848
849   IF NEW.postcode is null AND NEW.rank_search > 8 THEN
850     NEW.postcode := get_nearest_postcode(NEW.country_code, NEW.geometry);
851   END IF;
852
853   -- if we have a name add this to the name search table
854   IF NEW.name IS NOT NULL THEN
855
856     IF NEW.rank_search <= 25 and NEW.rank_address > 0 THEN
857       result := add_location(NEW.place_id, NEW.country_code, NEW.partition, name_vector, NEW.rank_search, NEW.rank_address, upper(trim(NEW.address->'postcode')), NEW.geometry);
858       --DEBUG: RAISE WARNING 'added to location (full)';
859     END IF;
860
861     IF NEW.rank_search between 26 and 27 and NEW.class = 'highway' THEN
862       result := insertLocationRoad(NEW.partition, NEW.place_id, NEW.country_code, NEW.geometry);
863       --DEBUG: RAISE WARNING 'insert into road location table (full)';
864     END IF;
865
866     result := insertSearchName(NEW.partition, NEW.place_id, name_vector,
867                                NEW.rank_search, NEW.rank_address, NEW.geometry);
868     --DEBUG: RAISE WARNING 'added to search name (full)';
869
870     IF NOT %REVERSE-ONLY% THEN
871         INSERT INTO search_name (place_id, search_rank, address_rank,
872                                  importance, country_code, name_vector,
873                                  nameaddress_vector, centroid)
874                VALUES (NEW.place_id, NEW.rank_search, NEW.rank_address,
875                        NEW.importance, NEW.country_code, name_vector,
876                        nameaddress_vector, NEW.centroid);
877     END IF;
878
879   END IF;
880
881   --DEBUG: RAISE WARNING 'place update % % finsihed.', NEW.osm_type, NEW.osm_id;
882
883   RETURN NEW;
884 END;
885 $$
886 LANGUAGE plpgsql;
887
888
889 CREATE OR REPLACE FUNCTION placex_delete()
890   RETURNS TRIGGER
891   AS $$
892 DECLARE
893   b BOOLEAN;
894   classtable TEXT;
895 BEGIN
896   -- RAISE WARNING 'placex_delete % %',OLD.osm_type,OLD.osm_id;
897
898   update placex set linked_place_id = null, indexed_status = 2 where linked_place_id = OLD.place_id and indexed_status = 0;
899   --DEBUG: RAISE WARNING 'placex_delete:01 % %',OLD.osm_type,OLD.osm_id;
900   update placex set linked_place_id = null where linked_place_id = OLD.place_id;
901   --DEBUG: RAISE WARNING 'placex_delete:02 % %',OLD.osm_type,OLD.osm_id;
902
903   IF OLD.rank_address < 30 THEN
904
905     -- mark everything linked to this place for re-indexing
906     --DEBUG: RAISE WARNING 'placex_delete:03 % %',OLD.osm_type,OLD.osm_id;
907     UPDATE placex set indexed_status = 2 from place_addressline where address_place_id = OLD.place_id 
908       and placex.place_id = place_addressline.place_id and indexed_status = 0 and place_addressline.isaddress;
909
910     --DEBUG: RAISE WARNING 'placex_delete:04 % %',OLD.osm_type,OLD.osm_id;
911     DELETE FROM place_addressline where address_place_id = OLD.place_id;
912
913     --DEBUG: RAISE WARNING 'placex_delete:05 % %',OLD.osm_type,OLD.osm_id;
914     b := deleteRoad(OLD.partition, OLD.place_id);
915
916     --DEBUG: RAISE WARNING 'placex_delete:06 % %',OLD.osm_type,OLD.osm_id;
917     update placex set indexed_status = 2 where parent_place_id = OLD.place_id and indexed_status = 0;
918     --DEBUG: RAISE WARNING 'placex_delete:07 % %',OLD.osm_type,OLD.osm_id;
919     -- reparenting also for OSM Interpolation Lines (and for Tiger?)
920     update location_property_osmline set indexed_status = 2 where indexed_status = 0 and parent_place_id = OLD.place_id;
921
922   END IF;
923
924   --DEBUG: RAISE WARNING 'placex_delete:08 % %',OLD.osm_type,OLD.osm_id;
925
926   IF OLD.rank_address < 26 THEN
927     b := deleteLocationArea(OLD.partition, OLD.place_id, OLD.rank_search);
928   END IF;
929
930   --DEBUG: RAISE WARNING 'placex_delete:09 % %',OLD.osm_type,OLD.osm_id;
931
932   IF OLD.name is not null THEN
933     IF NOT %REVERSE-ONLY% THEN
934       DELETE from search_name WHERE place_id = OLD.place_id;
935     END IF;
936     b := deleteSearchName(OLD.partition, OLD.place_id);
937   END IF;
938
939   --DEBUG: RAISE WARNING 'placex_delete:10 % %',OLD.osm_type,OLD.osm_id;
940
941   DELETE FROM place_addressline where place_id = OLD.place_id;
942
943   --DEBUG: RAISE WARNING 'placex_delete:11 % %',OLD.osm_type,OLD.osm_id;
944
945   -- remove from tables for special search
946   classtable := 'place_classtype_' || OLD.class || '_' || OLD.type;
947   SELECT count(*)>0 FROM pg_tables WHERE tablename = classtable and schemaname = current_schema() INTO b;
948   IF b THEN
949     EXECUTE 'DELETE FROM ' || classtable::regclass || ' WHERE place_id = $1' USING OLD.place_id;
950   END IF;
951
952   --DEBUG: RAISE WARNING 'placex_delete:12 % %',OLD.osm_type,OLD.osm_id;
953
954   RETURN OLD;
955
956 END;
957 $$
958 LANGUAGE plpgsql;