]> git.openstreetmap.org Git - nominatim.git/blob - sql/functions/placex_triggers.sql
travis-ci: we dont need Apache installed
[nominatim.git] / sql / functions / placex_triggers.sql
1 -- Trigger functions for the placex table.
2
3 -- Find the parent road of a POI.
4 --
5 -- \returns Place ID of parent object or NULL if none
6 --
7 -- Copy data from linked items (POIs on ways, addr:street links, relations).
8 --
9 CREATE OR REPLACE FUNCTION find_parent_for_poi(poi_osm_type CHAR(1),
10                                                poi_osm_id BIGINT,
11                                                poi_partition SMALLINT,
12                                                bbox GEOMETRY,
13                                                addr_street TEXT,
14                                                addr_place TEXT,
15                                                fallback BOOL = true)
16   RETURNS BIGINT
17   AS $$
18 DECLARE
19   parent_place_id BIGINT DEFAULT NULL;
20   location RECORD;
21   parent RECORD;
22 BEGIN
23     --DEBUG: RAISE WARNING 'finding street for % %', poi_osm_type, poi_osm_id;
24
25     -- Is this object part of an associatedStreet relation?
26     FOR location IN
27       SELECT members FROM planet_osm_rels
28       WHERE parts @> ARRAY[poi_osm_id]
29         and members @> ARRAY[lower(poi_osm_type) || poi_osm_id]
30         and tags @> ARRAY['associatedStreet']
31     LOOP
32       FOR i IN 1..array_upper(location.members, 1) BY 2 LOOP
33         IF location.members[i+1] = 'street' THEN
34           FOR parent IN
35             SELECT place_id from placex
36              WHERE osm_type = 'W' and osm_id = substring(location.members[i],2)::bigint
37                and name is not null
38                and rank_search between 26 and 27
39           LOOP
40             RETURN parent.place_id;
41           END LOOP;
42         END IF;
43       END LOOP;
44     END LOOP;
45
46     parent_place_id := find_parent_for_address(addr_street, addr_place,
47                                                poi_partition, bbox);
48     IF parent_place_id is not null THEN
49       RETURN parent_place_id;
50     END IF;
51
52     IF poi_osm_type = 'N' THEN
53       -- Is this node part of an interpolation?
54       FOR parent IN
55         SELECT q.parent_place_id
56           FROM location_property_osmline q, planet_osm_ways x
57          WHERE q.linegeo && bbox and x.id = q.osm_id
58                and poi_osm_id = any(x.nodes)
59          LIMIT 1
60       LOOP
61         --DEBUG: RAISE WARNING 'Get parent from interpolation: %', parent.parent_place_id;
62         RETURN parent.parent_place_id;
63       END LOOP;
64
65       -- Is this node part of any other way?
66       FOR location IN
67         SELECT p.place_id, p.osm_id, p.rank_search, p.address,
68                coalesce(p.centroid, ST_Centroid(p.geometry)) as centroid
69           FROM placex p, planet_osm_ways w
70          WHERE p.osm_type = 'W' and p.rank_search >= 26
71                and p.geometry && bbox
72                and w.id = p.osm_id and poi_osm_id = any(w.nodes)
73       LOOP
74         --DEBUG: RAISE WARNING 'Node is part of way % ', location.osm_id;
75
76         -- Way IS a road then we are on it - that must be our road
77         IF location.rank_search < 28 THEN
78           --DEBUG: RAISE WARNING 'node in way that is a street %',location;
79           return location.place_id;
80         END IF;
81
82         SELECT find_parent_for_poi('W', location.osm_id, poi_partition,
83                                    location.centroid,
84                                    location.address->'street',
85                                    location.address->'place',
86                                    false)
87           INTO parent_place_id;
88         IF parent_place_id is not null THEN
89           RETURN parent_place_id;
90         END IF;
91       END LOOP;
92     END IF;
93
94     IF fallback THEN
95       IF ST_Area(bbox) < 0.005 THEN
96         -- for smaller features get the nearest road
97         SELECT getNearestRoadPlaceId(poi_partition, bbox) INTO parent_place_id;
98         --DEBUG: RAISE WARNING 'Checked for nearest way (%)', parent_place_id;
99       ELSE
100         -- for larger features simply find the area with the largest rank that
101         -- contains the bbox, only use addressable features
102         FOR location IN
103           SELECT place_id FROM placex
104             WHERE bbox @ geometry AND _ST_Covers(geometry, ST_Centroid(bbox))
105                   AND rank_address between 5 and 25
106             ORDER BY rank_address desc
107         LOOP
108             RETURN location.place_id;
109         END LOOP;
110       END IF;
111     END IF;
112
113     RETURN parent_place_id;
114 END;
115 $$
116 LANGUAGE plpgsql STABLE;
117
118 -- Try to find a linked place for the given object.
119 CREATE OR REPLACE FUNCTION find_linked_place(bnd placex)
120   RETURNS placex
121   AS $$
122 DECLARE
123   relation_members TEXT[];
124   rel_member RECORD;
125   linked_placex placex%ROWTYPE;
126   bnd_name TEXT;
127 BEGIN
128   IF bnd.rank_search >= 26 or bnd.rank_address = 0
129      or ST_GeometryType(bnd.geometry) NOT IN ('ST_Polygon','ST_MultiPolygon')
130   THEN
131     RETURN NULL;
132   END IF;
133
134   IF bnd.osm_type = 'R' THEN
135     -- see if we have any special relation members
136     SELECT members FROM planet_osm_rels WHERE id = bnd.osm_id INTO relation_members;
137     --DEBUG: RAISE WARNING 'Got relation members';
138
139     -- Search for relation members with role 'lable'.
140     IF relation_members IS NOT NULL THEN
141       FOR rel_member IN
142         SELECT get_rel_node_members(relation_members, ARRAY['label']) as member
143       LOOP
144         --DEBUG: RAISE WARNING 'Found label member %', rel_member.member;
145
146         FOR linked_placex IN
147           SELECT * from placex
148           WHERE osm_type = 'N' and osm_id = rel_member.member
149             and class = 'place'
150         LOOP
151           --DEBUG: RAISE WARNING 'Linked label member';
152           RETURN linked_placex;
153         END LOOP;
154
155       END LOOP;
156     END IF;
157   END IF;
158
159   IF bnd.name ? 'name' THEN
160     bnd_name := make_standard_name(bnd.name->'name');
161     IF bnd_name = '' THEN
162       bnd_name := NULL;
163     END IF;
164   END IF;
165
166   -- If extratags has a place tag, look for linked nodes by their place type.
167   -- Area and node still have to have the same name.
168   IF bnd.extratags ? 'place' and bnd_name is not null THEN
169     FOR linked_placex IN
170       SELECT * FROM placex
171       WHERE make_standard_name(name->'name') = bnd_name
172         AND placex.class = 'place' AND placex.type = bnd.extratags->'place'
173         AND placex.osm_type = 'N'
174         AND placex.rank_search < 26 -- needed to select the right index
175         AND _st_covers(bnd.geometry, placex.geometry)
176     LOOP
177       --DEBUG: RAISE WARNING 'Found type-matching place node %', linked_placex.osm_id;
178       RETURN linked_placex;
179     END LOOP;
180   END IF;
181
182   IF bnd.extratags ? 'wikidata' THEN
183     FOR linked_placex IN
184       SELECT * FROM placex
185       WHERE placex.class = 'place' AND placex.osm_type = 'N'
186         AND placex.extratags ? 'wikidata' -- needed to select right index
187         AND placex.extratags->'wikidata' = bnd.extratags->'wikidata'
188         AND placex.rank_search < 26
189         AND _st_covers(bnd.geometry, placex.geometry)
190       ORDER BY make_standard_name(name->'name') = bnd_name desc
191     LOOP
192       --DEBUG: RAISE WARNING 'Found wikidata-matching place node %', linked_placex.osm_id;
193       RETURN linked_placex;
194     END LOOP;
195   END IF;
196
197   -- Name searches can be done for ways as well as relations
198   IF bnd_name is not null THEN
199     --DEBUG: RAISE WARNING 'Looking for nodes with matching names';
200     FOR linked_placex IN
201       SELECT placex.* from placex
202       WHERE make_standard_name(name->'name') = bnd_name
203         AND ((bnd.rank_address > 0 and placex.rank_address = bnd.rank_address)
204              OR (bnd.rank_address = 0 and placex.rank_search = bnd.rank_search))
205         AND placex.osm_type = 'N'
206         AND placex.rank_search < 26 -- needed to select the right index
207         AND _st_covers(bnd.geometry, placex.geometry)
208     LOOP
209       --DEBUG: RAISE WARNING 'Found matching place node %', linked_placex.osm_id;
210       RETURN linked_placex;
211     END LOOP;
212   END IF;
213
214   RETURN NULL;
215 END;
216 $$
217 LANGUAGE plpgsql STABLE;
218
219
220 -- Insert address of a place into the place_addressline table.
221 --
222 -- \param obj_place_id  Place_id of the place to compute the address for.
223 -- \param partition     Partition number where the place is in.
224 -- \param maxrank       Rank of the place. All address features must have
225 --                      a search rank lower than the given rank.
226 -- \param address       Address terms for the place.
227 -- \param geoemtry      Geometry to which the address objects should be close.
228 --
229 -- \retval parent_place_id  Place_id of the address object that is the direct
230 --                          ancestor.
231 -- \retval postcode         Postcode computed from the address. This is the
232 --                          addr:postcode of one of the address objects. If
233 --                          more than one of has a postcode, the highest ranking
234 --                          one is used. May be NULL.
235 -- \retval nameaddress_vector  Search terms for the address. This is the sum
236 --                             of name terms of all address objects.
237 CREATE OR REPLACE FUNCTION insert_addresslines(obj_place_id BIGINT,
238                                                partition SMALLINT,
239                                                maxrank SMALLINT,
240                                                address HSTORE,
241                                                geometry GEOMETRY,
242                                                OUT parent_place_id BIGINT,
243                                                OUT postcode TEXT,
244                                                OUT nameaddress_vector INT[])
245   AS $$
246 DECLARE
247   current_rank_address INTEGER := 0;
248   location_distance FLOAT := 0;
249   location_parent GEOMETRY := NULL;
250   parent_place_id_rank SMALLINT := 0;
251
252   location_isaddress BOOLEAN;
253
254   address_havelevel BOOLEAN[];
255   location_keywords INT[];
256
257   location RECORD;
258   addr_item RECORD;
259
260   isin_tokens INT[];
261   isin TEXT[];
262 BEGIN
263   parent_place_id := 0;
264   nameaddress_vector := '{}'::int[];
265   isin_tokens := '{}'::int[];
266
267   ---- convert address store to array of tokenids
268   IF address IS NOT NULL THEN
269     FOR addr_item IN SELECT * FROM each(address)
270     LOOP
271       IF addr_item.key IN ('city', 'tiger:county', 'state', 'suburb', 'province',
272                            'district', 'region', 'county', 'municipality',
273                            'hamlet', 'village', 'subdistrict', 'town',
274                            'neighbourhood', 'quarter', 'parish')
275       THEN
276         isin_tokens := array_merge(isin_tokens,
277                                    word_ids_from_name(addr_item.value));
278         IF NOT %REVERSE-ONLY% THEN
279           nameaddress_vector := array_merge(nameaddress_vector,
280                                             addr_ids_from_name(addr_item.value));
281         END IF;
282       END IF;
283     END LOOP;
284
285     IF address ? 'is_in' THEN
286       -- is_in items need splitting
287       isin := regexp_split_to_array(address->'is_in', E'[;,]');
288       IF array_upper(isin, 1) IS NOT NULL THEN
289         FOR i IN 1..array_upper(isin, 1) LOOP
290           isin_tokens := array_merge(isin_tokens,
291                                      word_ids_from_name(isin[i]));
292
293           -- merge word into address vector
294           IF NOT %REVERSE-ONLY% THEN
295             nameaddress_vector := array_merge(nameaddress_vector,
296                                               addr_ids_from_name(isin[i]));
297           END IF;
298         END LOOP;
299       END IF;
300     END IF;
301   END IF;
302   IF NOT %REVERSE-ONLY% THEN
303     nameaddress_vector := array_merge(nameaddress_vector, isin_tokens);
304   END IF;
305
306   ---- now compute the address terms
307   FOR i IN 1..28 LOOP
308     address_havelevel[i] := false;
309   END LOOP;
310
311   FOR location IN
312     SELECT * FROM getNearFeatures(partition, geometry, maxrank, isin_tokens)
313   LOOP
314     IF location.rank_address != current_rank_address THEN
315       current_rank_address := location.rank_address;
316       IF location.isguess THEN
317         location_distance := location.distance * 1.5;
318       ELSE
319         IF location.rank_address <= 12 THEN
320           -- for county and above, if we have an area consider that exact
321           -- (It would be nice to relax the constraint for places close to
322           --  the boundary but we'd need the exact geometry for that. Too
323           --  expensive.)
324           location_distance = 0;
325         ELSE
326           -- Below county level remain slightly fuzzy.
327           location_distance := location.distance * 0.5;
328         END IF;
329       END IF;
330     ELSE
331       CONTINUE WHEN location.keywords <@ location_keywords;
332     END IF;
333
334     IF location.distance < location_distance OR NOT location.isguess THEN
335       location_keywords := location.keywords;
336
337       location_isaddress := NOT address_havelevel[location.rank_address];
338       --DEBUG: RAISE WARNING 'should be address: %, is guess: %, rank: %', location_isaddress, location.isguess, location.rank_address;
339       IF location_isaddress AND location.isguess AND location_parent IS NOT NULL THEN
340           location_isaddress := ST_Contains(location_parent, location.centroid);
341       END IF;
342
343       --DEBUG: RAISE WARNING '% isaddress: %', location.place_id, location_isaddress;
344       -- Add it to the list of search terms
345       IF NOT %REVERSE-ONLY% THEN
346           nameaddress_vector := array_merge(nameaddress_vector,
347                                             location.keywords::integer[]);
348       END IF;
349
350       INSERT INTO place_addressline (place_id, address_place_id, fromarea,
351                                      isaddress, distance, cached_rank_address)
352         VALUES (obj_place_id, location.place_id, true,
353                 location_isaddress, location.distance, location.rank_address);
354
355       IF location_isaddress THEN
356         -- add postcode if we have one
357         -- (If multiple postcodes are available, we end up with the highest ranking one.)
358         IF location.postcode is not null THEN
359             postcode = location.postcode;
360         END IF;
361
362         address_havelevel[location.rank_address] := true;
363         -- add a hack against postcode ranks
364         IF NOT location.isguess
365            AND location.rank_address != 11 AND location.rank_address != 5
366         THEN
367           SELECT p.geometry FROM placex p
368             WHERE p.place_id = location.place_id INTO location_parent;
369         END IF;
370
371         IF location.rank_address > parent_place_id_rank THEN
372           parent_place_id = location.place_id;
373           parent_place_id_rank = location.rank_address;
374         END IF;
375       END IF;
376     END IF;
377
378   END LOOP;
379 END;
380 $$
381 LANGUAGE plpgsql;
382
383
384 CREATE OR REPLACE FUNCTION placex_insert()
385   RETURNS TRIGGER
386   AS $$
387 DECLARE
388   postcode TEXT;
389   result BOOLEAN;
390   is_area BOOLEAN;
391   country_code VARCHAR(2);
392   diameter FLOAT;
393   classtable TEXT;
394 BEGIN
395   --DEBUG: RAISE WARNING '% % % %',NEW.osm_type,NEW.osm_id,NEW.class,NEW.type;
396
397   NEW.place_id := nextval('seq_place');
398   NEW.indexed_status := 1; --STATUS_NEW
399
400   NEW.country_code := lower(get_country_code(NEW.geometry));
401
402   NEW.partition := get_partition(NEW.country_code);
403   NEW.geometry_sector := geometry_sector(NEW.partition, NEW.geometry);
404
405   IF NEW.osm_type = 'X' THEN
406     -- E'X'ternal records should already be in the right format so do nothing
407   ELSE
408     is_area := ST_GeometryType(NEW.geometry) IN ('ST_Polygon','ST_MultiPolygon');
409
410     IF NEW.class in ('place','boundary')
411        AND NEW.type in ('postcode','postal_code')
412     THEN
413       IF NEW.address IS NULL OR NOT NEW.address ? 'postcode' THEN
414           -- most likely just a part of a multipolygon postcode boundary, throw it away
415           RETURN NULL;
416       END IF;
417
418       NEW.name := hstore('ref', NEW.address->'postcode');
419
420     ELSEIF NEW.class = 'boundary' AND NOT is_area THEN
421         RETURN NULL;
422     ELSEIF NEW.class = 'boundary' AND NEW.type = 'administrative'
423            AND NEW.admin_level <= 4 AND NEW.osm_type = 'W'
424     THEN
425         RETURN NULL;
426     END IF;
427
428     SELECT * INTO NEW.rank_search, NEW.rank_address
429       FROM compute_place_rank(NEW.country_code,
430                               CASE WHEN is_area THEN 'A' ELSE NEW.osm_type END,
431                               NEW.class, NEW.type, NEW.admin_level,
432                               (NEW.extratags->'capital') = 'yes',
433                               NEW.address->'postcode');
434
435     -- a country code make no sense below rank 4 (country)
436     IF NEW.rank_search < 4 THEN
437       NEW.country_code := NULL;
438     END IF;
439
440   END IF;
441
442   --DEBUG: RAISE WARNING 'placex_insert:END: % % % %',NEW.osm_type,NEW.osm_id,NEW.class,NEW.type;
443
444   RETURN NEW; -- %DIFFUPDATES% The following is not needed until doing diff updates, and slows the main index process down
445
446   IF NEW.osm_type = 'N' and NEW.rank_search > 28 THEN
447       -- might be part of an interpolation
448       result := osmline_reinsert(NEW.osm_id, NEW.geometry);
449   ELSEIF NEW.rank_address > 0 THEN
450     IF (ST_GeometryType(NEW.geometry) in ('ST_Polygon','ST_MultiPolygon') AND ST_IsValid(NEW.geometry)) THEN
451       -- Performance: We just can't handle re-indexing for country level changes
452       IF st_area(NEW.geometry) < 1 THEN
453         -- mark items within the geometry for re-indexing
454   --    RAISE WARNING 'placex poly insert: % % % %',NEW.osm_type,NEW.osm_id,NEW.class,NEW.type;
455
456         -- work around bug in postgis, this may have been fixed in 2.0.0 (see http://trac.osgeo.org/postgis/ticket/547)
457         update placex set indexed_status = 2 where (st_covers(NEW.geometry, placex.geometry) OR ST_Intersects(NEW.geometry, placex.geometry)) 
458          AND rank_search > NEW.rank_search and indexed_status = 0 and ST_geometrytype(placex.geometry) = 'ST_Point' and (rank_search < 28 or name is not null or (NEW.rank_search >= 16 and address ? 'place'));
459         update placex set indexed_status = 2 where (st_covers(NEW.geometry, placex.geometry) OR ST_Intersects(NEW.geometry, placex.geometry)) 
460          AND rank_search > NEW.rank_search and indexed_status = 0 and ST_geometrytype(placex.geometry) != 'ST_Point' and (rank_search < 28 or name is not null or (NEW.rank_search >= 16 and address ? 'place'));
461       END IF;
462     ELSE
463       -- mark nearby items for re-indexing, where 'nearby' depends on the features rank_search and is a complete guess :(
464       diameter := update_place_diameter(NEW.rank_search);
465       IF diameter > 0 THEN
466   --      RAISE WARNING 'placex point insert: % % % % %',NEW.osm_type,NEW.osm_id,NEW.class,NEW.type,diameter;
467         IF NEW.rank_search >= 26 THEN
468           -- roads may cause reparenting for >27 rank places
469           update placex set indexed_status = 2 where indexed_status = 0 and rank_search > NEW.rank_search and ST_DWithin(placex.geometry, NEW.geometry, diameter);
470           -- reparenting also for OSM Interpolation Lines (and for Tiger?)
471           update location_property_osmline set indexed_status = 2 where indexed_status = 0 and ST_DWithin(location_property_osmline.linegeo, NEW.geometry, diameter);
472         ELSEIF NEW.rank_search >= 16 THEN
473           -- up to rank 16, street-less addresses may need reparenting
474           update placex set indexed_status = 2 where indexed_status = 0 and rank_search > NEW.rank_search and ST_DWithin(placex.geometry, NEW.geometry, diameter) and (rank_search < 28 or name is not null or address ? 'place');
475         ELSE
476           -- for all other places the search terms may change as well
477           update placex set indexed_status = 2 where indexed_status = 0 and rank_search > NEW.rank_search and ST_DWithin(placex.geometry, NEW.geometry, diameter) and (rank_search < 28 or name is not null);
478         END IF;
479       END IF;
480     END IF;
481   END IF;
482
483
484    -- add to tables for special search
485    -- Note: won't work on initial import because the classtype tables
486    -- do not yet exist. It won't hurt either.
487   classtable := 'place_classtype_' || NEW.class || '_' || NEW.type;
488   SELECT count(*)>0 FROM pg_tables WHERE tablename = classtable and schemaname = current_schema() INTO result;
489   IF result THEN
490     EXECUTE 'INSERT INTO ' || classtable::regclass || ' (place_id, centroid) VALUES ($1,$2)' 
491     USING NEW.place_id, ST_Centroid(NEW.geometry);
492   END IF;
493
494   RETURN NEW;
495
496 END;
497 $$
498 LANGUAGE plpgsql;
499
500 CREATE OR REPLACE FUNCTION get_parent_address_level(geom GEOMETRY, in_level SMALLINT)
501   RETURNS SMALLINT
502   AS $$
503 DECLARE
504   address_rank SMALLINT;
505 BEGIN
506   IF in_level <= 3 or in_level > 15 THEN
507     address_rank := 3;
508   ELSE
509     SELECT rank_address INTO address_rank
510       FROM placex
511       WHERE osm_type = 'R' and class = 'boundary' and type = 'administrative'
512             and admin_level < in_level
513             and geometry && geom and ST_Covers(geometry, geom)
514       ORDER BY admin_level desc LIMIT 1;
515   END IF;
516
517   IF address_rank is NULL or address_rank <= 3 THEN
518     RETURN 3;
519   END IF;
520
521   RETURN address_rank;
522 END;
523 $$
524 LANGUAGE plpgsql;
525
526
527 CREATE OR REPLACE FUNCTION placex_update()
528   RETURNS TRIGGER
529   AS $$
530 DECLARE
531   i INTEGER;
532   location RECORD;
533   relation_members TEXT[];
534
535   centroid GEOMETRY;
536   parent_address_level SMALLINT;
537   place_address_level SMALLINT;
538
539   addr_street TEXT;
540   addr_place TEXT;
541
542   name_vector INTEGER[];
543   nameaddress_vector INTEGER[];
544
545   linked_node_id BIGINT;
546   linked_importance FLOAT;
547   linked_wikipedia TEXT;
548
549   result BOOLEAN;
550 BEGIN
551   -- deferred delete
552   IF OLD.indexed_status = 100 THEN
553     --DEBUG: RAISE WARNING 'placex_update delete % %',NEW.osm_type,NEW.osm_id;
554     delete from placex where place_id = OLD.place_id;
555     RETURN NULL;
556   END IF;
557
558   IF NEW.indexed_status != 0 OR OLD.indexed_status = 0 THEN
559     RETURN NEW;
560   END IF;
561
562   --DEBUG: RAISE WARNING 'placex_update % % (%)',NEW.osm_type,NEW.osm_id,NEW.place_id;
563
564   NEW.indexed_date = now();
565
566   IF NOT %REVERSE-ONLY% THEN
567     DELETE from search_name WHERE place_id = NEW.place_id;
568   END IF;
569   result := deleteSearchName(NEW.partition, NEW.place_id);
570   DELETE FROM place_addressline WHERE place_id = NEW.place_id;
571   result := deleteRoad(NEW.partition, NEW.place_id);
572   result := deleteLocationArea(NEW.partition, NEW.place_id, NEW.rank_search);
573   UPDATE placex set linked_place_id = null, indexed_status = 2
574          where linked_place_id = NEW.place_id;
575   -- update not necessary for osmline, cause linked_place_id does not exist
576
577   NEW.extratags := NEW.extratags - 'linked_place'::TEXT;
578
579   IF NEW.linked_place_id is not null THEN
580     --DEBUG: RAISE WARNING 'place already linked to %', NEW.linked_place_id;
581     RETURN NEW;
582   END IF;
583
584   -- Speed up searches - just use the centroid of the feature
585   -- cheaper but less acurate
586   NEW.centroid := ST_PointOnSurface(NEW.geometry);
587   --DEBUG: RAISE WARNING 'Computing preliminary centroid at %',ST_AsText(NEW.centroid);
588
589   -- recompute the ranks, they might change when linking changes
590   SELECT * INTO NEW.rank_search, NEW.rank_address
591     FROM compute_place_rank(NEW.country_code,
592                             CASE WHEN ST_GeometryType(NEW.geometry)
593                                         IN ('ST_Polygon','ST_MultiPolygon')
594                             THEN 'A' ELSE NEW.osm_type END,
595                             NEW.class, NEW.type, NEW.admin_level,
596                             (NEW.extratags->'capital') = 'yes',
597                             NEW.address->'postcode');
598   -- We must always increase the address level relative to the admin boundary.
599   IF NEW.class = 'boundary' and NEW.type = 'administrative'
600      and NEW.osm_type = 'R' and NEW.rank_address > 0
601   THEN
602     parent_address_level := get_parent_address_level(NEW.centroid, NEW.admin_level);
603     IF parent_address_level >= NEW.rank_address THEN
604       IF parent_address_level >= 24 THEN
605         NEW.rank_address := 25;
606       ELSE
607         NEW.rank_address := parent_address_level + 2;
608       END IF;
609     END IF;
610   ELSE
611     parent_address_level := 3;
612   END IF;
613
614   --DEBUG: RAISE WARNING 'Copy over address tags';
615   -- housenumber is a computed field, so start with an empty value
616   NEW.housenumber := NULL;
617   IF NEW.address is not NULL THEN
618       IF NEW.address ? 'conscriptionnumber' THEN
619         i := getorcreate_housenumber_id(make_standard_name(NEW.address->'conscriptionnumber'));
620         IF NEW.address ? 'streetnumber' THEN
621             i := getorcreate_housenumber_id(make_standard_name(NEW.address->'streetnumber'));
622             NEW.housenumber := (NEW.address->'conscriptionnumber') || '/' || (NEW.address->'streetnumber');
623         ELSE
624             NEW.housenumber := NEW.address->'conscriptionnumber';
625         END IF;
626       ELSEIF NEW.address ? 'streetnumber' THEN
627         NEW.housenumber := NEW.address->'streetnumber';
628         i := getorcreate_housenumber_id(make_standard_name(NEW.address->'streetnumber'));
629       ELSEIF NEW.address ? 'housenumber' THEN
630         NEW.housenumber := NEW.address->'housenumber';
631         i := getorcreate_housenumber_id(make_standard_name(NEW.housenumber));
632       END IF;
633
634       addr_street := NEW.address->'street';
635       addr_place := NEW.address->'place';
636
637       IF NEW.address ? 'postcode' and NEW.address->'postcode' not similar to '%(,|;)%' THEN
638         i := getorcreate_postcode_id(NEW.address->'postcode');
639       END IF;
640   END IF;
641
642   NEW.postcode := null;
643
644   -- recalculate country and partition
645   IF NEW.rank_search = 4 AND NEW.address is not NULL AND NEW.address ? 'country' THEN
646     -- for countries, believe the mapped country code,
647     -- so that we remain in the right partition if the boundaries
648     -- suddenly expand.
649     NEW.country_code := lower(NEW.address->'country');
650     NEW.partition := get_partition(lower(NEW.country_code));
651     IF NEW.partition = 0 THEN
652       NEW.country_code := lower(get_country_code(NEW.centroid));
653       NEW.partition := get_partition(NEW.country_code);
654     END IF;
655   ELSE
656     IF NEW.rank_search >= 4 THEN
657       NEW.country_code := lower(get_country_code(NEW.centroid));
658     ELSE
659       NEW.country_code := NULL;
660     END IF;
661     NEW.partition := get_partition(NEW.country_code);
662   END IF;
663   --DEBUG: RAISE WARNING 'Country updated: "%"', NEW.country_code;
664
665   -- waterway ways are linked when they are part of a relation and have the same class/type
666   IF NEW.osm_type = 'R' and NEW.class = 'waterway' THEN
667       FOR relation_members IN select members from planet_osm_rels r where r.id = NEW.osm_id and r.parts != array[]::bigint[]
668       LOOP
669           FOR i IN 1..array_upper(relation_members, 1) BY 2 LOOP
670               IF relation_members[i+1] in ('', 'main_stream', 'side_stream') AND substring(relation_members[i],1,1) = 'w' THEN
671                 --DEBUG: RAISE WARNING 'waterway parent %, child %/%', NEW.osm_id, i, relation_members[i];
672                 FOR linked_node_id IN SELECT place_id FROM placex
673                   WHERE osm_type = 'W' and osm_id = substring(relation_members[i],2,200)::bigint
674                   and class = NEW.class and type in ('river', 'stream', 'canal', 'drain', 'ditch')
675                   and ( relation_members[i+1] != 'side_stream' or NEW.name->'name' = name->'name')
676                 LOOP
677                   UPDATE placex SET linked_place_id = NEW.place_id WHERE place_id = linked_node_id;
678                   IF NOT %REVERSE-ONLY% THEN
679                     DELETE FROM search_name WHERE place_id = linked_node_id;
680                   END IF;
681                 END LOOP;
682               END IF;
683           END LOOP;
684       END LOOP;
685       --DEBUG: RAISE WARNING 'Waterway processed';
686   END IF;
687
688   NEW.importance := null;
689   SELECT wikipedia, importance
690     FROM compute_importance(NEW.extratags, NEW.country_code, NEW.osm_type, NEW.osm_id)
691     INTO NEW.wikipedia,NEW.importance;
692
693 --DEBUG: RAISE WARNING 'Importance computed from wikipedia: %', NEW.importance;
694
695   -- ---------------------------------------------------------------------------
696   -- For low level elements we inherit from our parent road
697   IF (NEW.rank_search > 27 OR (NEW.type = 'postcode' AND NEW.rank_search = 25)) THEN
698
699     --DEBUG: RAISE WARNING 'finding street for % %', NEW.osm_type, NEW.osm_id;
700     NEW.parent_place_id := null;
701
702     -- if we have a POI and there is no address information,
703     -- see if we can get it from a surrounding building
704     IF NEW.osm_type = 'N' AND addr_street IS NULL AND addr_place IS NULL
705        AND NEW.housenumber IS NULL THEN
706       FOR location IN
707         -- The additional && condition works around the misguided query
708         -- planner of postgis 3.0.
709         SELECT address from placex where ST_Covers(geometry, NEW.centroid)
710             and geometry && NEW.centroid
711             and (address ? 'housenumber' or address ? 'street' or address ? 'place')
712             and rank_search > 28 AND ST_GeometryType(geometry) in ('ST_Polygon','ST_MultiPolygon')
713             limit 1
714       LOOP
715         NEW.housenumber := location.address->'housenumber';
716         addr_street := location.address->'street';
717         addr_place := location.address->'place';
718       END LOOP;
719     END IF;
720
721     -- We have to find our parent road.
722     NEW.parent_place_id := find_parent_for_poi(NEW.osm_type, NEW.osm_id,
723                                                NEW.partition,
724                                                ST_Envelope(NEW.geometry),
725                                                addr_street, addr_place);
726
727     -- If we found the road take a shortcut here.
728     -- Otherwise fall back to the full address getting method below.
729     IF NEW.parent_place_id is not null THEN
730
731       -- Get the details of the parent road
732       SELECT p.country_code, p.postcode FROM placex p
733        WHERE p.place_id = NEW.parent_place_id INTO location;
734
735       NEW.country_code := location.country_code;
736       --DEBUG: RAISE WARNING 'Got parent details from search name';
737
738       -- determine postcode
739       IF NEW.address is not null AND NEW.address ? 'postcode' THEN
740           NEW.postcode = upper(trim(NEW.address->'postcode'));
741       ELSE
742          NEW.postcode := location.postcode;
743       END IF;
744       IF NEW.postcode is null THEN
745         NEW.postcode := get_nearest_postcode(NEW.country_code, NEW.geometry);
746       END IF;
747
748       -- If there is no name it isn't searchable, don't bother to create a search record
749       IF NEW.name is NULL THEN
750         --DEBUG: RAISE WARNING 'Not a searchable place % %', NEW.osm_type, NEW.osm_id;
751         return NEW;
752       END IF;
753
754       NEW.name := add_default_place_name(NEW.country_code, NEW.name);
755       name_vector := make_keywords(NEW.name);
756
757       -- Performance, it would be more acurate to do all the rest of the import
758       -- process but it takes too long
759       -- Just be happy with inheriting from parent road only
760       IF NEW.rank_search <= 25 and NEW.rank_address > 0 THEN
761         result := add_location(NEW.place_id, NEW.country_code, NEW.partition, name_vector, NEW.rank_search, NEW.rank_address, upper(trim(NEW.address->'postcode')), NEW.geometry);
762         --DEBUG: RAISE WARNING 'Place added to location table';
763       END IF;
764
765       result := insertSearchName(NEW.partition, NEW.place_id, name_vector,
766                                  NEW.rank_search, NEW.rank_address, NEW.geometry);
767
768       IF NOT %REVERSE-ONLY% THEN
769           -- Merge address from parent
770           SELECT array_merge(s.name_vector, s.nameaddress_vector)
771             INTO nameaddress_vector
772             FROM search_name s
773             WHERE s.place_id = NEW.parent_place_id;
774
775           INSERT INTO search_name (place_id, search_rank, address_rank,
776                                    importance, country_code, name_vector,
777                                    nameaddress_vector, centroid)
778                  VALUES (NEW.place_id, NEW.rank_search, NEW.rank_address,
779                          NEW.importance, NEW.country_code, name_vector,
780                          nameaddress_vector, NEW.centroid);
781           --DEBUG: RAISE WARNING 'Place added to search table';
782         END IF;
783
784       return NEW;
785     END IF;
786
787   END IF;
788
789   -- ---------------------------------------------------------------------------
790   -- Full indexing
791   --DEBUG: RAISE WARNING 'Using full index mode for % %', NEW.osm_type, NEW.osm_id;
792   SELECT * INTO location FROM find_linked_place(NEW);
793   IF location.place_id is not null THEN
794     --DEBUG: RAISE WARNING 'Linked %', location;
795
796     -- Use the linked point as the centre point of the geometry,
797     -- but only if it is within the area of the boundary.
798     centroid := coalesce(location.centroid, ST_Centroid(location.geometry));
799     IF centroid is not NULL AND ST_Within(centroid, NEW.geometry) THEN
800         NEW.centroid := centroid;
801     END IF;
802
803     --DEBUG: RAISE WARNING 'parent address: % rank address: %', parent_address_level, location.rank_address;
804     IF location.rank_address > parent_address_level
805        and location.rank_address < 26
806     THEN
807       NEW.rank_address := location.rank_address;
808     END IF;
809
810     -- merge in the label name
811     IF NOT location.name IS NULL THEN
812       NEW.name := location.name || NEW.name;
813     END IF;
814
815     -- merge in extra tags
816     NEW.extratags := hstore('linked_' || location.class, location.type)
817                      || coalesce(location.extratags, ''::hstore)
818                      || coalesce(NEW.extratags, ''::hstore);
819
820     -- mark the linked place (excludes from search results)
821     UPDATE placex set linked_place_id = NEW.place_id
822       WHERE place_id = location.place_id;
823     -- ensure that those places are not found anymore
824     IF NOT %REVERSE-ONLY% THEN
825       DELETE FROM search_name WHERE place_id = location.place_id;
826     END IF;
827     PERFORM deleteLocationArea(NEW.partition, location.place_id, NEW.rank_search);
828
829     SELECT wikipedia, importance
830       FROM compute_importance(location.extratags, NEW.country_code,
831                               'N', location.osm_id)
832       INTO linked_wikipedia,linked_importance;
833
834     -- Use the maximum importance if one could be computed from the linked object.
835     IF linked_importance is not null AND
836        (NEW.importance is null or NEW.importance < linked_importance)
837     THEN
838       NEW.importance = linked_importance;
839     END IF;
840   ELSE
841     -- No linked place? As a last resort check if the boundary is tagged with
842     -- a place type and adapt the rank address.
843     IF NEW.rank_address > 0 and NEW.extratags ? 'place' THEN
844       SELECT address_rank INTO place_address_level
845         FROM compute_place_rank(NEW.country_code, 'A', 'place',
846                                 NEW.extratags->'place', 0::SMALLINT, False, null);
847       IF place_address_level > parent_address_level and
848          place_address_level < 26 THEN
849         NEW.rank_address := place_address_level;
850       END IF;
851     END IF;
852   END IF;
853
854   -- Initialise the name vector using our name
855   NEW.name := add_default_place_name(NEW.country_code, NEW.name);
856   name_vector := make_keywords(NEW.name);
857
858   -- make sure all names are in the word table
859   IF NEW.admin_level = 2
860      AND NEW.class = 'boundary' AND NEW.type = 'administrative'
861      AND NEW.country_code IS NOT NULL AND NEW.osm_type = 'R'
862   THEN
863     PERFORM create_country(NEW.name, lower(NEW.country_code));
864     --DEBUG: RAISE WARNING 'Country names updated';
865   END IF;
866
867   SELECT * FROM insert_addresslines(NEW.place_id, NEW.partition,
868                                     CASE WHEN NEW.rank_address = 0
869                                       THEN NEW.rank_search ELSE NEW.rank_address END,
870                                     NEW.address,
871                                     CASE WHEN NEW.rank_search >= 26
872                                              AND NEW.rank_search < 30
873                                       THEN NEW.geometry ELSE NEW.centroid END)
874     INTO NEW.parent_place_id, NEW.postcode, nameaddress_vector;
875
876   --DEBUG: RAISE WARNING 'RETURN insert_addresslines: %, %, %', NEW.parent_place_id, NEW.postcode, nameaddress_vector;
877
878   IF NEW.address is not null AND NEW.address ? 'postcode' 
879      AND NEW.address->'postcode' not similar to '%(,|;)%' THEN
880     NEW.postcode := upper(trim(NEW.address->'postcode'));
881   END IF;
882
883   IF NEW.postcode is null AND NEW.rank_search > 8 THEN
884     NEW.postcode := get_nearest_postcode(NEW.country_code, NEW.geometry);
885   END IF;
886
887   -- if we have a name add this to the name search table
888   IF NEW.name IS NOT NULL THEN
889
890     IF NEW.rank_search <= 25 and NEW.rank_address > 0 THEN
891       result := add_location(NEW.place_id, NEW.country_code, NEW.partition, name_vector, NEW.rank_search, NEW.rank_address, upper(trim(NEW.address->'postcode')), NEW.geometry);
892       --DEBUG: RAISE WARNING 'added to location (full)';
893     END IF;
894
895     IF NEW.rank_search between 26 and 27 and NEW.class = 'highway' THEN
896       result := insertLocationRoad(NEW.partition, NEW.place_id, NEW.country_code, NEW.geometry);
897       --DEBUG: RAISE WARNING 'insert into road location table (full)';
898     END IF;
899
900     result := insertSearchName(NEW.partition, NEW.place_id, name_vector,
901                                NEW.rank_search, NEW.rank_address, NEW.geometry);
902     --DEBUG: RAISE WARNING 'added to search name (full)';
903
904     IF NOT %REVERSE-ONLY% THEN
905         INSERT INTO search_name (place_id, search_rank, address_rank,
906                                  importance, country_code, name_vector,
907                                  nameaddress_vector, centroid)
908                VALUES (NEW.place_id, NEW.rank_search, NEW.rank_address,
909                        NEW.importance, NEW.country_code, name_vector,
910                        nameaddress_vector, NEW.centroid);
911     END IF;
912
913   END IF;
914
915   --DEBUG: RAISE WARNING 'place update % % finsihed.', NEW.osm_type, NEW.osm_id;
916
917   RETURN NEW;
918 END;
919 $$
920 LANGUAGE plpgsql;
921
922
923 CREATE OR REPLACE FUNCTION placex_delete()
924   RETURNS TRIGGER
925   AS $$
926 DECLARE
927   b BOOLEAN;
928   classtable TEXT;
929 BEGIN
930   -- RAISE WARNING 'placex_delete % %',OLD.osm_type,OLD.osm_id;
931
932   IF OLD.linked_place_id is null THEN
933     update placex set linked_place_id = null, indexed_status = 2 where linked_place_id = OLD.place_id and indexed_status = 0;
934     --DEBUG: RAISE WARNING 'placex_delete:01 % %',OLD.osm_type,OLD.osm_id;
935     update placex set linked_place_id = null where linked_place_id = OLD.place_id;
936     --DEBUG: RAISE WARNING 'placex_delete:02 % %',OLD.osm_type,OLD.osm_id;
937   ELSE
938     update placex set indexed_status = 2 where place_id = OLD.linked_place_id and indexed_status = 0;
939   END IF;
940
941   IF OLD.rank_address < 30 THEN
942
943     -- mark everything linked to this place for re-indexing
944     --DEBUG: RAISE WARNING 'placex_delete:03 % %',OLD.osm_type,OLD.osm_id;
945     UPDATE placex set indexed_status = 2 from place_addressline where address_place_id = OLD.place_id 
946       and placex.place_id = place_addressline.place_id and indexed_status = 0 and place_addressline.isaddress;
947
948     --DEBUG: RAISE WARNING 'placex_delete:04 % %',OLD.osm_type,OLD.osm_id;
949     DELETE FROM place_addressline where address_place_id = OLD.place_id;
950
951     --DEBUG: RAISE WARNING 'placex_delete:05 % %',OLD.osm_type,OLD.osm_id;
952     b := deleteRoad(OLD.partition, OLD.place_id);
953
954     --DEBUG: RAISE WARNING 'placex_delete:06 % %',OLD.osm_type,OLD.osm_id;
955     update placex set indexed_status = 2 where parent_place_id = OLD.place_id and indexed_status = 0;
956     --DEBUG: RAISE WARNING 'placex_delete:07 % %',OLD.osm_type,OLD.osm_id;
957     -- reparenting also for OSM Interpolation Lines (and for Tiger?)
958     update location_property_osmline set indexed_status = 2 where indexed_status = 0 and parent_place_id = OLD.place_id;
959
960   END IF;
961
962   --DEBUG: RAISE WARNING 'placex_delete:08 % %',OLD.osm_type,OLD.osm_id;
963
964   IF OLD.rank_address < 26 THEN
965     b := deleteLocationArea(OLD.partition, OLD.place_id, OLD.rank_search);
966   END IF;
967
968   --DEBUG: RAISE WARNING 'placex_delete:09 % %',OLD.osm_type,OLD.osm_id;
969
970   IF OLD.name is not null THEN
971     IF NOT %REVERSE-ONLY% THEN
972       DELETE from search_name WHERE place_id = OLD.place_id;
973     END IF;
974     b := deleteSearchName(OLD.partition, OLD.place_id);
975   END IF;
976
977   --DEBUG: RAISE WARNING 'placex_delete:10 % %',OLD.osm_type,OLD.osm_id;
978
979   DELETE FROM place_addressline where place_id = OLD.place_id;
980
981   --DEBUG: RAISE WARNING 'placex_delete:11 % %',OLD.osm_type,OLD.osm_id;
982
983   -- remove from tables for special search
984   classtable := 'place_classtype_' || OLD.class || '_' || OLD.type;
985   SELECT count(*)>0 FROM pg_tables WHERE tablename = classtable and schemaname = current_schema() INTO b;
986   IF b THEN
987     EXECUTE 'DELETE FROM ' || classtable::regclass || ' WHERE place_id = $1' USING OLD.place_id;
988   END IF;
989
990   --DEBUG: RAISE WARNING 'placex_delete:12 % %',OLD.osm_type,OLD.osm_id;
991
992   RETURN OLD;
993
994 END;
995 $$
996 LANGUAGE plpgsql;