test/bdd/steps/place_inserter.py

   1 # SPDX-License-Identifier: GPL-2.0-only
   2 #
   3 # This file is part of Nominatim. (https://nominatim.org)
   4 #
   5 # Copyright (C) 2022 by the Nominatim developer community.
   6 # For a full list of authors see the git log.
   7 """
   8 Helper classes for filling the place table.
   9 """
  10 import random
  11 import string
  12
  13 class PlaceColumn:
  14     """ Helper class to collect contents from a behave table row and
  15         insert it into the place table.
  16     """
  17     def __init__(self, context):
  18         self.columns = {'admin_level' : 15}
  19         self.context = context
  20         self.geometry = None
  21
  22     def add_row(self, row, force_name):
  23         """ Parse the content from the given behave row as place column data.
  24         """
  25         for name, value in zip(row.headings, row.cells):
  26             self._add(name, value)
  27
  28         assert 'osm_type' in self.columns, "osm column missing"
  29
  30         if force_name and 'name' not in self.columns:
  31             self._add_hstore(
  32                 'name',
  33                 'name',
  34                 ''.join(random.choices(string.printable, k=random.randrange(30))),
  35             )
  36
  37         return self
  38
  39     def _add(self, key, value):
  40         if hasattr(self, '_set_key_' + key):
  41             getattr(self, '_set_key_' + key)(value)
  42         elif key.startswith('name+'):
  43             self._add_hstore('name', key[5:], value)
  44         elif key.startswith('extra+'):
  45             self._add_hstore('extratags', key[6:], value)
  46         elif key.startswith('addr+'):
  47             self._add_hstore('address', key[5:], value)
  48         elif key in ('name', 'address', 'extratags'):
  49             self.columns[key] = eval('{' + value + '}')
  50         else:
  51             assert key in ('class', 'type'), "Unknown column '{}'.".format(key)
  52             self.columns[key] = None if value == '' else value
  53
  54     def _set_key_name(self, value):
  55         self._add_hstore('name', 'name', value)
  56
  57     def _set_key_osm(self, value):
  58         assert value[0] in 'NRW' and value[1:].isdigit(), \
  59                "OSM id needs to be of format <NRW><id>."
  60
  61         self.columns['osm_type'] = value[0]
  62         self.columns['osm_id'] = int(value[1:])
  63
  64     def _set_key_admin(self, value):
  65         self.columns['admin_level'] = int(value)
  66
  67     def _set_key_housenr(self, value):
  68         if value:
  69             self._add_hstore('address', 'housenumber', value)
  70
  71     def _set_key_postcode(self, value):
  72         if value:
  73             self._add_hstore('address', 'postcode', value)
  74
  75     def _set_key_street(self, value):
  76         if value:
  77             self._add_hstore('address', 'street', value)
  78
  79     def _set_key_addr_place(self, value):
  80         if value:
  81             self._add_hstore('address', 'place', value)
  82
  83     def _set_key_country(self, value):
  84         if value:
  85             self._add_hstore('address', 'country', value)
  86
  87     def _set_key_geometry(self, value):
  88         self.geometry = self.context.osm.parse_geometry(value)
  89         assert self.geometry is not None, "Bad geometry: {}".format(value)
  90
  91     def _add_hstore(self, column, key, value):
  92         if column in self.columns:
  93             self.columns[column][key] = value
  94         else:
  95             self.columns[column] = {key: value}
  96
  97     def db_delete(self, cursor):
  98         """ Issue a delete for the given OSM object.
  99         """
 100         cursor.execute('DELETE FROM place WHERE osm_type = %s and osm_id = %s',
 101                        (self.columns['osm_type'] , self.columns['osm_id']))
 102
 103     def db_insert(self, cursor):
 104         """ Insert the collected data into the database.
 105         """
 106         if self.columns['osm_type'] == 'N' and self.geometry is None:
 107             pt = self.context.osm.grid_node(self.columns['osm_id'])
 108             if pt is None:
 109                 pt = (random.uniform(-180, 180), random.uniform(-90, 90))
 110
 111             self.geometry = "ST_SetSRID(ST_Point(%f, %f), 4326)" % pt
 112         else:
 113             assert self.geometry is not None, "Geometry missing"
 114
 115         query = 'INSERT INTO place ({}, geometry) values({}, {})'.format(
 116             ','.join(self.columns.keys()),
 117             ','.join(['%s' for x in range(len(self.columns))]),
 118             self.geometry)
 119         cursor.execute(query, list(self.columns.values()))