nominatim/clicmd/api.py

   1 # SPDX-License-Identifier: GPL-2.0-only
   2 #
   3 # This file is part of Nominatim. (https://nominatim.org)
   4 #
   5 # Copyright (C) 2023 by the Nominatim developer community.
   6 # For a full list of authors see the git log.
   7 """
   8 Subcommand definitions for API calls from the command line.
   9 """
  10 from typing import Mapping, Dict
  11 import argparse
  12 import logging
  13 import json
  14 import sys
  15
  16 from nominatim.tools.exec_utils import run_api_script
  17 from nominatim.errors import UsageError
  18 from nominatim.clicmd.args import NominatimArgs
  19 import nominatim.api as napi
  20 import nominatim.api.v1 as api_output
  21 from nominatim.api.v1.server_glue import REVERSE_MAX_RANKS
  22
  23 # Do not repeat documentation of subcommand classes.
  24 # pylint: disable=C0111
  25
  26 LOG = logging.getLogger()
  27
  28 STRUCTURED_QUERY = (
  29     ('street', 'housenumber and street'),
  30     ('city', 'city, town or village'),
  31     ('county', 'county'),
  32     ('state', 'state'),
  33     ('country', 'country'),
  34     ('postalcode', 'postcode')
  35 )
  36
  37 EXTRADATA_PARAMS = (
  38     ('addressdetails', 'Include a breakdown of the address into elements'),
  39     ('extratags', ("Include additional information if available "
  40                    "(e.g. wikipedia link, opening hours)")),
  41     ('namedetails', 'Include a list of alternative names')
  42 )
  43
  44 def _add_api_output_arguments(parser: argparse.ArgumentParser) -> None:
  45     group = parser.add_argument_group('Output arguments')
  46     group.add_argument('--format', default='jsonv2',
  47                        choices=['xml', 'json', 'jsonv2', 'geojson', 'geocodejson'],
  48                        help='Format of result')
  49     for name, desc in EXTRADATA_PARAMS:
  50         group.add_argument('--' + name, action='store_true', help=desc)
  51
  52     group.add_argument('--lang', '--accept-language', metavar='LANGS',
  53                        help='Preferred language order for presenting search results')
  54     group.add_argument('--polygon-output',
  55                        choices=['geojson', 'kml', 'svg', 'text'],
  56                        help='Output geometry of results as a GeoJSON, KML, SVG or WKT')
  57     group.add_argument('--polygon-threshold', type=float, default = 0.0,
  58                        metavar='TOLERANCE',
  59                        help=("Simplify output geometry."
  60                              "Parameter is difference tolerance in degrees."))
  61
  62
  63 def _run_api(endpoint: str, args: NominatimArgs, params: Mapping[str, object]) -> int:
  64     script_file = args.project_dir / 'website' / (endpoint + '.php')
  65
  66     if not script_file.exists():
  67         LOG.error("Cannot find API script file.\n\n"
  68                   "Make sure to run 'nominatim' from the project directory \n"
  69                   "or use the option --project-dir.")
  70         raise UsageError("API script not found.")
  71
  72     return run_api_script(endpoint, args.project_dir,
  73                           phpcgi_bin=args.phpcgi_path, params=params)
  74
  75 class APISearch:
  76     """\
  77     Execute a search query.
  78
  79     This command works exactly the same as if calling the /search endpoint on
  80     the web API. See the online documentation for more details on the
  81     various parameters:
  82     https://nominatim.org/release-docs/latest/api/Search/
  83     """
  84
  85     def add_args(self, parser: argparse.ArgumentParser) -> None:
  86         group = parser.add_argument_group('Query arguments')
  87         group.add_argument('--query',
  88                            help='Free-form query string')
  89         for name, desc in STRUCTURED_QUERY:
  90             group.add_argument('--' + name, help='Structured query: ' + desc)
  91
  92         _add_api_output_arguments(parser)
  93
  94         group = parser.add_argument_group('Result limitation')
  95         group.add_argument('--countrycodes', metavar='CC,..',
  96                            help='Limit search results to one or more countries')
  97         group.add_argument('--exclude_place_ids', metavar='ID,..',
  98                            help='List of search object to be excluded')
  99         group.add_argument('--limit', type=int,
 100                            help='Limit the number of returned results')
 101         group.add_argument('--viewbox', metavar='X1,Y1,X2,Y2',
 102                            help='Preferred area to find search results')
 103         group.add_argument('--bounded', action='store_true',
 104                            help='Strictly restrict results to viewbox area')
 105
 106         group = parser.add_argument_group('Other arguments')
 107         group.add_argument('--no-dedupe', action='store_false', dest='dedupe',
 108                            help='Do not remove duplicates from the result list')
 109
 110
 111     def run(self, args: NominatimArgs) -> int:
 112         params: Dict[str, object]
 113         if args.query:
 114             params = dict(q=args.query)
 115         else:
 116             params = {k: getattr(args, k) for k, _ in STRUCTURED_QUERY if getattr(args, k)}
 117
 118         for param, _ in EXTRADATA_PARAMS:
 119             if getattr(args, param):
 120                 params[param] = '1'
 121         for param in ('format', 'countrycodes', 'exclude_place_ids', 'limit', 'viewbox'):
 122             if getattr(args, param):
 123                 params[param] = getattr(args, param)
 124         if args.lang:
 125             params['accept-language'] = args.lang
 126         if args.polygon_output:
 127             params['polygon_' + args.polygon_output] = '1'
 128         if args.polygon_threshold:
 129             params['polygon_threshold'] = args.polygon_threshold
 130         if args.bounded:
 131             params['bounded'] = '1'
 132         if not args.dedupe:
 133             params['dedupe'] = '0'
 134
 135         return _run_api('search', args, params)
 136
 137 class APIReverse:
 138     """\
 139     Execute API reverse query.
 140
 141     This command works exactly the same as if calling the /reverse endpoint on
 142     the web API. See the online documentation for more details on the
 143     various parameters:
 144     https://nominatim.org/release-docs/latest/api/Reverse/
 145     """
 146
 147     def add_args(self, parser: argparse.ArgumentParser) -> None:
 148         group = parser.add_argument_group('Query arguments')
 149         group.add_argument('--lat', type=float, required=True,
 150                            help='Latitude of coordinate to look up (in WGS84)')
 151         group.add_argument('--lon', type=float, required=True,
 152                            help='Longitude of coordinate to look up (in WGS84)')
 153         group.add_argument('--zoom', type=int,
 154                            help='Level of detail required for the address')
 155         group.add_argument('--layer', metavar='LAYER',
 156                            choices=[n.name.lower() for n in napi.DataLayer if n.name],
 157                            action='append', required=False, dest='layers',
 158                            help='OSM id to lookup in format <NRW><id> (may be repeated)')
 159
 160         _add_api_output_arguments(parser)
 161
 162
 163     def run(self, args: NominatimArgs) -> int:
 164         api = napi.NominatimAPI(args.project_dir)
 165
 166         details = napi.LookupDetails(address_details=True, # needed for display name
 167                                      geometry_output=args.get_geometry_output(),
 168                                      geometry_simplification=args.polygon_threshold or 0.0)
 169
 170         result = api.reverse(napi.Point(args.lon, args.lat),
 171                              REVERSE_MAX_RANKS[max(0, min(18, args.zoom or 18))],
 172                              args.get_layers(napi.DataLayer.ADDRESS | napi.DataLayer.POI),
 173                              details)
 174
 175         if result:
 176             output = api_output.format_result(
 177                         napi.ReverseResults([result]),
 178                         args.format,
 179                         {'locales': args.get_locales(api.config.DEFAULT_LANGUAGE),
 180                          'extratags': args.extratags,
 181                          'namedetails': args.namedetails,
 182                          'addressdetails': args.addressdetails})
 183             if args.format != 'xml':
 184                 # reformat the result, so it is pretty-printed
 185                 json.dump(json.loads(output), sys.stdout, indent=4, ensure_ascii=False)
 186             else:
 187                 sys.stdout.write(output)
 188             sys.stdout.write('\n')
 189
 190             return 0
 191
 192         LOG.error("Unable to geocode.")
 193         return 42
 194
 195
 196
 197 class APILookup:
 198     """\
 199     Execute API lookup query.
 200
 201     This command works exactly the same as if calling the /lookup endpoint on
 202     the web API. See the online documentation for more details on the
 203     various parameters:
 204     https://nominatim.org/release-docs/latest/api/Lookup/
 205     """
 206
 207     def add_args(self, parser: argparse.ArgumentParser) -> None:
 208         group = parser.add_argument_group('Query arguments')
 209         group.add_argument('--id', metavar='OSMID',
 210                            action='append', required=True, dest='ids',
 211                            help='OSM id to lookup in format <NRW><id> (may be repeated)')
 212
 213         _add_api_output_arguments(parser)
 214
 215
 216     def run(self, args: NominatimArgs) -> int:
 217         api = napi.NominatimAPI(args.project_dir)
 218
 219         details = napi.LookupDetails(address_details=True, # needed for display name
 220                                      geometry_output=args.get_geometry_output(),
 221                                      geometry_simplification=args.polygon_threshold or 0.0)
 222
 223         places = [napi.OsmID(o[0], int(o[1:])) for o in args.ids]
 224
 225         results = api.lookup(places, details)
 226
 227         output = api_output.format_result(
 228                     results,
 229                     args.format,
 230                     {'locales': args.get_locales(api.config.DEFAULT_LANGUAGE),
 231                      'extratags': args.extratags,
 232                      'namedetails': args.namedetails,
 233                      'addressdetails': args.addressdetails})
 234         if args.format != 'xml':
 235             # reformat the result, so it is pretty-printed
 236             json.dump(json.loads(output), sys.stdout, indent=4, ensure_ascii=False)
 237         else:
 238             sys.stdout.write(output)
 239         sys.stdout.write('\n')
 240
 241         return 0
 242
 243
 244 class APIDetails:
 245     """\
 246     Execute API details query.
 247
 248     This command works exactly the same as if calling the /details endpoint on
 249     the web API. See the online documentation for more details on the
 250     various parameters:
 251     https://nominatim.org/release-docs/latest/api/Details/
 252     """
 253
 254     def add_args(self, parser: argparse.ArgumentParser) -> None:
 255         group = parser.add_argument_group('Query arguments')
 256         objs = group.add_mutually_exclusive_group(required=True)
 257         objs.add_argument('--node', '-n', type=int,
 258                           help="Look up the OSM node with the given ID.")
 259         objs.add_argument('--way', '-w', type=int,
 260                           help="Look up the OSM way with the given ID.")
 261         objs.add_argument('--relation', '-r', type=int,
 262                           help="Look up the OSM relation with the given ID.")
 263         objs.add_argument('--place_id', '-p', type=int,
 264                           help='Database internal identifier of the OSM object to look up')
 265         group.add_argument('--class', dest='object_class',
 266                            help=("Class type to disambiguated multiple entries "
 267                                  "of the same object."))
 268
 269         group = parser.add_argument_group('Output arguments')
 270         group.add_argument('--addressdetails', action='store_true',
 271                            help='Include a breakdown of the address into elements')
 272         group.add_argument('--keywords', action='store_true',
 273                            help='Include a list of name keywords and address keywords')
 274         group.add_argument('--linkedplaces', action='store_true',
 275                            help='Include a details of places that are linked with this one')
 276         group.add_argument('--hierarchy', action='store_true',
 277                            help='Include details of places lower in the address hierarchy')
 278         group.add_argument('--group_hierarchy', action='store_true',
 279                            help='Group the places by type')
 280         group.add_argument('--polygon_geojson', action='store_true',
 281                            help='Include geometry of result')
 282         group.add_argument('--lang', '--accept-language', metavar='LANGS',
 283                            help='Preferred language order for presenting search results')
 284
 285
 286     def run(self, args: NominatimArgs) -> int:
 287         place: napi.PlaceRef
 288         if args.node:
 289             place = napi.OsmID('N', args.node, args.object_class)
 290         elif args.way:
 291             place = napi.OsmID('W', args.way, args.object_class)
 292         elif args.relation:
 293             place = napi.OsmID('R', args.relation, args.object_class)
 294         else:
 295             assert args.place_id is not None
 296             place = napi.PlaceID(args.place_id)
 297
 298         api = napi.NominatimAPI(args.project_dir)
 299
 300         details = napi.LookupDetails(address_details=args.addressdetails,
 301                                      linked_places=args.linkedplaces,
 302                                      parented_places=args.hierarchy,
 303                                      keywords=args.keywords)
 304         if args.polygon_geojson:
 305             details.geometry_output = napi.GeometryFormat.GEOJSON
 306
 307         result = api.details(place, details)
 308
 309         if result:
 310             output = api_output.format_result(
 311                         result,
 312                         'json',
 313                         {'locales': args.get_locales(api.config.DEFAULT_LANGUAGE),
 314                          'group_hierarchy': args.group_hierarchy})
 315             # reformat the result, so it is pretty-printed
 316             json.dump(json.loads(output), sys.stdout, indent=4, ensure_ascii=False)
 317             sys.stdout.write('\n')
 318
 319             return 0
 320
 321         LOG.error("Object not found in database.")
 322         return 42
 323
 324
 325 class APIStatus:
 326     """
 327     Execute API status query.
 328
 329     This command works exactly the same as if calling the /status endpoint on
 330     the web API. See the online documentation for more details on the
 331     various parameters:
 332     https://nominatim.org/release-docs/latest/api/Status/
 333     """
 334
 335     def add_args(self, parser: argparse.ArgumentParser) -> None:
 336         formats = api_output.list_formats(napi.StatusResult)
 337         group = parser.add_argument_group('API parameters')
 338         group.add_argument('--format', default=formats[0], choices=formats,
 339                            help='Format of result')
 340
 341
 342     def run(self, args: NominatimArgs) -> int:
 343         status = napi.NominatimAPI(args.project_dir).status()
 344         print(api_output.format_result(status, args.format, {}))
 345         return 0