osm2pgsql style: simplify computation of extra tags

Now implemented as a simple filter function which can also be
customized by the user.

osm2pgsql style: merge main tag and pre-filter handling

Defining a tag as deleteable/extratag and main tag is mutually exclusive
and deleting certain key/value combinations to exclude them from being
used as a main tag is confusing. By merging the handling, such
excludes can now be made explicit in the main list.

By using the same lookup table, it is now also possible to have a
short-cut for uninteresting objects.

do not touch original tags of osm2pgsql OSM object

convert flex-base.lua into a themepark theme

This already allows to run Nominatim under themepark, currently
as a topic-less theme.

move lua scripts into a separate directory

Merge pull request #3610 from lonvia/search-preprocessing

Add configurable query preprocessing

add developers documentation for query-side of tokenizer

add documentation for new query preprocessing

generalize normalization step for search query

It is now possible to configure functions for changing the query
input before it is analysed by the tokenizer.

Code is a cleaned-up version of the implementation by @miku.

docs: external osm2pgsql is not longer optional

Merge pull request #3609 from lonvia/reverse-ignore-postcode-areas

Ignore postcode areas on reverse

ignore postcode areas on reverse

Postcode lookups are best done by doing reverse at a higher
level and then extracting the postcode.

Merge pull request #3608 from lonvia/reverse-fallback-country

Fall back to using the OSM grid country table when no countries are found in the OSM data

have reverse fall back to country table when no country is found

docs: complete requirements list for dev env

docs: more prominent mention of pip install

Merge pull request #3600 from clavisound/master

uvicorn.org vs www.uvicorn.org

uvicorn.org vs www.uvicorn.org

correct link

Merge pull request #3593 from lonvia/order-by-bbox

Use bbox size for secondary order of results

use bbox size for secondary order of results

Helps to return the largest object when deduplicating results.

Merge pull request #3592 from lonvia/remove-cmake

Remove cmake building and bundled osm2pgsql

update instructions for Vagrant

update release instructions

switch actions to pip-based install

update Ubuntu22 install script for pip install

remove cmake and related installation instructions

remove vendored osm2pgsql

Merge pull request #3591 from lonvia/increase-required-postgresql

Increase version requirements for PostgreSQL and PostGIS

adapt BDD tests to changed simplification

actions: update to latest supported versions

remove code only needed for older PostgreSQL/PostGIS versions

increase minimum versions for PostgreSQL and PostGIS

Merge pull request #3590 from lonvia/lookup-per-osm-type

Look up different OSM types in placex separately

Merge pull request #3588 from lonvia/optional-reverse-api

Add support for adding endpoints to server conditionally

look up different OSM types in placex separately

There are separate indexes on placex for the different OSM types.
PostgreSQL can only use these indexes if the type is fixed per query.

fix grammar in issue template

Merge pull request #3587 from danieldegroot2/lookup-spelling

Update lookup.py - Correct spelling for "simultaneously"

enable search endpoint only when search table is available

move server route creation into async function

Update lookup.py - Correct spelling for "simultaneously"

Corrects minor spelling mistake.

Merge pull request #3586 from lonvia/reduce-lookup-calls

Reduce number of SQL queries for lookup call

look up all places at once

Merge pull request #3582 from lonvia/switch-to-flake

Switch from pylint to flake8 for linting

Merge pull request #3580 from lonvia/about-ai-prs

Contributions: some additional rules for AI use

replace pylint with flake8 everywhere

remove remaining pylint hints

fix style issue found by flake8

contributions: some additional rules for AI use

Merge pull request #3576 from lonvia/test-updating

Github action for testing migration

actions: add test for database migration

do not rename parameters in existing SQL function

Merge pull request #3575 from lonvia/improve-centroid

Improve centroid computation for line strings

avoid multiple centroid computations

use line interpolation to create centroid for lines

ST_PointOnSurface always returns one of the vertices of a line.
This means that a two-point line will have the centroid at
one of the ends, which is less then ideal.

fix backward compatibility issues with Python 3.7

remove now unnecessary type-ignores

Merge pull request #3558 from otbutz/patch-1

Fix gunicorn invocation

Fix gunicorn invocation

Merge pull request #3554 from lonvia/postcode-bbox

Improve bounding boxes for postcodes

get bbox of postcode areas into results

derive bbox size for postcode nodes from rank_search

add new format 'raw' for CLI commands

This dumps the original results with all details available.

Revert "work round typing bug in pyosmium 4.0"

This reverts commit f960a9bf7fd1702b3d66995dd69307bd91d61a08.

Merge pull request #3552 from lonvia/drop-some-migrations

Restrict migrations to versions 4.3+

drop automatic migration from versions <4.3

Merge pull request #3542 from lonvia/remove-legacy-tokenizer

Remove legacy tokenizer

work round typing bug in pyosmium 4.0

supress new pylint errors

remove support for unindexed tokens

This was a special feature of the legacy tokenizer who would not
index very frequent tokens.

remove PHPCS configuration

remove documentation around legacy tokenizer

remove all references to a module path

No longer used now that legacy tokenizer is gone.

remove warning about now removed legacy tokenizer

remove special casing for legacy tokenizer from BDD tests

remove PostgreSQL legacy module

remove legacy tokenizer and direct tests

Merge pull request #3536 from lonvia/remove-php

Remove PHP frontend

add migration warning for PHP frontend removal

docs: remove all references to PHP

remove remaining references to php code

remove PHP frontend support from BDD tests

remove website setup

The website directory was for PHP scripts only and is no longer
needed.

remove PHP tests

remove PHP frontend

prepare 4.5.0 release

Merge pull request #3532 from lonvia/refresh-docs

Update library documentation

docs: improve contents listing

docs: rework library getting started

docs: avoid loading external fonts

fix permalink character

Merge pull request #3530 from lonvia/clean-use-of-os-environ

Don't use OS environment variables when an explicit environment was set

restrict use of os.environ in Configuration

Only use the OS environment, when the environ parameter is set
to None. Currently it would use the OS env on an empty dict.

Merge pull request #3523 from mtmail/import-styles-country-code

Import-Styles.md - clarify country_code key

Merge pull request #3525 from lonvia/project-dir-less-library

Simplify handling of project directory for Nominatim library

Import-Styles.md - clarify country_code key

fix typo in Import-Styles.md

allow None and str for project_dir in NominatimAPI init

Merge pull request #3520 from lonvia/restrict-interpolation-range

Restrict interpolation housenumbers to 0-999999

Merge pull request #3521 from lonvia/make-requests-optional

Fix error around missing requests library

restrict interpolation housenumbers to 0-999999

Ensures that the numbers fit into integers.