Merge remote-tracking branch 'upstream/master'

Merge pull request #3626 from lonvia/import-performance

Import performance

Merge pull request #3631 from lonvia/avoid-transactions

Creating tables and indexes in autocommit mode

Merge pull request #3633 from lonvia/restrict-long-ways

Ignore overly long ways during import

ignore overly long ways during import

use autocommit when creating tables and indexes

Might avoid some deadlock situations with autovacuum.

Merge pull request #3629 from lonvia/additional-breaks

Introduce new break types and phrase splitting for Japanese addresses

add japanese phrase preprocessing

Code adapted from GSOC code by @miku.

keep break indicators [:-] during normalisation

All punctuation will be converted to '-'. Soft breaks : may be
added by preprocessors. The break signs are only used during
query analysis and are ignored during import token analysis.

add inner word break penalty

add SOFT_PHRASE break and enable parsing

Also enables parsing of PART breaks.

split up MultiPolygons before adding them to large_areas table

move geometry split into insertLocationAreaLarge()

thus insert only needs to be called once.

more efficient belongs-to-address determination

Merge pull request #3619 from lonvia/demote-farms

Remove farms and isolated dwellings from computed addresses

remove farms and isolated dwellings from computed addresses

Farms and isolated dwellings are usually confined to a very small
area. It does not make sense if they are automatically used in
addressing surrounding features. Still works to use them for
parenting when used with addr:place.

docs: update Update docs for virtualenv use

Merge pull request #3618 from osm-search/settings-md-table-space-osm-index

Settings.md - one setting was repeated

Settings.md - one setting was repeated

Merge pull request #3617 from mtmail/pr-3615-wording

Slight wording changes for Import-Styles.md

Slight wording changes for Import-Styles.md

Merge pull request #3616 from osm-search/tokenizers-md-typo

fix typo in Tokenizers.md

fix typo in Tokenizers.md

Merge pull request #3615 from lonvia/overhaul-osm2pgsql-style

Overhaul osm2pgsql style

exclude more tourism=information types

reintroduce brand and remove etymology

exclude unnamed swimming pools

Publicly accessible ones are usually mapped as the bigger area
with the water park.

include lock names mapped with "lock_name"

Fixes #3365.

do not save names when falling back to addresses

If an object doesn't have a useable main tag, then the names should
always be ignored, independently of the presence of housenumbers.
We have to assume that the name belongs to a feature that was
intentionally filtered out.

switch to subtags for tourism=information and natural=water

exclude sidewalks and similar footways

These footways are part of a street that is usually already named.

make nominatim callable with themepark style

adapt documentation for style import

adapt taginfo script to new configuration structure

convert import styles to themepark

Introduces presets which avoid much of the previous configuration
duplication. The original import files are now thin wrappers around
the themepark themes.

osm2pgsql style: add modification for name and address, with tests

osm2pgsql style: simplify computation of extra tags

Now implemented as a simple filter function which can also be
customized by the user.

osm2pgsql style: merge main tag and pre-filter handling

Defining a tag as deleteable/extratag and main tag is mutually exclusive
and deleting certain key/value combinations to exclude them from being
used as a main tag is confusing. By merging the handling, such
excludes can now be made explicit in the main list.

By using the same lookup table, it is now also possible to have a
short-cut for uninteresting objects.

do not touch original tags of osm2pgsql OSM object

convert flex-base.lua into a themepark theme

This already allows to run Nominatim under themepark, currently
as a topic-less theme.

move lua scripts into a separate directory

Merge pull request #3610 from lonvia/search-preprocessing

Add configurable query preprocessing

add developers documentation for query-side of tokenizer

add documentation for new query preprocessing

generalize normalization step for search query

It is now possible to configure functions for changing the query
input before it is analysed by the tokenizer.

Code is a cleaned-up version of the implementation by @miku.

docs: external osm2pgsql is not longer optional

Merge pull request #3609 from lonvia/reverse-ignore-postcode-areas

Ignore postcode areas on reverse

ignore postcode areas on reverse

Postcode lookups are best done by doing reverse at a higher
level and then extracting the postcode.

Merge pull request #3608 from lonvia/reverse-fallback-country

Fall back to using the OSM grid country table when no countries are found in the OSM data

have reverse fall back to country table when no country is found

release 4.5.0.post8

be less strict on filtering one-letter queries

docs: complete requirements list for dev env

docs: more prominent mention of pip install

Merge pull request #3600 from clavisound/master

uvicorn.org vs www.uvicorn.org

uvicorn.org vs www.uvicorn.org

correct link

release 4.5.0.post7

remove more former website traces

Now managed in chef.

remove last traces of website customization

Now managed in chef.

Merge remote-tracking branch 'upstream/master'

release 4.5.0.post6

Merge pull request #3593 from lonvia/order-by-bbox

Use bbox size for secondary order of results

use bbox size for secondary order of results

Helps to return the largest object when deduplicating results.

Merge pull request #3592 from lonvia/remove-cmake

Remove cmake building and bundled osm2pgsql

update instructions for Vagrant

update release instructions

switch actions to pip-based install

update Ubuntu22 install script for pip install

remove cmake and related installation instructions

remove vendored osm2pgsql

Merge pull request #3591 from lonvia/increase-required-postgresql

Increase version requirements for PostgreSQL and PostGIS

adapt BDD tests to changed simplification

actions: update to latest supported versions

remove code only needed for older PostgreSQL/PostGIS versions

increase minimum versions for PostgreSQL and PostGIS

Merge remote-tracking branch 'upstream/master'

Merge pull request #3590 from lonvia/lookup-per-osm-type

Look up different OSM types in placex separately

Merge pull request #3588 from lonvia/optional-reverse-api

Add support for adding endpoints to server conditionally

look up different OSM types in placex separately

There are separate indexes on placex for the different OSM types.
PostgreSQL can only use these indexes if the type is fixed per query.

fix grammar in issue template

Merge pull request #3587 from danieldegroot2/lookup-spelling

Update lookup.py - Correct spelling for "simultaneously"

enable search endpoint only when search table is available

move server route creation into async function

release 4.5.0.post4

Update lookup.py - Correct spelling for "simultaneously"

Corrects minor spelling mistake.

Merge remote-tracking branch 'upstream/master'

Merge pull request #3586 from lonvia/reduce-lookup-calls

Reduce number of SQL queries for lookup call

look up all places at once

Merge pull request #3582 from lonvia/switch-to-flake

Switch from pylint to flake8 for linting

Merge pull request #3580 from lonvia/about-ai-prs

Contributions: some additional rules for AI use

replace pylint with flake8 everywhere

remove remaining pylint hints

fix style issue found by flake8

contributions: some additional rules for AI use

release 4.5.0.post3

is_indexed no longer exists

release 4.5.0.post2

Merge remote-tracking branch 'upstream/master'

Merge pull request #3576 from lonvia/test-updating

Github action for testing migration

actions: add test for database migration