Merge remote-tracking branch 'upstream/master'

add place=city_block/quarter to address hierarchy

Fixes #1516.

Gsoc2019 contributions for adding Wikidata to Nominatim (#1475)

Complete rewrite of wikipedia processing scripts, addition of processing wikidata, new data source, new documentation by @tchaddad during Google Summer of Code 2019 project.

Merge pull request #1511 from cbpetersen/patch-1

Remove duplicate format query param

Remove duplicate format query param

Merge pull request #1474 from mtmail/tiger-data-2019

US TIGER 2019 data got released

Merge pull request #1478 from tbertels/patch-1

Remove administrative arrondissements from Belgian addresses

Remove administrative arrondissements from Belgian addresses

"administrative7" -> [14, 0]

Merge pull request #1477 from dpasqualin/fix-python-shebang

Fix python shebang following PEP 394 recommendation

Fix python shebang following PEP 394 recommendation

US TIGER 2019 data got released

fix spelling on US-Tiger documentation page (#1459)

Merge pull request #1444 from lonvia/require-python-3

Require python 3

Merge pull request #1453 from mtmail/add-boundingbox-to-lookup-results

lookup endpoint returns boundingbox

lookup endpoint returns boundingbox

Merge pull request #1445 from mtmail/hierarchy-endpoint-broke

/hierarchy.php was missing namespace calling AddressDetails

/hierarchy.php was missing namespace calling AddressDetails

adapt TIGER conversion script for python 3

require python 3 for all tools used in updates

Merge remote-tracking branch 'upstream/master'

Merge pull request #1443 from lonvia/reorganize-search-name-partition-tables

Reorganize search name partition tables

Merge pull request #1433 from mtmail/us-postcode-import-optional

make US postcode data to an optional download

add cmake mode for building documentation only

streamline indexes of search_name partition tables

Remove index on name_vector. We always do near search where the
geometry index is sufficient. Also split centroid index in low
and high rank indexes. Reduces index size by about 25%.

use bbox of geometry when searching for attached streets

As we are doing a distance search, this improves results for
large places like airports.

Fixes #1442.

make US postcode data to an optional download

Merge pull request #1432 from mtmail/two-outputformats-for-lookup-endpoint

lookup endpoint supports jsonv2 and geocodejson output now

Merge pull request #1430 from mtmail/exclude-negative-tiger-housenumber-ranges

during TIGER import skip records with negative house number range

Merge pull request #1427 from mtmail/documentation-how-to-build-documentation

New readme file on how to build the documentation

lookup endpoint supports jsonv2 and geocodejson output now

during TIGER import skip records with negative house number range

New readme file on how to build the documentation

Merge remote-tracking branch 'upstream/master'

Merge pull request #1422 from lonvia/remove-country-from-addressline

Remove country from addressline

Merge pull request #1421 from asantoz/patch-1

Minor change on lookup endpoint doc

add migration hints for country table

remove country from place_addressline

The country information can be determined sufficiently from
the country code. We only loose the specific OSM object
behind the address.

Also streamlines the location_area_country table.

Minor change on lookup endpoint doc

Fix documentation about lookup endpoint on output formats available on filter `format`

Merge pull request #1419 from asantoz/minor-fix-doc

Minor issue on api docs

Minor issue on api docs

Fix a minor issue on API docs in details endpoint example :pray:

Merge remote-tracking branch 'upstream/master'

recreate interpolations when one of their support nodes changes

A simple update is not enough because the interpolation splits
might change as well as the housenumbers.

Fixes #1360.

Reset housenumber on every place update

As it is a computed field, it needs to be computed from scratch
to take into account any surrounding changes.

Fixes #1395.

remove visibility modifier from constants again

Only supported on PHP >= 7.1.

Merge pull request #1415 from nslxndr/fix-db-log

Fix DB log

Fix SQL concatenation for new query log

lib/log.php broke after switch to PDO DB abstraction

Merge remote-tracking branch 'upstream/master'

Merge pull request #1414 from lonvia/remove-more-places-from-address

Remove more places from address ranking

adapt tests to new place address ranks

Remove county places and Regierungsbezirke vom German addresses

generally remove all country and state places from address

Gets rid of the hard-coded expection for place nodes and sets
the address rank generally via the address level config instead.
That means only administrative boundaries are now used at that
level in addresses.

Merge remote-tracking branch 'upstream/master'

Merge pull request #1412 from lonvia/rewrite-wordset-computation

Rework word set computation

Rework word set computation

Switch from an recursive algorithm for computing the word sets
to an iterative one that benefits from caching intermediate
results. This considerably reduces the amount of memory needed,
so that the depth restriction can be dropped. To ensure that
the number of word sets remains manageable, only sets up to
a certain length are accepted and only a certain number of
total word sets. If word sets need to be dropped, we drop
the ones with more words per word set first.

To further reduce the number of potential word sets, the valid
tokens are looked up first and then only word sets containing
valid tokens are computed.

Fixes #1403, #1404 and #654.

Merge remote-tracking branch 'upstream/master'

increase weight for country tokens

See if it solves issues with country codes vs. US state codes.

remove historic:neighbourhood from address ranks

Should not be reverse searchable.

Fixes #1379.

Merge remote-tracking branch 'upstream/master'

use real centroid when looking for near roads

The point-on-surface may be at the corner in large objects, so
that roads are too far away.

Fixes #1389.

update osm2pgsql (downgrading unnamed places)

Also adds tests for updating unnamed places.

update osm2pgsql (import special tags)

Merge pull request #1381 from mtmail/faq-entry-about-managed-database-services

FAQ entry about managed database services

Merge pull request #1394 from mtmail/update-postcodes-without-colon

exclude postcode ranges separated by colon from centre point calculation

Merge pull request #1388 from mtmail/register-shutdown-function

register shutdown function to handle out-of-memory errors

Ubuntu18-nginx install instructions - fix php-fpm socket path (#1398)

Ubuntu18-nginx install instructions - fix php-fpm socket path

exclude postcode ranges separated by colon from centre point calculation

Merge pull request #1387 from joto/master

Fix some minor issues in docs.

Revert layout changes in list.

register shutdown function to handle out-of-memory errors

Fix some minor issues in docs.

FAQ entry about managed database services

Merge pull request #1372 from lonvia/raise-postgres-version

increase minimum versions for PostgreSQL, Postgis and PHP

increase minimum versions for PostgreSQL, Postgis and PHP

Remove checks and hacks for older versions.

Merge remote-tracking branch 'upstream/master'

prepare for 3.3.0 release

add documentation for new reverse zoom 17

Convert importance to float value

Fixes #1369.

fix indent in docs

Merge branch 'markdown-syntax-fix-gb-postcodes' of https://github.com/mtmail/Nominatim into mtmail-markdown-syntax-fix-gb-postcodes

Readme for GB postcodes had markdown syntax error

Ignore no-fatal errors during dump file restore

The owner should never be restored, the table should be owned
by the caller instead. Non-existing indexes and similar only
started to throw a warning with Postgresql 9.4 and later, so
ignore them explicitly there.

Merge pull request #1321 from mtmail/interpolating-0-housenumbers

Support housenumber=0 in interpolations

Merge pull request #1359 from mtmail/fix-export-script

utils/export.php broke after switch to PDO DB abstraction

utils/export.php broke after switch to PDO DB abstraction

Merge pull request #1358 from mtmail/travis-php-7dot1

travis-CI: use PHP 7.1

travis-CI: use PHP 7.1

Merge remote-tracking branch 'upstream/master'

exclude all objects without address rank from reverse

This was forgotten when looking for a housenumber for
a street point.

Fixes #1319.

add reverse zoom level that includes minor streets

Zoom 17 now also resolves service roads and similar.

Fixes #1350.

Merge remote-tracking branch 'upstream/master'

isaddress field may be missing in details view

Merge branch 'observe-bounded-viewbox-in-postcode-search' of https://github.com/mtmail/Nominatim into mtmail-observe-bounded-viewbox-in-postcode-search

Merge pull request #1336 from mtmail/faq-entry-about-buffer-not-owned

New FAQ entry about -buffer is not owned by resource owner-

Merge pull request #1348 from mtmail/checkmodulepresence-to-raise-exception

checkModulePresence now raises exception instead of its callers

Merge pull request #1347 from mtmail/pdo-returns-proper-boolean

PDO library returns proper boolean. We dont need string comparison

Ensure that postcode relations are used in addresses

Postcode nodes are normally thrown away as they only play
a role for computing artifical postcodes. However, if we
have a postcode area this still should take part of the
address.

Fixes #1330.

checkModulePresence now raises exception instead of its callers

PDO library returns proper boolean. We dont need string comparison

Support housenumber=0 in interpolations