Merge remote-tracking branch 'upstream/master'

Remove postcodes also from word table when they no longer exist

Also adds tests for postcode updates.

Fixes #1273.

Do not log file sizes in the index step on updates

Fixes #1274.

Merge remote-tracking branch 'upstream/master'

correctly discard partially matching duplicates

The same result may be found with different result ranks
in the same search loop when housenumber or postcode are
part of the name or address. In this case we need to keep
the result with the lower result rank.

Fixes #1264.

Merge pull request #1263 from mtmail/add-new-postcodes-to-searchnames

when updating GB postcodes, also run SQL getorcreate_postcode_id

documentation: when updating GB postcodes, also run SQL getorcreate_postcode_id [SKIP CI]

Merge remote-tracking branch 'upstream/master'

traverse address list backwards when computing admin levels

By starting with the lowest address level, when collecting
administrative boundaries by level, there is a better chance
to actually get the boundary when the capital of the
administrative boundary is tagged with the level of the
boundary as well.

This is just a heuristics adaption to make the best out of
the imprecise admin_level definition for place nodes.

Fixes #1261.

Merge remote-tracking branch 'upstream/master'

Don't escape slashes in json output

Fixes #1256.

Merge pull request #1252 from mtmail/update-and-document-gb-postcode-data2

GB postcode: new conversion script, documentation

Merge pull request #1255 from mtmail/faq-about-permanent-ids

new FAQ entry about place_id values

Merge pull request #1258 from lonvia/cleanup-utils

Restructure script and website installation

Explain place_id, i.e. shouldn't be use as permanent id

GB postcode: new conversion script, documentation

No longer install phrase configuration

Instead add it as a configurable path with the one from
the source directory as the default.

Also reinstates that settings/defaults.php is installed as
settings/settings.php.

Remove server_compare from list of installed scripts

This is a stand alone script and does not depend on
the configured environment.

Remove settings/settings.php

This was only a stub to warn when something was
executed directly from utils/ in the source directory.
This is no longer possible.

Restructure script and website installation

Just make cmake install a small stub that includes
the settings from the build directory and then the
script from the source directory. Remove executable
rights from php files in utils/ so that they cannot
be accidentally executed.

remove blocks script

Belongs to the rate-limiting code that has been
removed a long time ago.

Migration hint for address levels

Merge remote-tracking branch 'upstream/master'

fixup typos and linking of data-source docs

Can't create symbolic links to a directory and then
to files within.

Merge branch 'document-osm-country-grid' of https://github.com/mtmail/Nominatim

Merge pull request #1245 from lonvia/address-levels-from-json

Make rank assignments configurable

document what country_osm_grid does

fix tests

Merge pull request #1251 from mtmail/remove-naturalearth-boundary-fallback

remove Natural Earth dataset

Merge pull request #1253 from RhinoDevel/patch-1

Fix typo.

Fix typo.

use consistent naming in doc pages

Merge remote-tracking branch 'upstream/master'

Move address level config into settings/

Merge pull request #1250 from mtmail/correct-builddir-variable-in-test-readme

test/README.txt: BUILDDIR should be BUILD_DIR [SKIP CI]

test/README.txt: BUILDDIR should be BUILD_DIR [SKIP CI]

remove Natural Earth dataset

Merge pull request #1247 from mtmail/exit-with-error-code

settings.php: when printing error, also exit with error code

settings.php: when printing error, also exit with error code

remove PHP parameter typing

Older PHPs don't seem to like it.

travis: make sure to start with fresh template for DB tests

Add function to update address levels

Add documentation for new ranking level configuration

Make rank assignments configurable

The initial search and address rank is saved in a table
that is set up from a json configuration file. Ranks may
be assigned on a country level according to class and
type of the object. Special handling that depends on the
geometry or OSM type is still hard-coded in placex insert.

The new default config file mimicks the current assignment
as close as possible. A couple of exceptions have been
removed, most notably the exception for Irish townlands.

Merge pull request #1237 from ckquentvp/fix-accept-language-underscore-parsing

match languages such as ja_rm (or any other with underscore) properly

test languages with underscores (e.g. ja_rm)

fix variable name in setup --drop

add Makefile for tests

Merge pull request #1242 from lonvia/import-for-reverse-only

Add a reverse-only mode

add documentation for reverse-only

Add reverse-only parameter to setup

Avoids creating the search_name table. Useful when only /reverse
is used or the content is directly exported to photon.

Fixes #939.

setup: add convenience function for executing SQL commands

Merge pull request #1238 from lonvia/simplify-version-check

Simplify parsing of postgres and postgis versions

fix phpcs offences

simplify connection handling in setup script

- factor out runWithEnv
- require explicit connect() call to avoid rechecking for oDB
  (more for readability than for speed)
- clean DSNInfo of empty strings and simplify check for entries

fix variable prefix

Merge remote-tracking branch 'upstream/master'

Simplify parsing of postgres and postgis versions

Switch to functions server_version_num and postgis_lib_version
which both only return the version string, so that no elaborate
string parsing is necessary anymore. The version string could
become especially cumbersome in pre-release versions.

Always ignore continents for addresses

Fixes #1236.

Remove country and state nodes from address computation

OSM has by now almost complete coverage of admin
boundaries up to state level. Place nodes will do more
harm than good in this case.

match languages such as ja_rm (or any other with underscore) properly

update osm2pgsql (restrict operator)

Fixes #1176.

Document the mmap requirement for flatnode files

Fixes #877.

Merge remote-tracking branch 'upstream/master'

Keep matches without house number

Now that we have result ranking, we can keep the street results
for housenumber searches and reuse them in the next group round
if required. Also fixes an issue where postcode and housenumber
are in the query and one of them is wrong.

Fixes #1200.

Merge remote-tracking branch 'upstream/master'

Add result ranking for missing housenumber and postcode

Fixes #988.

Merge pull request #1233 from mtmail/better-gbpostcode-setup-warning

Improved warning message when looking for optional GB postcode file

docs: more specific chapter title

2018 TIGER data conversion scripts, add documentation to /docs/data-sources

Merge pull request #1188 from mtmail/prototype-setup-ubuntu18-nginx

copy of the Ubuntu18 vagrant setup but with nginx as webserver

make HTML error message less technical

Merge branch 'set-exception-handler-by-request-format' of https://github.com/mtmail/Nominatim into mtmail-set-exception-handler-by-request-format

Improved warning message when looking for optional GB postcode file

copy of the Ubuntu18 vagrant setup but with nginx as webserver

Merge remote-tracking branch 'upstream/master'

increase limit when searching for street w/ house number

Increase the chance that the correct street is found.

set exception handler by request format, not always HTML

fix permissions for CMakeLists.txt

simplify constructor of SetupFunctions

Also cleans up spacing.

Merge branch 'updatePHP' of https://github.com/ThomasBarris/Nominatim into ThomasBarris-updatePHP

Merge branch '201809-test-db' of https://github.com/mtmail/Nominatim into mtmail-201809-test-db

Merge pull request #1193 from mtmail/postgresql-10-postgis-scripts

also install postgis.control for postgresql-10

adjust BDD api test cases to 2018 test database

also install postgis.control for postgresql-10

docs: rewrite functions when migrating

Fixes #1183.

Merge pull request #1189 from mtmail/classtypes-unit-tests

PHP unit tests for Nominatim\ClassTypes

Merge pull request #1187 from mtmail/faq-about-pear-db-warning

Installation FAQ entry about a PHP warning that started with PHP7.2

Merge pull request #1186 from mtmail/getAddressDetails-fix

fix AddressDetails->getAddressDetails, add tests

PHP unit tests for Nominatim\ClassTypes

Installation FAQ entry about a PHP warning that started with PHP7.2 [SKIP CI]

fix AddressDetails->getAddressDetails, add tests

Merge pull request #1185 from mtmail/three-faq-entries

three further FAQ entries regarding timezone, continents, exports

three further FAQ entries regarding timezone, continents, exports

Merge remote-tracking branch 'upstream/master'

address tokens get a double search rank also as full terms

Fixes #1170.

Merge branch 'updatePHP' of https://github.com/ThomasBarris/Nominatim into updatePHP

change variables for class SetupClass.php instantiation

typo

move setupclass, move command line array, remove args from update array