Add polygon simplification

New query string parameter polygon_threshold=<0.0..1> is introduced.
The float value of this parameter (defaults to 0) is passed to
ST_SimplifyPreserveTopology() on geometry we're about to output in
one (or many) requested formats such as GeoJSON, KML, etc.

This is useful when getting border polygons for whole countries, but
rendering them at large scale, when most of the high resolution details
cannot be seen anyway.  For example, the unsimplified polygon data for
Germany in GeoJSON format currently makes for about 3 MB response body.
With use of this new parameter, the application can greatly reduce the
amount of downloaded data and server response time while providing its
users with the same picture.  On a typical laptop screen resolution,
zooming out to fit the whole country borders on screen, only 1/100 amount
of details could be well enough.

prepare next release

ignore places without housenumber in interpolations

fixes trac ticket 5311

Various places where conversion from  to ->aStructuredQuery had been missed

fix boundary test

clean out dead sql code

make sure place exists before printing hierarchy

correctly handle comma-only exclude_place_ids

fix utf8 in tests for jsonp

correctly quote regular expression

use unescaped unicode in json where supported by PHP

avoid calling add_location for non-addressing features

only address features can be linked with placex

more strict parameter checking for reverse

update osm2pgsql (coastline typo)

state setup: get latest node from place, planet_osm_nodes may be empty

interpolations: snap lines to points, not vice versa

Avoids the occasional rounding problem which might occur when splitting
a line anywhere but on a support point, see postgis doc for ST_Split.

Fixes #253

simplify bounding box computation

Makes highlighting of points reappear.

update osm2pgsql (get rid of way-node index)

replace final reference to way-node index with spatial lookup

reorder parenting search for POI level

Push back the more expensive node-on-way parenting which is rather
rare anyways. Prefer assodicatedStreet relations and addr:* tags
instead.

add more tests for interpolations (mostly updating)

switch interpolation node to using the interpolation osm id

fix typos and make interpolation tests run

write interpolated house numbers complete out and avoid reindexing

computation of parent of interpolations

switch remaining GRANTs to configurable web user

fixes #252

Merge pull request #250 from mtmail/patch-1

Update README.md

Update README.md

Added missing `shapely` library and instructions how to install `pip` on Ubuntu

enable NameOnlySearch per default

add script for recomputing word frequencies

update scene builder to compile with latest libosmium

also drop interpolation index

add makefile for test scene extractor

drop unnecessary index

check database results before using variable

drop special handling of short exact terms in address

There is a double check against exact terms, so that results with
a matching exact short term will float to the top.

update osm2pgsql (bug in relation update)

reduce search area for secondary adresses when areas are involved

remove address lines with fully duplicated keywords

Mainly there to avoid having many duplicated postcode entries
in place_addressline from nodes which have tags where only
addr:postcode is recognized by Nominatim (e.g. fire hydrants).

disable housenumber-specific search when no address details are provided

add test for house number search

order search results by existance of housenumbers

When searching for an address with housenumber, include the house
number lookup already when searching in search_name so that we do
not cut away relevant results in cases where there are too many
street pieces.

actually write back the reversed final phrase when reversing the query

slightly relax API tests

correctly quote display name in html search result

junctions should not appear as roads in addresses

fixes #228

use _st_intersects when dealing with countries, it does not use index

show class instead of yes in html search output

remove hack for fixing adminitrative typo

details view: use class name if type is yes

fixes #209

don't use tokens from country parameter in address field of searches

fixes #218

need phrase types in getGroupedSearches

Merge remote-tracking branch 'lonvia/inverse-query-II'

switch to enhanced osm2pgsql C++ version

This includes a major rewrite of the tag processing code. Much more
data is already rejected during osm2pgsql processing and names are
choosen more selectively depending on the class/type.

adapt API tests to latest data

fully evaluate reverse order of queries

Factors out computation of search group and calls the code once
for forward evaluation and wants with reversed word order.

tablespace definition belongs before the where clause

remove unused functions

finish osm2pgsql tag tests

more osm2pgsql tag tests

support tablespaces and www user config in tiger import

tests for name import in osm2pgsql

properly close connection in test

reuse template db for tests by default

be more restrictive with sql select when computing linked waterways

support tablespaces for special phrase table

add underscore back to derelict canal

fixes #212 (again)

remove duplicate derelict canal

fixes #212

add hint about osm2pgsql submodule

reorganise table creation

- remove unused tables
- make apache user configurable
- introduce configurable tablespaces

remove debug output

more tolerant regexp for parsing replication state directories

Apache 2.4 has changed the date format, so that the current regexp
doesn't match anymore, so be more tolerant with the date format.
Also force less fancy output formatting without tables.

fix address interpolation for self-intersecting ways

transliterate precomputed house numbers

only check for postgres major and minor version

fixes #192

use unique function name for test step

add regression test

for PlaceLookup if we look for nodes then the centroid does not exist in the placex table

fix typo in osm test file generator

PATH_INFO is delivered URL encoded on newer apache 2.4

adapt API tests to latest OSM data changes

remove all unidentified large areas from addresses

respect bounded in country searches

fixes trac 5238

remove most landuses from addresses

reintroduce index on gb_postcode

rewrite address interpolation so that planet_osm_node is not needed

This allows address interpolations to work correctly when flatnode storage
is used for node coordinates.

To fix interpolations in an existing database, follow these steps:

  * invalidate all interpolations (in psql):
    `UPDATE placex SET indexed_status=2 WHERE rank_search = 28`
  * disable updates:
    ./utils/setup.php --create-functions --create-partition-functions
  * reindex the whole lot:
    ./utils/update.php --index --index-instances <number of your cpus>
  * enable updates again:
    ./utils/setup.php --create-functions --enable-diff-updates --create-partition-functions

officially drop support for postgres 8.4

bump development version to 2.4

prepare next release

add finished message to setup.php

experimental tweaking of ranks of searches

- completely removes partial words with spaces from addresses
- ensure that frequent partial search terms appear in NonAddress
- higher penalty for partial words consisting of numbers

update osm2pgsql (protobuf lib)

fixes #175

move looksLikeLatLonPair into lib.php, basic PHP test suite using phpunit

fix adding of spaces in GB postcode

Based on https://github.com/twain47/Nominatim/pull/180 by arunkmp.

lower significance of postcodes in Singapure

Postcodes with 6 digits designate delivery points, i.e. houses.

update osm2pgsql (nameless landuses) and add tests for it

fix running of DB tests via Makefile

Selecting tags for tests to run does not work when the tags are
on the features instead of the scenarios.

remove special casing of houses and postcodes in place import

change default nominatim path for tests to obvious '..'