excluded place nodes outside parent boundaries from addresses

Changes slightly the logic which decides if a guessed places
(i.e. a place node) is included in an address: it will be
part of the address only if it is inside the next lower
available boundary. This fixes problematic cases where
neighbouring entities have additional admin levels.

put libraries in right place when linking

use json_encode in search stuff as well

remove JSON_UNESCAPED_UNICODE, supported only by php >=5.3.3 and
clients should be able to handle the escaping

more generalized javascript_renderData

- handles json/jsonp transparently (avoiding code duplication in templates)
- use php's internal json_encode functions (with JSON_UNESCAPED_UNICODE
  for backward compatibility)
- be more liberal with what is allowed as a callback identifier
- return a 400 for illegal callbacks
- return application/javascript type when jsonp is requested

fixes #16, fixes #17

more generalized javascript_renderData

- handles json/jsonp transparently (avoiding code duplication in templates)
- use php's internal json_encode functions (with JSON_UNESCAPED_UNICODE
  for backward compatibility)
- be more liberal with what is allowed as a callback identifier
- return a 400 for illegal callbacks
- return application/javascript type when jsonp is requested

fixes #16, fixes #17

make sure invalid geometries are always deleted from place

This solves a bug with updating large invalid geometries. These
geometries have an entry in place but not in placex. Thus, place_insert
tries to delete the place entry and reinsert it on update. Deletion would
fail because self-intersecting polygons still have an area and large
areas are not deleted.

be less verbose

ignore railways, tunnels and bridges when reverse geocoding

typo

ignore railways, tunnels and bridges when reverse geocoding

Merge branch 'configure' of github.com:lonvia/Nominatim

add README stuff

add git commit version if applicable

remove duplicate check for ZLIB

be more strict with us state replacement hack

replace il/al/la only if they are properly separated by a comma

be more strict with us state replacement hack

replace il/al/la only if they are properly separated by a comma

yet another autogenerated file removed

remove autogenerated files

create a globale configure/make

- move the configure from nominatim out and add checks for all dependencies
- bring module under automake control
- add osm2pgsql as a submodule, configure and build with the others

silently remove leading/trailing spaces

Black/whitelisting for special phrases

Allows to restrict the special phrases imported from the wiki.
Blacklist allows to exclude certain class/type combinations.
Whitelist allows to define an allowed subset of types for a class.
Adjust to your liking in settings/phrase_settings.php before running
the specialphrases script.

silently remove leading/trailing spaces

avoid PHP notices

remove distinct, causes nearest feature results to be badly reordered

Updated reverse geocoding to improve handling of zoom=0

Conflicts:

website/reverse.php

Updated reverse geocoding to improve handling of zoom=0

Merge branch 'master' of github.com:twain47/Nominatim

truncate road partition tables during load

more verbose error messages

rename ambiguous variables to make postgresql 8.4 happy

use Overpass API by default to download OSM objects

make index work and remove more hard-coded DB names

eliminate php warning, remove setting aPipes (isn't used)

make .osc files with osmosis

Merge branch 'master' of github.com:twain47/Nominatim

revert to plain text dump for 8.4 compatibility (+ permissions fix)

typo

can't have a unique index on placex - only on place

fix broken field name / committed debug

use the new country data files

deal with some indexing edge cases

Merge pull request #9 from andreek/master

Postgis 2.0 compatibility
Seems to be compatible with all recent versions of postgis

DB Scheme changes: alter table placex add column calculated_country_code varchar(2);

function changes:
-----------------
Move to ST_PointOnSurface from ST_Centroid in various places to avoid looking up a point outside the polygon
Move to ST_Covers from ST_Contains to include points on admin boundaries
Re-order preference for get_country_code now our data is better. country_osm_grid is now the preffered source.
Fix code to calculate country code in placex_insert, rank_search test was too early
Add extra field to placex 'calculated_country_code' to improve structure of code
Move split_geometery function out of add_location into its own function
Rewrite split_geometery to be more efficient.
Change place_insert to do more updates and less delete/inserts (delete is slow)
Include wikipedia links in details.php ouput
Cleanup no longer used geometry validation (adding overhead)
Include debug statements in function.sql (--DEBUG: ) and add flag to setup.php to turn them on

setup.php:
----------
add flag --disable-token-precalc to speed up debuging
add flag --index-noanalyse to disable analysising DB at rank 4 and 26 (previously removed, but on my local DB it seems to be required)
add flag --enable-diff-updates (modifier to --create-functions) to turn on the code required for diff updates without having to modify functions.sql
add flag --enable-debug-statements (modifier to --create-functions) to turn on debug warning statements

update.php:
-----------
added flag --no-index to import osmosis changes without indexing them
extend the hack to allow import of JOSM generated osm files

country_grid.sql - reference copy of the sql used to generate the country_osm_grid table, needs cleanup

Suport postgis 2.0 for search

Merge branch 'master' of github.com:twain47/Nominatim

move index over nameaddress_vector back to delayed index creation

No longer needed for linking places.

revert timezone setting

Does not work with poldi's php version.

be less verbose

remove intermediate ANALYSE while indexing

Autovacuum does a much better job.

make sure nominatim.so is accessible for postgresql

Even if the user has a very restrictive umask in place.

pre-create word list to avoid duplicates due to parallel indexing

automated banning of excessive bulk users

Can't filter on rank_search before it has been assigned

updated wikipedia article code to allow for mutliple languages and remove code duplication

modifiers to encourage use of indices

don't have an address property in the return if we have not got address data

catch utf8 encoding errors and at least stop them aborting processing

Merge branch 'master' of github.com:twain47/Nominatim

calculate importance from wikipedia

more name checks in point and poly mergeing, and put the index creation earlier in the process

add licence file

fix typos in mapicons

allow slashes in house numbers

timezone trouble

disable vacuuming of planet_osm_ways, too expensive

immediately exit on log rotation errors

fix typos in mapicons

make it run with 64bit and 32bit osm2pgsql

Needs tweaking on the osm2pgsql side, too: the osmid column
needs to have the same format as in osm2pgsql. That means
that the changes are still not compatible with existing installations.

change code to work with a 64-bit node size osm2pgsql

This breaks the 32-bit node size version.

Merge pull request #5 from mfn/improve_errmsg

Do not swallow PEAR error during setup in import-data.

depreciate place=region due to common miss-use

link nodes and relations using name->'name' index lookup instead of search_name

Do not swallow PEAR error.

set osm2pgsql cache memory to a default based on memory in the machine

Merge branch 'continent' of https://github.com/datendelphin/Nominatim

add support for Irish townlands

To work properly, osm2pgsql needs to be updated to the latest version.

only calculate country for search ranks country and below

allow slashes in house numbers

Collapse two log tables into one.

This requires to add a searchterm column to new_query_log.

proper silence

cron script for log rotation

Format of replicate-sequence URL has changed

Additionally update/init import_status in the DB. If this is not
initialized here, subsequent updates of the status won't work.

cron job for vacuuming intarray indices

ignore postcode boundaries without postcode

missing brackets in default name assignment

add switch for osm2pgsql cache size

also increased the default to 15GB to accaommodate growing planet

Merge branch 'mountain_pass' of https://github.com/datendelphin/Nominatim

force UTF-8 database

ranking for mountain_pass

Only link polygons on admin_centre is not already found a label AND if exactl search_rank match

search_name.name_vector index is now required during initial index due to code to merge relations and nodes

Update details.php to show linked places

Merge branch 'master' of github.com:twain47/Nominatim

Adds code to merge place polygon and points using:
  label relation member
  admin_center, admin_centre relation member (with same name)
  exact name, search_rank and location match

Adding this requires a new column and index:
  SELECT AddGeometryColumn('placex', 'centroid', 4326, 'GEOMETRY', 2);
  CREATE INDEX idx_placex_linked_place_id ON placex USING BTREE (linked_place_id);

postgresq 8.4 backward compatibility: count hash size with akeys instead of hash_to_array

don't use column names for variable names, 8.4 fails on them

Merge branch 'master' of github.com:twain47/Nominatim

Use GB postcode table as definitive source. resort by pressence of search word in output address and other misc very minor changes not commited from MQ servers

countries need language list as well

Black/whitelisting for special phrases

Allows to restrict the special phrases imported from the wiki.
Blacklist allows to exclude certain class/type combinations.
Whitelist allows to define an allowed subset of types for a class.
Adjust to your liking in settings/phrase_settings.php before running
the specialphrases script.