XAPI ist ein Rotz

Communities Deutschland (Germany)
1

DOWNLOAD DER OSM-DATEN VOM OSM-SERVER

Lade Presets . . .

Download einer neuen output.osm . . .

preset bbox=7.1889,49.4833,7.3697,49.573
[enter] zum Bestaetigen oder andere Koordinaten eingeben:
bbox=8.61,47.30,10.44,48,56

Benutze bbox=8.61,47.30,10.44,48,56

teste server 1 von 3
–2010-10-03 09:26:02-- http://xapi.openstreetmap.org/api/0.6/map?bbox=8.61,47.
30,10.44,48,56
Resolving xapi.openstreetmap.org… 128.40.168.97
Connecting to xapi.openstreetmap.org|128.40.168.97|:80… connected.
HTTP request sent, awaiting response… 200 OK
Length: unspecified [text/xml]
Saving to: `output.temp’

[                                <=>    ] 338,975,769 --.-K/s   in 6h 38m

2010-10-03 16:04:45 (13.8 KB/s) - Read error at byte 338975769 (Connection timed
out).Retrying.

–2010-10-03 16:04:45-- (try: 2) http://xapi.openstreetmap.org/api/0.6/map?bbo
x=8.61,47.30,10.44,48,56
Connecting to xapi.openstreetmap.org|128.40.168.97|:80… failed: Connection tim
ed out.
Resolving xapi.openstreetmap.org… failed: Unknown host.
wget: unable to resolve host address xapi.openstreetmap.org' teste server 2 von 3 --2010-10-03 16:04:57-- [http://osmxapi.hypercube.telascience.org/api/0.6/map?bb](http://osmxapi.hypercube.telascience.org/api/0.6/map?bb) ox=8.61,47.30,10.44,48,56 Resolving osmxapi.hypercube.telascience.org... failed: Unknown host. wget: unable to resolve host address osmxapi.hypercube.telascience.org’
teste server 3 von 3
–2010-10-03 16:04:57-- http://xapi.informationfreeway.org/api/0.6/map?bbox=8.6
1,47.30,10.44,48,56
Resolving xapi.informationfreeway.org… failed: Unknown host.
wget: unable to resolve host address `xapi.informationfreeway.org’

Download Fehler!
Drücken Sie eine beliebige Taste . . .

Schon zum zweiten mal…

2

Von welchem Programm hast du denn dieses Log?

3

Connecting to xapi.openstreetmap.org|128.40.168.97|:80… failed: Connection timed out.
Wenn Port 80 zu ist, bist vielleicht ausgesperrt worden. Ging zu dem Zeitpunkt wo Port 80 zu war der Ping noch? Hast Du ne Dynamische IP und könntest wechseln? Dann wüßtest, ob es nen Fehler ist, oder ob Du rausgeschmissen wurdest.

@!i!: Das ist wget

4

XAPI bricht den Download ab, wenn es merkt, dass jemand den halben planet saugen will. Üblicherweise bei 100-300MB. Danach bist Du offenbar gesperrt worden.

Wahr ist allerdings, dass XAPI häufig down ist und keine tolle Downloadrate hat. Du kannst große Downloads teilen und parallel saugen. Nachher müssen sie mit Osmosis zusammengesetzt werden.

5

@edwin… Du hast einen Fehler in der bbox…

müsste so sein:
bbox=8.61,47.30,10.44,48**.**56

6

Danke für Hinweis.

Ich probiere es mal nochmal mit korrekter bbox

7

Wie ich eben gesehen habe, reicht schon ein Vollbild für die Dosbox um ein Connection Time Out zu verursachen. Ich bleib dabei, diese XAPI und alles drum herum zum Downloaden ist ein riesen Scheiß.

Und alles nur, weil diese verdammte AllinOne OSM Map Europa nicht mehr funktioniert… und das seit Monaten.

8

XAPI müsste wirklich mal überarbeitet werden - was aber anscheinend nicht ganz so einfach ist…

9

@edwin… ich bin mir nicht sicher, ob ich die richtige AIO meine. Aber unter ftp://ftp5.gwdg.de/pub/misc/openstreetmap/download.openstreetmap.de/aio/gmapsupp/gps_ready/ kann man eine aktuelle AIO von Europa herunterladen.

10

benutze ich schon seit monaten nicht mehr. ne “kleine” db @ home ist doch was feines
walter

11

Bei Eurem Fork wird dann alles viel besser laufen…

Christian

12

richtig

13

Hallo,

Ich habe ein Programm mit Python geschrieben, das OSM-XML-Daten verarbeitet. Den Download habe ich mit wget über http://xapi.openstreetmap.org/api/0.6/map?bbox=… realisiert. Das ganze läuft in einer Schleife, in der der Download neu startet, falls er eine gewisse vordefinierte Größe vor einem evtl Abbruch noch nicht erreicht hat. Dies funktioniert aber nur falls ein vordefinierter Bereich ausgewählt wird. Wenn vom Benutzer ein neuer Bereich definiert wird, wird nur neu gestartet wenn der Download 0Byte groß ist oder eine Größe, die der User angibt, aufweist. Wie auch immer, bis vor kurzem brach der Download jedefalls etweder bei der Verbindung zur xapi ab und wurde abgefangen oder lief durch, wenn er mal gestartet war. Jetzt passiert es dauernd, dass ein paar Byte oder auch ein paar mehr runtergeladen werden und dann ein Lesefehler auftritt. So ist es schwer das ganze abzufangen, wenn man die gesamtgröße der Datei nicht kennt. Was wget bei mir nicht anzeigt.
Weiß jemand, wie ich die gesamtgröße des xml-files zwischen der definition der bbox und dem Download ermitteln kann?

Insgesamt wird die Verbindung zur xapi immer schlechter. Dauernd wird nicht runtergeladen sondern gewartet bis die Geschwindigkeit für eine Sekunde mal wieder da ist und prompt wieder verschwindet. Am Montag war der letzte Download komplett. Momentan geht so gut wie gar nichts. Ist da eine Verbesserung in Sicht?

Gibt es alternativen für den Download der xml-datei? Die Definition einer bbox muß möglich sein. Es sollen alle Daten innerhalb dieser bbox heruntergeladen werden. Die Funktionalität nur bestimmte elemente innerhalb der bbox herunterzuladen, die bei der xapi gegeben ist, benötige ich nicht zwingend.

Was ist Fork?

Gruß Tilo

14

Fork ist der neue OSM X2API Server mit 100GB Glasfaser Backboneanbindung und 64 Intel Xeon Servercluster mit jeweils 128GB RAM und 4000TB Festplatenraid.

15

@Tilo dieses belasten der API in einer Schleife ist keine gute Sache.
Lade dir bitte Extrakte aus dem Planet Dump und arbeite mit denen lokal (z.B. von der Geofabrik)
http://wiki.openstreetmap.org/wiki/Planet.osm

16

Ich habe zusätzlich auch den Download von planetextracts von der Geofabrik bei der Auswahl von größeren Bereichen schon integriert. Für die Auswahl kleinerer Bereiche wäre dies aber nicht sinnvoll, da die Folgeprozesse sonst erst am Folgetag fertig wären. Zur Entwarnung denke ich aber nicht, dass die Möglichkeit der Nutzung der xapi oft wahrgenommen werden wird. Und falls wäre dies auch höchstens ein kleiner Download pro Programmdurchlauf. Um die Belastung der api zu reduzieren, werde ich aber noch einige Anpassungen vornehmen.

Funktioniert der Fork ähnlich der xapi? wie sieht es mit Zugriffsrechten für Privatpersonen und mit veränderten Datenrechten aus? Könnte ich ihn für den Download anstelle der Xapi verwenden?

17

Das Rechenzentrum ist in Sagoya Japan untergebracht gewesen… nun ist alles hin

18

Manchmal kann ich ja über Edwins Witze wirklich schmunzeln, aber der hier ist unterste Schublade. :frowning:

19

Ich konnte über seine “Scherze” noch nie schmunzeln ; aber hier kommt mir die Galle hoch.

edit: etwas in der Wortwahl entschärft.

20

Ja, es ist ein Wunder wenn die XAPI bei mir in den letzten 2 Wochen überhaupt mal ging, als ich sie gebraucht habe. Das waren Ausnahmen die mabn an einer Hand aufzählen kann, wo sie mal ging. Ich benutze jetzt die experimentelle JXAPI wenn ich kann, weis zwar gerade nicht wie frisch deren Daten sind (Aktualität war bisher aber noch OK), aber der lebt der Server wenigstens noch, wenn man nicht gerade ganz spezielle Abfragewünsche hat, die da noch nicht implementiert sind.