Meine Theorie ist eher, dass beim Aktualisieren der DB via osm2pgsql irgendetwas mit der planet_osm_polygon-Tabelle schiefgelaufen ist. Also eher kein Bedienfehler im Sinn, dass komplette minutely diffs einfach nicht verarbeitet wurden.
Vom Changeset 42234532 sind ja wie gesagt alle Bäume und Straßen drin, und auch das komplette Changeset liegt in einem einzigen Minutely diff. Wäre das komplette Diff-File übersprungen worden, würden wir auch die Bäume nicht sehen (die sind alle in v1, also erst in diesem Changeset erzeugt).
Wenn es vom osm2pgsql-Lauf noch Logfiles gibt, würde es sich anbieten etwas genauer hinzusehen. Vielleicht ist da irgendein Problem, was möglicherweise später nochmal auftreten kann.
Sven hat mir gesagt, dass er einfach ein paar Diffs nicht importiert hat, weil er den falschen Pfad angegeben hat.
Die Ursache ist schon bekannt und wir wissen auch, wo man das nächste Mal genauer aufpassen muss. Zudem wird man sogar ein paar Diffs mehr importieren als notwendig (das Erzeugen des Planetfiles dauert ja auch eine Weile, während derer neue Diffs veröffentlicht werden). Wenn man das erste Diff wissen möchte, das man auf die Datenbank anwenden muss, kann man mit dem osmium-tool mit
Ich bin nicht sicher, ob es relevant ist: (Evtl. die gleiche Sache wie mit den Bäumen, wie es mmd beschrieben hat.)
Wie schon im Eingangspost beschrieben, tauchen zwei der Nodes aus dem betroffenene CS in der Karte auf.
Dies sind neu hinzugefügte Nodes mit Addressinformationen zu denen noch kein building existiert.
Hier ist das Problem, dass nicht nur neue Sachen fehlen, was ja einfach zu fixen wäre, sondern uralte Landuses und Wege noch rumgeistern, die man nicht mehr zu fassen kriegt.
Irgendwann nach längerer Zeit hatte ich einfach einen nagelneuen testway großflächig drübergezeichnet, anschließend erschienen die eingefrorenen Uralt-Tiles KOMPLETT wieder richtig. Waldrand upgedated, alle Wege auf aktuellem Stand. Nach wenigen Minuten den Hilfsway wieder gelöscht, Tiles updated: alles wunderbar.
Das lässt mich an der Fehlenden-Diff Theorie etwas zweifeln.
Es kam aber noch viel kurioser: Paar Monate später zufällig gemerkt - die Uralt-Geister-Tiles sind wieder zurück! Nachdem sie bereits aktualisiert waren, also wieder zurückgesprungen, was ich nun absolut nicht kapiere.
Seitdem hat scai im Helpforum den “Geisterwald” und einen “Geisterpfad” gelöscht gekriegt, immerhin, aber der ganze Rest ist immer noch auf altem Stand. DAS würde nun wiederum zur Diff-Theorie passen! Bin sicher, der neue “kleinere” Wald und neuen Wege würden auftauchen, wenn man sie einfach nochmal hochlädt, aber ob diesmal auch die Geister wieder automatisch verschwinden würden? Mal tun sie’s, mal nicht - nur gut, dass ich das nicht kapieren muss
Ich habe nochmal etwas die Visualisierung in turbo mit MapCSS verfeinert, so dass man die fehlenden Häuser besser erkennen kann. Ein wahllos herausgegriffener Ausschnitt im südlichen Schwarzwald und Umgebung liefert für den Zeitraum 7.-21. September immerhin > 10.000 fehlende Häuser. Der problematische Zeitraum scheint übrigens auch länger zu sein, als in den vorangehenden Posts genannt.
Ich weiß nicht, wie die Zahl für ganz DE (oder sogar global) aussieht, aber im Worst Case könnte das schnell in den 6-stelligen Bereich laufen.
Vielleicht kann sich Sven vor diesem Hintergrund nochmal überlegen, ob er irgendwann nicht doch mal die Seite für eine Woche einfriert und nochmal neu lädt. Muss ja nicht dieses Jahr sein. Es wäre bestimmt gut investierte Zeit.
Es sind nicht nur CS um den 16.9.2016 betroffen, sondern auch, wie hier heute geschrieben, um den 9.9.2016.
Nach meinen Nachforschungen sind nicht nur Gebäude betroffen, sondern z.B. auch das Parkhaus aus dem Nachbar-Faden, das nicht als Gebäude, sondern nur als Parkplatz und parking=multi-storey eingetragen ist. Die neuen Wege zum Parkplatz wurden gerendert. Daher bin ich der Meinung, dass alle geschlossenen Ringe betroffen sind und habe Beispiele gefunden:
+1 Ich finde, die verlustigen Tiles, welchen Zeitabschnitt auch immer, beschädigen den Anerkennungswert der DE-Karte enorm. Durch diese Problematik stimme ich dem Beitrag von User mmd voll zu. Müßig wäre es dann allerdings, jedweiden Verlust nachzurechechieren und hier zu posten. Also vielleicht erstmal eine Antwort von Sven abwarten.
Es ist relativ einfach, die ganze Sache wieder in Ordnung zu bringen. Da ja wohl die fehlenden Diffs bekannt sind, kann man für den Import das state.txt auf einen Wert vor dem ersten fehlenden Diff zurücksetzen, wobei es auf eine Stunde früher auch nicht ankommt. Hauptsache vor dem ersten fehlenden Diff. Danach den normalen Updateprozess starten und osm2pgsql rollt die ganze Chausse auf. Kann “ein wenig” dauern aber der Betrieb geht ganz gewohnt weiter.
Kann ich verstehen. Aber irgendwann werden die Gebäude mal angefasst. Sie nur zum Zweck des Neu-Renders anzufassen wäre in der Tat nicht schön, aber irgendwann trägt einer Hausnummern nach, eliminiert Überlappungen etc. Und sobald dem Tilerenderer alle Daten wieder bekannt sind, wird der Kram auch dargestellt.
Fehlende Häuser sind nicht schlimm, aber von dem Fehler sind besonders die großen Flächen (Seen, Wälder, “Landuse”) betroffen, in deren Umriss immer wieder einzelne Punkte eingefügt werden.
Wenn große Wasserflächen wie das Noor bei Eckernförde oder die Oststrecke des Nordostseekanals fehlen, sieht die Karte stark verändert aus.
Vermutlich genügt es nicht, diese Objekte zu bearbeiten, sondern man muss alle in der Zeit erstellten Punkte anfassen.
Will man nicht das Gesamtobjekt mit evtl tausenden Punkten willkürlich verschieben, werden diese Flächen wohl bis zum nächsten Datenbankimport unsichtbar bleiben.
ich konnte die Datenbank von meinem anderen Tileserver umkopieren. Dadurch sollten die fehlenden Daten jetzt wieder da sein. Beim Windebyer Noor sieht das schon mal gut aus: http://tile.openstreetmap.de/#map=13/54.47/9.8132
Dort kannst Du nachsehen (rechte Maustaste - open tile info) wann eine Kachel das letzte mal gerendert wurde.
Wenn da was von 1994 steht, dann ist sie schon auf ein altes Datum gesetzt worden und zum neu Rendern vorgesehen.
Ich sehe jedenfalls keine unterschiedlichen Häuser, wenn ich zwischen OSMde und OSM Standard hin und her schalte. Zoomlevel 19 ist Stand 19.11. 16:48 noch nicht neu gerendert, aber das wird in spätestens 1-2 Stunden der Fall sein.
