Schwarzplan Häuser für ganz Deutschland ?

SunCobalt · 2011-05-22T22:02:01.000Z

kellerma:

Hi Thomas,

wie klein muss denn Deine Datei werden?

Evtl. könntest Du noch ein
$ pbftoosm --drop-brokenrefs --drop-history -i=building.pbf > building.osm
hinterherschicken, wenn osmosis die Ausgabe statt “.osm” wieder in “.pbf” leitet.

Ciao,
Frank

Danke Frank. Ich frage mich, was das drop-history bedeutet. Ich arbeite ja nicht mit einem full history planet. Aber egal wie, weniger Daten würden das schon beschleunigen. Jeder Schritt dauert 5-10 Minuten, das initiale Laden dauerte mehr als 3 Stunden (mit (8GB RAM und einem i3 Prozessor).
Auch die ganzen anderen Daten, die so an buildings dran sind (building=entrance, Adressdaten, amenity etc) blähen das auf.
Ich habe jetzt zumindest ein erstes Bild…ich bin jetzt zu müde um das weiter zu verfolgen. Morgen gehts weiter. Mich wundert es auch, warum da an der Grenze zu Holland eine dicke Linie ist…Wie gesagt, morgen gehts weiter.
Aber ich muss zugeben, dass es alles andere als einfach ist und viele der Tipps (inkl. meinen) in diesem Thread nicht dazu geeignet sind das Problem zu lösen. Ich habe alles probiert, bis hin zum Laden des Gebofabrik DE Extraktes in eine PostGIS Datenbank. Ging alles nicht

kellerma · 2011-05-22T22:11:10.000Z

Hallo Thomas,

Du hast noch auf die erste Version geantwortet, hab kurz davor mein posting nochmals überarbeitet:
building=entrance, Adressdaten, amenity etc. wirst Du alles mit “–tag-transform” bei osmosis los.

Mit “history” beim pbftoosm ist was anderes gemeint, ich zeigs Dir an einem kleinen Beispiel:

$ diff heb_db_dh_i.osm heb_db_i.osm | head -8
4,6c4,6
<
<
<

  <node id="29075515" lat="49.5093394" lon="11.4151048" version="10" changeset="7287047" user="TheFish" uid="121036" timestamp="2011-02-14T16:23:00Z"/>
  <node id="29075516" lat="49.5092725" lon="11.4174683" version="12" changeset="7287047" user="TheFish" uid="121036" timestamp="2011-02-14T16:23:00Z"/>
  <node id="29075517" lat="49.5103735" lon="11.4256216" version="11" changeset="6962901" user="Kondukteur" uid="365748" timestamp="2011-01-13T23:16:56Z">

Sollte jetzt klarer sein.

Ciao,
Frank

kellerma · 2011-05-22T23:08:56.000Z

SunCobalt:

Mich wundert es auch, warum da an der Grenze zu Holland eine dicke Linie ist…

Tippe auf Gebäudeimport Object Vision BV für die Niederlande (3dShapes) resp. dessen “Überhang” in die BRD hinein.

Ciao,
Frank

SunCobalt · 2011-05-23T07:25:29.000Z

kellerma:

SunCobalt:

Mich wundert es auch, warum da an der Grenze zu Holland eine dicke Linie ist…

Tippe auf Gebäudeimport Object Vision BV für die Niederlande (3dShapes) resp. dessen “Überhang” in die BRD hinein.

Das denke ich auch. Und das Geofabrik-Extrakt reicht auch ein wenig nach NL. Danke für Deine Tipps wie man die Datenmenge reduzieren kann. Was mit Gebäuden geht, sollte ja auch mit Straßen gehen. Das werde ich auch gleich mal machen solange ich noch weiß, wie es geht.

@felitsche
Sieht gut aus. Hier mal Berlin in zwei verschiedenen Vergrößerungen. Es sind übrigends über 3,5 Mio Gebäude ingesamt. Jetzt muss ich das nur noch exportieren. Ich kanns mal mit svg vesuchen. Achja, willst Du Grenzen mit drin haben, DE, Bundesländer etc? Falls ja, müsstest Du mir nur sagen, wie die aussehen sollen.
Nur so aus Interesse. Was kostet so ein Schwarzplan?

felitsche · 2011-05-25T08:33:39.000Z

wow, also suncobalt und kellerma haben hier mal mein absolutes danke verdient ! wahnsinn was ihr euch für mich für ne arbeit macht, grandios !

@suncobalt, also svg wäre super, es langen die gebäude vollkommen, keinerlei grenzlinien.

also für die tks 25.000 von ganz deutschland, sind unendlich viele die man dann noch zusammen setzen müsste, wollen sie anscheinend so 180.000 euro
deshalb ja auch meine zweifel am anfang, dass mir hier überhaupt jemand helfen könnte!

also falls das hinhaut, merci hoch zehn ! und wirklich vielen dank für eure arbeit, ich habs selbst auch schon versucht, aber wenn man mit solchen programmen sonst nicht so wirklich viel zu tun hat, is des alles nich ganz so einfach.

TheFive · 2011-05-25T08:53:21.000Z

Hallo felitsche,

nicht vergessen, OSM hat das ZIEL möglichst vollständig zu sein.
Weisse Flächen heissen evtl. einfach nur Nicht gemappt, und nicht nicht bebaut.
Bei einer Stichprobe in z.B. Düsseldorf wird das natürlich nicht auffallen. Aber schon mein Mapping Ort Haan ist
in OSM deutlich schlechter bebaut und liegt nur 20km von DDorf entfernt.

Also bitte nicht zum Planen von CO Leitungen (in NRW gerade ein Thema) einsetzen

Christoph

SunCobalt · 2011-05-25T08:56:42.000Z

felitsche:

@suncobalt, also svg wäre super, es langen die gebäude vollkommen, keinerlei grenzlinien.

Gerne. Momentan hab ich es erst als ESRI Shapefile. Quantum GIS stürzt beim Umwandeln immer ab. Ich habe jetzt jemand mit ArcGIS gebeten, dass in svg und als A0 Raster pdf umzuwandeln. Falls Du mit Shapefiles was anfangen kannst, lade es Dir runter.
http://schwarzplan.osm4people.org/
Ansonsten bitte noch einen oder zwei Tage warten…ich gebe dann Bescheid.

felitsche · 2011-05-25T09:03:54.000Z

TheFive:

Also bitte nicht zum Planen von CO Leitungen (in NRW gerade ein Thema) einsetzen

Christoph

keine angst

SunCobalt:

felitsche:

@suncobalt, also svg wäre super, es langen die gebäude vollkommen, keinerlei grenzlinien.

Gerne. Momentan hab ich es erst als ESRI Shapefile. Quantum GIS stürzt beim Umwandeln immer ab. Ich habe jetzt jemand mit ArcGIS gebeten, dass in svg und als A0 Raster pdf umzuwandeln. Falls Du mit Shapefiles was anfangen kannst, lade es Dir runter.
http://schwarzplan.osm4people.org/
Ansonsten bitte noch einen oder zwei Tage warten…ich gebe dann Bescheid.

der gis profi von uns is mein kommilitone, der is gerade nich da, aber ich lads mal runter. falls es nich zuviele umstände macht gerne auch noch als svg.
echt baff von soviel hilfsbereitschaft !

SunCobalt · 2011-05-25T12:04:30.000Z

felitsche:

der gis profi von uns is mein kommilitone, der is gerade nich da, aber ich lads mal runter. falls es nich zuviele umstände macht gerne auch noch als svg.
echt baff von soviel hilfsbereitschaft !

svg ist auch online. Ich konnte es aber nicht überprüfen, da die Datei recht groß ist.

Hast Du einen Link zu den tk25.000? Nur falls ich mal 180.000 Euro übrig hab und mir die kaufen will

felitsche · 2011-05-25T12:47:44.000Z

SunCobalt:

felitsche:

der gis profi von uns is mein kommilitone, der is gerade nich da, aber ich lads mal runter. falls es nich zuviele umstände macht gerne auch noch als svg.
echt baff von soviel hilfsbereitschaft !

svg ist auch online. Ich konnte es aber nicht überprüfen, da die Datei recht groß ist.

Hast Du einen Link zu den tk25.000? Nur falls ich mal 180.000 Euro übrig hab und mir die kaufen will

https://upd.geodatenzentrum.de/geodaten/Gdz_Home1.gdz_home_start5?gdz_home_spr=deu&gdz_home_para0=gdzintranet&gdz_home_para1=ONLINE-Bestellung&gdz_home_para2=0&gdz_home_menu_nr=4&gdz_home_menu_nr2=2&gdz_home_para3=https://upd.geodatenzentrum.de/auftrupd/shopupdate1.shop_bear_start?shop_mark=0!shop_para6=1!shop_sprache=deu!gdz_session_id=0

war beim bundesamt für kartographie und geodäsie, ham da dann angerufen, und des war dann so die grob überschlagene summe.

grandios mit der svg, aber ich kann sie mit illustrator leider nich öffnen, mal schaun ob ichs mit was anderm hinbekomme. (“Die Illustration kann nicht geöffnet werden.” anscheinend ein fehler der sehr merkwürdig is und bei den unterschiedlichsten fällen auftritt.mache sagen die datei wäre dann kaputt. hast du die möglichkeit des ding evtl in nem andern vektorformat noch zu speichern ?)

vielen dank auf jeden fall nochmal !

SunCobalt · 2011-05-25T13:30:54.000Z

felitsche:

grandios mit der svg, aber ich kann sie mit illustrator leider nich öffnen, mal schaun ob ichs mit was anderm hinbekomme. (“Die Illustration kann nicht geöffnet werden.” anscheinend ein fehler der sehr merkwürdig is und bei den unterschiedlichsten fällen auftritt.mache sagen die datei wäre dann kaputt. hast du die möglichkeit des ding evtl in nem andern vektorformat noch zu speichern ?)

Vielleicht ist die Datenmenge einfach zu groß für AI. Firefox und Irfan fangen an die svg zu laden. Aber nach 10 Min hatte ich keine Lust mehr zu warten. Aber ein Fehler kommt nicht.
An was für ein Format denkst Du dabei?

felitsche · 2011-05-25T13:51:42.000Z

SunCobalt:

felitsche:

grandios mit der svg, aber ich kann sie mit illustrator leider nich öffnen, mal schaun ob ichs mit was anderm hinbekomme. (“Die Illustration kann nicht geöffnet werden.” anscheinend ein fehler der sehr merkwürdig is und bei den unterschiedlichsten fällen auftritt.mache sagen die datei wäre dann kaputt. hast du die möglichkeit des ding evtl in nem andern vektorformat noch zu speichern ?)

Vielleicht ist die Datenmenge einfach zu groß für AI. Firefox und Irfan fangen an die svg zu laden. Aber nach 10 Min hatte ich keine Lust mehr zu warten. Aber ein Fehler kommt nicht.
An was für ein Format denkst Du dabei?

kann schon auch an der datenmenge liegen, wusste nich dass mans auch mit firefox anschaun kann, nur bräuchte ich die datei halt zum weiterarbeiten in gis oder illustrator oder nem cad programm. aber da könnte die größe wohl ein problem werden. dachte mit anderem format nur falls die datei kaputt wäre, aber ist sie ja offensichtlich nicht, wenn sie in firefox lädt.

vielleicht könnte man die karte stückeln und dann einzeln die teile bearbeiten/reinladen, aber des is wohl viel aufwand. falls jemand ideen hätte zur lösung, ich wäre sehr dankbar.

SunCobalt · 2011-05-25T13:57:49.000Z

felitsche:

, nur bräuchte ich die datei halt zum weiterarbeiten in gis oder illustrator oder nem cad programm.

was meinst Du mit GIS? sowas? http://www.qgis.org/ QGIS lädt das Shapefile ohne Probleme.

felitsche · 2011-05-25T14:52:59.000Z

SunCobalt:

felitsche:

, nur bräuchte ich die datei halt zum weiterarbeiten in gis oder illustrator oder nem cad programm.

was meinst Du mit GIS? sowas? http://www.qgis.org/ QGIS lädt das Shapefile ohne Probleme.

oke, super, dann probier ich des aus sobald mein kommilitone samt gis-rechner und vorallem -kenntnissen wieder da ist.

falls das nicht hinhaut melde ich mich noch einmal !

zum 1000x danke !

felitsche

_i · 2011-05-25T14:58:27.000Z

Schade dass ich mit meinen kleinen OSM Wiki Awards noch nicht fertig bin, sonst könnte man Suncobald den “Goldenen Node am Band” 3. Grades verleihen Echt super Sache, danke dir!

SunCobalt · 2011-05-25T15:33:14.000Z

felitsche:

SunCobalt:

felitsche:

, nur bräuchte ich die datei halt zum weiterarbeiten in gis oder illustrator oder nem cad programm.

was meinst Du mit GIS? sowas? http://www.qgis.org/ QGIS lädt das Shapefile ohne Probleme.

oke, super, dann probier ich des aus sobald mein kommilitone samt gis-rechner und vorallem -kenntnissen wieder da ist.

falls das nicht hinhaut melde ich mich noch einmal !

zum 1000x danke !

felitsche

Okay, gern geschehen. Ich habe es übrigends hinbekommen, die Daten in AI’s *.eps zu konvertieren. Aber das sind 1,8GB. Da ist es einfacher, Du installierst Dir die Trail Version von FME und konvertierst selber.
http://www.safe.com/fme/trial-downloads/
Einfach Shapefile öffnen und dann fragt er Dich schon, welches Ausgabeformat Du haben willst

kuehlschrank85 · 2011-05-25T18:46:11.000Z

Evtl. könnte man ja die Umwandlung der svg auh mit Inkscape über ne Batch machen? Dann müsste man die Datei nicht erst öffnen, vielleicht ist die große Datenmenge auf dem Weg nicht so schwer zu händeln…

Fabi2 · 2011-05-25T18:58:04.000Z

kuehlschrank85:

Evtl. könnte man ja die Umwandlung der svg auh mit Inkscape über ne Batch machen? Dann müsste man die Datei nicht erst öffnen, vielleicht ist die große Datenmenge auf dem Weg nicht so schwer zu händeln…

Ich hab es spaßeshalber mal mit inkscape (meine 8 GB waren sofort belegt und war fleißig am swappen, bei 10,5 GB hab ich es dann abgebrochen) und uniconverter (ähnlich wie inkscape noch noch langsamer) versucht zu öffnen bzw. nach ai/PDF zu konvertieren. Aus qgis zu exportieren ist also eher sinnvoll.

kellerma · 2011-05-25T19:13:07.000Z

Hi,

Fabi2:

Ich hab es spaßeshalber mal mit inkscape (meine 8 GB waren sofort belegt und war fleißig am swappen, bei 10,5 GB hab ich es dann abgebrochen) und uniconverter (ähnlich wie inkscape noch noch langsamer) versucht zu öffnen bzw. nach ai/PDF zu konvertieren. Aus qgis zu exportieren ist also eher sinnvoll.

ich sagte noch zu meinem kleinen netboot:
Tu’s nicht!

GRASS 6.4.0+42329 (worldlocation):~/tmp > v.in.ogr dsn=buildings_de.shp output=blub
Die Projektionsinformationen des Eingabedatensatzes und der aktuellen
Location scheinen übereinzustimmen.
Layer: buildings_de
Importiere 3548259 Objekte der Karte…

So nahm das Schicksal seinen Lauf:

Erstelle Topologie für die Vektorkarte …
Registriere Primitive…
3548229 Primitive registriert
22659269 Vertices registriert
Erzeuge Flächen…
Getötet

Böser, böser OOM-Killer!

Ciao,
Frank

Fabi2 · 2011-05-25T20:14:31.000Z

kellerma:

Erstelle Topologie für die Vektorkarte …
Registriere Primitive…
3548229 Primitive registriert
22659269 Vertices registriert
Erzeuge Flächen…
Getötet

Böser, böser OOM-Killer!

Da bin ich ja beruhigt, das es mit manchen gis-Tools auch nicht ging. grass hab ich zwar auch installiert, aber das will erst mal konfiguriert und halbwegs verstanden werden (nachden ich dann das offebar passende binary gefunden hatte, hatte r nen Syntaxerror offerbar wegen der fehlenden Konfiguration). Leider kenne ich mit mit den GIS-Tools zu wenig aus, sonst könnte ich noch ein paar durchprobieren, weil in qgis würde das Shapefile zumindest erfolgreich geöffnet und er hat auch nur ca. 700 MB RAM gebraucht, auch wenn die Anzeige dafür dann etwas länger gedauert hat.