Version 1.0 von Map Composer

_torsten · 2018-12-13T08:38:18.000Z

Alle Jahre wieder kurz vor Weihnachten … ?

Ich nutze immer noch die Version 1.0 des MC. Deswegen meine Fragen hier.

Ich habe einige Regionen definiert und lasse den Composer mit den entsprechenden Jobs mehr oder weniger regelmäßig durchlaufen. Das funktioniert auch alles ohne Probleme.

Nun habe ich gestern eine Region (Pfälzer_Wald 7.4 | 8.3 | 49.0 | 49.6) neu dazu genommen und einen entsprechenden Job erstellt. Beim Generieren wurde am Ende auch eine Karte erstellt und in meinem MapSource eingebunden. Auf den ersten Blick konnte ich keine Fehler entdecken. Allerdings gab´s im log und in der errorLog.txt folgenden Fehler

Log:

…
calling osmosis
osmosis done
Starting region Pfälzer_Wald
Newer input file detected
Saving table Outline
Saving table Route
Saving table IDManager
processed 3029871nodes, 533367 ways, 7068 relations
Finished region Pfälzer_Wald
java.io.FileNotFoundException: D:\MapComposer\Ver100\input\templates\symbol_head_de.html (Das System kann den angegebenen Pfad nicht finden)
java.io.FileNotFoundException: D:\MapComposer\Ver100\input\templates\symbol_head_en.html (Das System kann den angegebenen Pfad nicht finden)
java.io.FileNotFoundException: D:\MapComposer\Ver100\input\templates\symbol_head_it.html (Das System kann den angegebenen Pfad nicht finden)
Creating map
Saving table Settings
Saving table Route
Saving table Statistic
Saving table IDManager
Creating contour file Pfälzer_Wald_00074_0490_9_3_contour.pbf
Creating contour file Pfälzer_Wald_00074_0493_9_3_contour.pbf
Splitting region Pfälzer_Wald
processed 3036869nodes, 531154 ways, 0 relations
Sorting region Pfälzer_Wald
processed 1880877nodes, 239223 ways, 0 relations
processed 2201564nodes, 292467 ways, 0 relations
Generating style in D:\MapComposer\Ver100\data\mapstyle
Calling mkgmap to create map
Build the garmin maps
calling mkgmap
mkgmap done
Create typ definition file
Compile typ definition
Creating TYP file
calling mkgmap
mkgmap done
Generate Mapsource registry file
Installing values to registry
calling Registry install
Registry install done
Generating Garmin gmapsupp.img file Gesamt
Build the garmin maps
calling mkgmap
mkgmap done
Generation finished
Saving table Settings
Saving table MapItem
Saving table IDManager

errorLog.txt:

…
13.12.18 08:58 java.io.FileNotFoundException: D:\MapComposer\Ver100\input\templates\symbol_head_it.html (Das System kann den angegebenen Pfad nicht finden)
13.12.18 08:58 Exception generating symbol overview
java.io.FileNotFoundException: D:\MapComposer\Ver100\input\templates\symbol_head_it.html (Das System kann den angegebenen Pfad nicht finden)
at java.io.FileInputStream.open0(Native Method)
at java.io.FileInputStream.open(Unknown Source)
at java.io.FileInputStream.(Unknown Source)
at java.io.FileReader.(Unknown Source)
at nop.osmc.generator.RouteMapper.generateIconList(RouteMapper.java:944)
at nop.osmc.generator.RouteMapper.generateIconLists(RouteMapper.java:930)
at nop.osmc.generator.Mapper.generate(Mapper.java:242)
at nop.osmc.MapComposer$13.act(MapComposer.java:425)
at nop.gui.MenuThreadAction.run(MenuThreadAction.java:27)
at java.lang.Thread.run(Unknown Source)
…

Dieser Fehler taucht in der errorLog.txt dreimal auf.

Interessant ist, dass es das Unterverzeichnis …\Ver100\input\templates bei mir nicht gibt. Und mir ist dieses Unterverzeichnis bei meinen Sicherungen bisher auch nicht aufgefallen. Weiterhin interessant ist, dass ein Job einer vorhandenen Region, der eine halbe Stunde früher lief, diesen Fehler nicht hatte.

Was ist da bei mir falsch?

Ich hoffe, es kann mir jemand helfen,
Torsten.

_torsten · 2018-12-13T08:51:51.000Z

… und weil ich einmal dabei bin ein zweites Problem.
Ich habe eine weiter Region (Sauerland 7.2 | 9.2 | 50.8 | 51.7) und einen entsprechenden Job erzeugt. Beim Generieren bleibt der MapComposer einfach stehen und macht nichts mehr.

Der Log sieht so aus:

Log:

…
calling osmosis
osmosis done
Starting region Sauerland
Newer input file detected
Saving table Settings
Saving table Outline
Saving table Route
Saving table IDManager
processed 19382152nodes, 2968896 ways, 49878 relations
Finished region Sauerland
Creating map
Saving table Route
Saving table Statistic
Saving table IDManager
Creating contour file Sauerland_00072_0508_10_9_contour.pbf
Creating contour file Sauerland_00082_0508_10_9_contour.pbf
Splitting region Sauerland
processed 19404076nodes, 2923680 ways, 0 relations
Sorting region Sauerland

Die errorLog.txt ist leer. Es wird also kein Fehler mitgeschrieben.

Weiß jemand, was hier los ist bzw. nicht stimmt?

Danke Torsten.

wambacher · 2018-12-13T10:01:04.000Z

Bricht der Job ab oder zieht er noch CPU?

linux: top , htop
win: irgnd nen taskmanager
mac: ??

Gruss
walter

_torsten · 2018-12-13T10:14:02.000Z

wambacher:

Bricht der Job ab oder zieht er noch CPU?

linux: top , htop
win: irgnd nen taskmanager
mac: ??

Gruss
walter

Hallo Walter,
der Taskmanager zeigt eine recht schwache CPU-Auslastung an. Da passiert nichts besonderes. Der MC bleibt einfach stehen, wird aber im Taskmanager als Anwendung und Prozess aufgeführt.

Ein wiederholtes Generieren des Jobs bring keine Besserung. Der MC bleibt nach “Sorting region Sauerland” stehen und kann nur abgebrochen werden.

Herzliche Grüße, Torsten.

gormo · 2018-12-14T08:25:43.000Z

Kann das eventuell mit den Änderungen an großen Multipolygonen zusammenhängen, die wir in den anderen Threads grade diskutier(t)en? Bei “Pfälzer Wald” klingelts bei mir. Irgendwas war da doch an den Daten komisch, wenn ich mich recht erinnere.

GerdP · 2018-12-14T10:33:39.000Z

Wollte mal ausprobieren, ob es an mkgmap liegt, aber ich komme schon mit dem installatierten Beispiel nicht weiter.
Ich habe map_composer_102.zip und mc_starthilfe_100.zip in das gleiche Verzeichnis ausgepackt und dann start_x64.bat aufgerufen.

Starting map generation
Testing Mapsource
Removing MapSource registry values
calling Registry remove
Saving table Settings
Saving table ConvertRule
Saving table ConvertAction
Saving table IDManager
Checking for local data files.
Starting region Wandergegend
Local file is current: Wandergegend_data.osm
Finished region Wandergegend
Starting region Wertheim
Downloading data from API
Downloading (3 attempts) http://api.openstreetmap.org/api/0.6/map?bbox=9.4,49.7,9.5,49.8
javax.xml.stream.XMLStreamException: ParseError at [row,col]:[1,50]
Message: Leerstellen erforderlich zwischen publicId und systemId.
Downloading (3 attempts) http://api.openstreetmap.org/api/0.6/map?bbox=9.5,49.7,9.6,49.8
javax.xml.stream.XMLStreamException: ParseError at [row,col]:[1,50]
Message: Leerstellen erforderlich zwischen publicId und systemId.
Newer input file detected
java.lang.ArrayIndexOutOfBoundsException: -1
Finished region Wertheim
Generation finished
Saving table Settings
Saving table Outline
Saving table IDManager

In errorLog.txt findet man folgendes:

14.12.18 11:18 javax.xml.stream.XMLStreamException: ParseError at [row,col]:[1,50]
Message: Leerstellen erforderlich zwischen publicId und systemId.
14.12.18 11:18 Exception reading data from downloaded file
javax.xml.stream.XMLStreamException: ParseError at [row,col]:[1,50]
Message: Leerstellen erforderlich zwischen publicId und systemId.
	at com.sun.org.apache.xerces.internal.impl.XMLStreamReaderImpl.next(Unknown Source)
	at nop.osm.OSMInputFile.openXmlStream(OSMInputFile.java:167)
	at nop.osm.OSMInputFile.<init>(OSMInputFile.java:142)
	at nop.osmc.generator.RegionMapper.downloadRegion(RegionMapper.java:100)
	at nop.osmc.generator.Mapper.generate(Mapper.java:195)
	at nop.osmc.MapComposer$13.act(MapComposer.java:425)
	at nop.gui.MenuThreadAction.run(MenuThreadAction.java:27)
	at java.lang.Thread.run(Unknown Source)
14.12.18 11:18 javax.xml.stream.XMLStreamException: ParseError at [row,col]:[1,50]
Message: Leerstellen erforderlich zwischen publicId und systemId.
14.12.18 11:18 Exception reading data from downloaded file
javax.xml.stream.XMLStreamException: ParseError at [row,col]:[1,50]
Message: Leerstellen erforderlich zwischen publicId und systemId.
	at com.sun.org.apache.xerces.internal.impl.XMLStreamReaderImpl.next(Unknown Source)
	at nop.osm.OSMInputFile.openXmlStream(OSMInputFile.java:167)
	at nop.osm.OSMInputFile.<init>(OSMInputFile.java:142)
	at nop.osmc.generator.RegionMapper.downloadRegion(RegionMapper.java:100)
	at nop.osmc.generator.Mapper.generate(Mapper.java:195)
	at nop.osmc.MapComposer$13.act(MapComposer.java:425)
	at nop.gui.MenuThreadAction.run(MenuThreadAction.java:27)
	at java.lang.Thread.run(Unknown Source)
14.12.18 11:18 java.lang.ArrayIndexOutOfBoundsException: -1
14.12.18 11:18 Exception analyzing data for Wertheim
java.lang.ArrayIndexOutOfBoundsException: -1
	at nop.osm.nodetree.TreePage.getLess(TreePage.java:84)
	at nop.osm.nodetree.NodeTree.copy(NodeTree.java:297)
	at nop.osm.nodetree.NodeTree.copyTo(NodeTree.java:289)
	at nop.osmc.generator.Analyzer.standardAnalysis(Analyzer.java:166)
	at nop.osmc.generator.Analyzer.analyze(Analyzer.java:81)
	at nop.osmc.generator.Mapper.generate(Mapper.java:208)
	at nop.osmc.MapComposer$13.act(MapComposer.java:425)
	at nop.gui.MenuThreadAction.run(MenuThreadAction.java:27)
	at java.lang.Thread.run(Unknown Source)
14.12.18 11:27 javax.xml.stream.XMLStreamException: ParseError at [row,col]:[1,50]
Message: Leerstellen erforderlich zwischen publicId und systemId.
14.12.18 11:27 Exception reading data from downloaded file
javax.xml.stream.XMLStreamException: ParseError at [row,col]:[1,50]
Message: Leerstellen erforderlich zwischen publicId und systemId.
	at com.sun.org.apache.xerces.internal.impl.XMLStreamReaderImpl.next(Unknown Source)
	at nop.osm.OSMInputFile.openXmlStream(OSMInputFile.java:167)
	at nop.osm.OSMInputFile.<init>(OSMInputFile.java:142)
	at nop.osmc.generator.RegionMapper.downloadRegion(RegionMapper.java:100)
	at nop.osmc.generator.Mapper.generate(Mapper.java:195)
	at nop.osmc.MapComposer$13.act(MapComposer.java:425)
	at nop.gui.MenuThreadAction.run(MenuThreadAction.java:27)
	at java.lang.Thread.run(Unknown Source)
14.12.18 11:27 javax.xml.stream.XMLStreamException: ParseError at [row,col]:[1,50]
Message: Leerstellen erforderlich zwischen publicId und systemId.
14.12.18 11:27 Exception reading data from downloaded file
javax.xml.stream.XMLStreamException: ParseError at [row,col]:[1,50]
Message: Leerstellen erforderlich zwischen publicId und systemId.
	at com.sun.org.apache.xerces.internal.impl.XMLStreamReaderImpl.next(Unknown Source)
	at nop.osm.OSMInputFile.openXmlStream(OSMInputFile.java:167)
	at nop.osm.OSMInputFile.<init>(OSMInputFile.java:142)
	at nop.osmc.generator.RegionMapper.downloadRegion(RegionMapper.java:100)
	at nop.osmc.generator.Mapper.generate(Mapper.java:195)
	at nop.osmc.MapComposer$13.act(MapComposer.java:425)
	at nop.gui.MenuThreadAction.run(MenuThreadAction.java:27)
	at java.lang.Thread.run(Unknown Source)
14.12.18 11:27 java.lang.ArrayIndexOutOfBoundsException: -1
14.12.18 11:27 Exception analyzing data for Wertheim
java.lang.ArrayIndexOutOfBoundsException: -1
	at nop.osm.nodetree.TreePage.getLess(TreePage.java:84)
	at nop.osm.nodetree.NodeTree.copy(NodeTree.java:297)
	at nop.osm.nodetree.NodeTree.copyTo(NodeTree.java:289)
	at nop.osmc.generator.Analyzer.standardAnalysis(Analyzer.java:166)
	at nop.osmc.generator.Analyzer.analyze(Analyzer.java:81)
	at nop.osmc.generator.Mapper.generate(Mapper.java:208)
	at nop.osmc.MapComposer$13.act(MapComposer.java:425)
	at nop.gui.MenuThreadAction.run(MenuThreadAction.java:27)
	at java.lang.Thread.run(Unknown Source)

wambacher · 2018-12-14T11:45:11.000Z

_torsten_:

Ich habe eine weiter Region (Sauerland 7.2 | 9.2 | 50.8 | 51.7) und einen entsprechenden Job erzeugt.

Schön, aber zeigst du uns den Job auch mal? Möchte mich nicht total neu einarbeiten, da ich das Teil eigentlich nicht kenne/brauche.

Gruss
walter

GerdP · 2018-12-14T11:53:17.000Z

Ich habe keinen Job (bzw. irgendein generietes Skript) gefunden. Es gibt diverse *.tbl Dateien, die wahrscheinlich vom mc direkt in in Aufrufe anderer Tools umgesetzt werden, also ohne Umweg über eine shell.

wambacher · 2018-12-14T12:13:05.000Z

GerdP:

Ich habe keinen Job (bzw. irgendein generietes Skript) gefunden.

Nun denn, Torsten schrieb aber, dass er einen speziellen Job erstellt hat.

Egal: Funzt bei mir unter Ubuntu net, da er nop.osmc.MapComposer nicht findet:


export OSMC_TOOLDIR=/opt/MapComposer/Tools
java -Xmx1100M -cp map_composer.jar:ndsc15.jar:nop.jar:colorpicker.jar:bzip2.jar:jai_codec.jar:protobuf-java-2.5.0.jar:osmosis-osm-binary-0.43.1.jar nop.osmc.MapComposer

bringt


 konnte nicht gefunden oder geladen werden
Ursache: java.lang.ClassNotFoundException: nop.osmc.MapComposer

Ich liebe Software, deren Installation “ganz einfach” ist.

Gruss
walter

Skinfaxi · 2018-12-14T12:52:24.000Z

Ihr wisst das es auf www.wanderreitkarte.de ein eigenes Forum mit ner Rubrik für den Mapcomposer gibt?

Nop · 2018-12-14T19:35:11.000Z

_torsten_:

Auf den ersten Blick konnte ich keine Fehler entdecken. Allerdings gab´s im log und in der errorLog.txt folgenden Fehler

Log:

…
java.io.FileNotFoundException: D:\MapComposer\Ver100\input\templates\symbol_head_de.html (Das System kann den angegebenen Pfad nicht finden)

Das sieht so aus, als ob ein Teil des Reportgenerators irrtümlich aufgerufen wird.

Hast Du im Job evtl. das Häkchen “Reports” gesetzt?

Die Meldungen sind auf jeden Fall für den Kartenbau unerheblich.

Nop · 2018-12-14T19:39:10.000Z

_torsten_:

… und weil ich einmal dabei bin ein zweites Problem.
Ich habe eine weiter Region (Sauerland 7.2 | 9.2 | 50.8 | 51.7) und einen entsprechenden Job erzeugt. Beim Generieren bleibt der MapComposer einfach stehen und macht nichts mehr.

Ist das mit der 1.0? Dann solltest Du erst mal auf die neuste Version updaten. Es gab ein sehr seltenes Problem beim Schreiben von PBF Dateien, das zu so einem Stillstand führen konnte. Das ist aber in der aktuellen Version bereits gefixt.

Nop · 2018-12-14T19:48:35.000Z

GerdP:

Wollte mal ausprobieren, ob es an mkgmap liegt, aber ich komme schon mit dem installatierten Beispiel nicht weiter.

Das Problem liegt daran, daß in der Beispielkonfiguration die URL der OSM API noch falsch mit http statt https angegeben ist. Kann man unter Einstellungen/Daten ändern - und ich werde es in der Installation korrigieren.

Außerdem scheint auch die URL für die CGIAR ~~NASA~~ SRTM-Daten nicht mehr gültig zu sein - muß wohl einen neuen Server suchen und die URL tauschen. Habe ich nicht gemerkt, weil sie nur einmal runtergeladen werden. Einfach auf ~~CGIAT oder~~ Viewfinder Panorama umschalten, die Daten sind sowieso besser.

Edit: CGIAR Mirrorserver sind tot, Composer bekommt eine neue URL.

Nop · 2018-12-14T19:53:18.000Z

GerdP:

Ich habe keinen Job (bzw. irgendein generietes Skript) gefunden. Es gibt diverse *.tbl Dateien, die wahrscheinlich vom mc direkt in in Aufrufe anderer Tools umgesetzt werden, also ohne Umweg über eine shell.

Das ist nicht ganz richtig. Die Tools werden zwar direkt aufgerufen, aber alle benutzten Befehle werden zur Nachvollziehbarkeit auch in console.log geschrieben.

Es gibt übrigens nicht nur wie oben angemerkt ein eigenes Forum für Composer, sondern auch ein Wiki und ein paar Infos zum Troubleshooting.

_torsten · 2018-12-16T19:26:04.000Z

wambacher:

Schön, aber zeigst du uns den Job auch mal?

GerdP:

Ich habe keinen Job (bzw. irgendein generietes Skript) gefunden.

Im Grunde werden auf der “Startseite” des MC alle Jobs angezeigt: http://composer.waldpfa.de/index.php?n=MC.Bedienung
“Beispielkarte bauen” beinhaltet alles, was man einstellen kann. Mit «Generieren» wird der Job dann gestartet und abgearbeitet.

_torsten · 2018-12-16T19:33:19.000Z

Nop:

Ist das mit der 1.0? Dann solltest Du erst mal auf die neuste Version updaten.

Das werde ich probieren.

Nop:

Das Problem liegt daran, daß in der Beispielkonfiguration die URL der OSM API noch falsch mit http statt https angegeben ist. Kann man unter Einstellungen/Daten ändern - und ich werde es in der Installation korrigieren.

Außerdem scheint auch die URL für die CGIAR ~~NASA~~ SRTM-Daten nicht mehr gültig zu sein - muß wohl einen neuen Server suchen und die URL tauschen. Habe ich nicht gemerkt, weil sie nur einmal runtergeladen werden. Einfach auf ~~CGIAT oder~~ Viewfinder Panorama umschalten, die Daten sind sowieso besser.

Edit: CGIAR Mirrorserver sind tot, Composer bekommt eine neue URL.

Baust du das in den Download für Version 1.02 ein oder gibt es eine Version 1.02a?

Nop · 2018-12-16T23:01:55.000Z

Es wird demnächst eine 1.03 dafür geben.

_torsten · 2018-12-17T06:34:37.000Z

Nop:

Hast Du im Job evtl. das Häkchen “Reports” gesetzt?

Daran lag´s. Danke!

_torsten · 2018-12-17T06:35:59.000Z

Nop:

Die Tools werden zwar direkt aufgerufen, aber alle benutzten Befehle werden zur Nachvollziehbarkeit auch in console.log geschrieben.

Die gibt es bei mir nicht.

_torsten · 2018-12-17T09:59:25.000Z

Nop:

_torsten_:

… und weil ich einmal dabei bin ein zweites Problem.
Ich habe eine weiter Region (Sauerland 7.2 | 9.2 | 50.8 | 51.7) und einen entsprechenden Job erzeugt. Beim Generieren bleibt der MapComposer einfach stehen und macht nichts mehr.

Ist das mit der 1.0? Dann solltest Du erst mal auf die neuste Version updaten. Es gab ein sehr seltenes Problem beim Schreiben von PBF Dateien, das zu so einem Stillstand führen konnte. Das ist aber in der aktuellen Version bereits gefixt.

Hm … ich habe auf die Version 1.02 hochgestuft und auf Viewfinder Panorama umgeschaltet.

Ich dachte mir, dass ich nun den entsprechenden Job für die Region einfach durchlaufen lassen kann. Denkst. Der MC bleibt wieder einfach stehen.

In der errorLog.txt steht nichts.
Eine Datei console.log wird bei mir nicht erzeugt.
In der Anzeige steht

log:

…
Creating contour file Sauerland_00072_0508_10_9_contour.pbf
Creating contour file Sauerland_00082_0508_10_9_contour.pbf
Splitting region Sauerland
processed 19410347 nodes, 2925029 ways, 0 relations
Sorting region Sauerland

und an dieser Stelle ist Schluss.

Im Hauptfenster steht:
**Sortiere Ebenen für Sauerland 1/2 **
und
Verarbeitung
Nodes 14500000
Ways 1350000
Relations 0

Woran kann´s noch liegen?