OSM2XP Java-Heap-Space

[Dietmar]

2048 nicht 2028, es sollten Potenzen zur Basis 2 sein.

Bei Italien, italy.osm.pbf 404 MB, dauert es 22 Sekunden für eine Kachel, bei kleineren Größen war die Zeit wesentlich kürzer, so 1 bis 12 Sekunden.

Also kann geschlußfolgert werden: Je länger eine zu bearbeitende Datei ist, umso länger dauert die Bearbeitung einer Kachel. Weiterhin muß gemutmaßt werden, dass auch die Komplettinhalte einer Kachel unterschiedlich sind. Dort stehen auch nicht nur Objekte, Wälder, Häuser und Straßenlampen drin, sondern noch viel mehr. Ferner darf vermutet werden, dass in diesen osm.pbf-Dateien, die Informationen nicht Kachelweise drin stehen, sondern, dass sie wahllos verteilt sind - und nur aus den Koordinaten auf die Kachelbezeichnung zurückgerechnet wird. Das kann dann so aussehen, dass für eine komplette Kachel die osm-Datei jedesmal neu in ihrer vollen Länge eingelesen wird. Je länger die Datei, umso ----> naja, schon gesagt. Ich werde mal versuchen, mich über die Aufbaustruktur dieser OSM-Dateien schlau zu machen, in der nächsten Woche.

Wenn du also ganz Europa als xx.pbf nimmst, ca. 9 GB (die passen sowieso nicht komplett in der Arbeitsspeicher), dann wird diese Datei stückweise in Abschnitten bearbeitet. Das dauert eben.

Nebenbei, 1024 für -Xmx wären z.Zt allemal ausreichend. Es geht aber auch mir 2048.

Ich habe OSM2XP Version 2.01. Die Forestdichte ist hier nicht einstellbar, sie ist auf höchste Dichte ausgelegt, 255 dez.

In einer Beschreibung (ist wohl eine ältere Version) auf deren Seite habe ich gesehen, dass die Forestdichte eingestellt werden kann. Bei mir habe ich aber nichts gefunden.

Gerade lade ich die france.osm.pbf herunter, die ist 1,9 GB. mal sehen, wie lange da für eine Kachel gebraucht wird.

[WoDi]

Ich habe natürlich 2048 in der *.ini stehen. Das war oben ein Schreibfehler.
Das Verhalten bei der Konvertierung deutet genau darauf hin, was Du geschrieben hast. Ich habe gerade mal gewartet, wie lange die Datei gelesen wird, um die Anzahl der Kacheln zu bestimmen. Es sind knapp 5 min. Also stimmt Deine Vermutung. Es wird wohl jedes Mal die gesamte Datei gelesen, um alles zusammen zu suchen.

Gruß
Dieter

[Dietmar]

Meine Vermutung hat sich bestätigt.
Ich habe mir so eine OSM-Datei angesehen, da ist nichts mit irgendwelchen Kacheln bzw tiles.
Die nodes, die jeweils eine ID haben geben Koordinaten an und da geht es dann sehr durcheinander.
Also wird für jede Kachel die Datei neu eingelesen. Deshalb wird beim ersten Durchlauf zunächst die Anzahl der Kacheln mit ihren Koordinaten ermittelt. Die Länge der Datei, sowie deren Inhalt kennzeichnet den dafür benötigten Zeitbedarf.

Kann man nischte machen, ist so.

Der Wert 1024 bzw. 2048 ist aber für den Java-heap bei diesen immer umfangreicher werdenden OSM-Dateien enorm wichtig.

Hast du eine Ahnung wo man die "Last osm files" schnell löschen kann, ohne in der xml-Datei händisch herumzufummeln?

[WoDi]

Nee, da kann ich Dir leider momentan nicht helfen. Sorry.

Gruß
Dieter

[Hermann]

Jungs, ist das ein Buch

Wollt ihr nur noch VFR fliegen! Oder sieht man all die Objekte aud FL380?

Nein doch, ihr habt ja gar keine Zeit mehr zum Fliegen

Dafür schenk ich euch dieses Gedicht.

Der Traum vom Fliegen

... und wenn du es wieder mal müde bist,
wie eng und begrenzt dein Leben ist,
und die ganze Erde erscheint dir fast
umsponnen von einem grauen Netz,
in dem du dich hilflos verfangen hast,
ein Netz aus Gewohnheit, Gewalt und Gesetz,
ein Netz aus Grenzen von Staat zu Staat,
Grenzen aus Dummheit und Stacheldraht,
Grenzen des Geldes, begrenzte Zeit
Und die Grenzen der eigenen Fähigkeit...
...und wenn du dich wieder mal wund gestoßen
an den Gitterstäben, den kleinen und großen,
und du weißt genau: Du kommst nie mehr vom Flecke,
du bleibst gefangen im engen Raum,
dann hockst du dich nieder in deiner Ecke
und träumst den alten Traum:

Da breitest du weit deine Arme aus
Und ein tiefer Atemzug!
Du schwingst dich empor über Straße und Haus
Im traumhaften Vogelflug.
Du fliegst und du fliegst und du brauchst kein Ziel
Das Dasein selbst ist Glück!
Keine Grenze dort unten bekümmert dich viel,
du möchtest nie zurück.

Es ist alles so einfach. Du wunderst dich kaum.
Und du weißt in dein Traum: Es ist kein Traum!

Und du fragst dich, warum man es je vergisst,
warum man nicht glaubt daran,
dass man immer so frei wie ein Vogel ist
und in Wahrheit fliegen kann.

(Michael Ende)

[WoDi]

Vielen Dank für Dein Geschenk!

Gruß
Dieter