[OSM-Devserver] Resourcenverteilung
Kai Krueger
kakrueger at gmail.com
Mi Apr 7 23:45:47 CEST 2010
On 04/07/2010 02:49 PM, Stefan Dettenhofer (StefanDausR) wrote:
> Sven Geggus schrieb:
>> Schlage vor, dass die anderen auch files in /osm/stampfiles/ anlegen.
>>
>> +1
>>
>>
Sollte es haeufiger vorkommen, das zu viele Programme gleichzeitig
laufen und desshalb den Server in die Knie zwingt, waere es vielleicht
ueberlegenswert ein richtiges batch processing system wie Sun Grid
Engine[1] oder OpenPBS/Torque[2] zu verwenden. Dann koennte jeder der
jobs hat die laufen sollen diese in das Batchsystem submitten mit
entsprechenden Angaben wieviel Zeit und Speicher sie benoetigen. Der
batch scheduler stellt dann sicher das nie zu viele Programme
gleichzeitig laufen, aber Programme starten sobald Ressourcen dafuer zur
verfuegung stehen. Nach etwas anfaenglicher Einrichtungsarbeit, waere es
dann vielleicht fuer alle das einfachste.
Nur so ein Vorschlag.
Kai
[1] http://www.sun.com/software/sge/
[2] http://ubuntuforums.org/showthread.php?t=289767
> Ok, das kann ich machen.
> Ich weiß nur nicht, ob es wirklich sinnvoll ist, wenn ich mit icron an
> die Datei aio.stamp dranhänge. Ich muss mir auch erst noch ein
> Rechenschema ausdenken, da ich ja abwechselnd verschiedene Kontinente
> berechnen will.
>
> Ich würde einmal noch gerne das ganze planetfile rechen, um zu sehen,
> wie lange das dauert. Ich konnte nämlich inzwischen die Rechenzeit stark
> (auf ca. 30%) reduzieren: OSM2POWM nutzt nun alle verfügbaren Kerne und
> bBoxSplit ist schneller als osmosis!
>
> Wann wäre denn dazu mal ein Zeitfenster frei?
>
>
> Gruß,
> Stefan
>
>
> _______________________________________________
> Devserver mailing list
> Devserver at lists.openstreetmap.de
> http://lists.openstreetmap.de/mailman/listinfo/devserver