Extrem (Ressourcen) aufwendiger Prozess

**pekka** · 08.04.2007, 13:29

Ich glaube nicht, daß der Provider erlaubt, die Limits per php.ini zu verändern. Damit wäre der Sinn der Limitierung ja komplett hinfällig.

Ohne error-Log keine Chance auf vernünftige Hilfe!

Hoster fragen.

**Gast** · 08.04.2007, 13:31

Doch. Strato erlaubt das.. komischerweise.. Ich hab in der im Ordner angelegten php.ini das Memory_limit auf 60M gesetzt und es hat geklappt.

Hoster wird angemailt.

Thx

Micronax

**penizillin** · 08.04.2007, 17:57

Re: Extrem (Ressourcen) aufwendiger Prozess

Original geschrieben von micronax
3. Der Webserver soll alle XML-Einträge mit der MySQL-Datenbank abgleichen.

beschreibe kurz, wie du das machst.

**Gast** · 08.04.2007, 17:59

Tja.. ehem..

Der Server nimmt jeden der 15.000 XML-Enträgen und guckt, ob dieser bereits in der DB vorhanden ist, wenn ja -> keine Aktion, wenn nicht --> Eintragen

(Ich weiß, nicht gerade die Ressourcensparende Methode, aber wie sonst?)

Micronax

**penizillin** · 08.04.2007, 18:19

Der Server nimmt jeden der 15.000 XML-Enträgen ...

und wie geht das?

**Gast** · 08.04.2007, 18:21

Ähm.?

PHP-Code:


$xml = new Xml;

$out = $xml->parse('../littera.xml');

foreach($out["buch"] as $buch) {





}

Das ist eine XML-Klasse, die ich mit foreach durchlaufen lasse.

**penizillin** · 08.04.2007, 18:22

und wie funktioniert diese klasse?

**Gast** · 08.04.2007, 18:26

Die Klasse ist nicht von mir. Die, die ich geschrieben hab' war leider nicht funktionstüchtig...

Hab' den Quelltext mal hier gepostet

Sie öffnet die XML-Datei und geht Eintrag für EIntrag durch, ruft die sub-nodes ab, und liefert die in einem 2-diminsionellen Array wieder.

Micronax

**penizillin** · 08.04.2007, 18:37

Die Klasse ist nicht von mir.

kein grund es nicht zu wissen. deine klasse benutzt sax, und das wollte ich hören.

es ist tatsächlich falsch, die gesamte xml datei einzulesen, bevor man mit der auswertung beginnt, wenn man nicht mehrere datensätze gleichzeitig zur auswertung benötigt (bei dir wohl nicht der fall). mit sax kann man es viel effizienter auf beliebig großen dateien realisieren, und das mit minimalem speicherverbrauch.

informiere dich darüber und schreibe einen eigenen sax-handler, der mit vorgegebener speicherschranke alle zig-tausend xml einträge _nach einander_ einliest und verarbeitet.

OffTopic:
zu der bekannten "copy-paste-programmierung" kommt immer öfter die "ich-habs-aus-dem-internet-programmierung".

**Gast** · 08.04.2007, 18:39

*grml*

**Gast** · 08.04.2007, 21:34

-.-

Ich kapier das nicht. Ich habe jetzt 3 Stunden an diesem XML-Parser-Kram rumgehangen und es nicht hinbekommen. Kannst du oder jemand anderes sachkundiges mir nicht nochmal einen Tipp geben?

Micronax

**ghostgambler** · 08.04.2007, 22:33

Re: -.-

Die Contribute Notes klingen interessant, damit würd ich mich mal beschäftigen (ob es ne Lösung für dein Problem ist, weiß ich allerdings nicht)
http://de3.php.net/manual/de/ref.xml.php#38356

http://sourceforge.net/projects/saxy-xmlparser/

**penizillin** · 09.04.2007, 19:57

jedes mal wenn ein tag geöffnet wird und du feststellst, es ist ein neuer datensatz, schreibst du seinen inhalt und alle kinder in einen buffer. wird dieser tag geschlossen, weißt du - datensatz komplett, kann mit der db abgeglichen werden oder wasauchimmer. danach buffer löschen nicht vergessen. so wird dein speicher nie mehr als einen datensatz auf einmal halten müssen.

**Gast** · 13.04.2007, 15:12

Soo.. genauso hab' ich's jetzt gemacht.. Und siehe da: Er machts...

Aber: leider nur ca. 3700 Einträge. Anschließend bricht er einfach so, ohne eine Fehlermeldung ab.

max_execution_time und memory_limit sind ausreichend eingestellt.

Extrem (Ressourcen) aufwendiger Prozess