Framebrecher Spider

[Gremlin]

Ausserdem spiderst du nur 1 Kampagne gleichzeitig. Nehmen wir mal an das eine Kampagne 20 Sekunden aufenthalt hat dann braucht der Spider schonmal: 30 Sekunden (weil wir glaube 10 Sekunden toleranz drin hatten) für diese Kampagne um sie auf zu langsames Laden zu prüfen! Macht also pro Minute 2 Kampagnen (im Bestfalle, durch Virentest würde ich nochmal 5 Sekunden hinzurechnen da ich nicht weis wie lange der dauert) aber gehen wir mal weiterhin von 2 pro Minute aus ^^ das macht 120 in der Stunde.

Du hast in deinem Beispiel nun in 36 Minuten 35 Kampagnen getestet also circa 1 pro Minute. Vielleicht hat deine Seite einfach sehr viele Kampagnen mit hoher Aufenthaltsdauer drin. Bei diversen Seiten kursieren Banner mit 45 Sek. Aufenthalt rum vielleicht hast du hiervon welche drin.

Wenn du mehrere gleichzeitig testest geht das deutlich schneller.

Gruß
Gremlin

[carlos99]

Dann versuche mal den Vienscann auszuschalten, das beschleunigt den Spider auch deutlich.

Momentan habe ich keine Idee woran das wirklich liegen könnte.

*Edit*
Ich sehe gerade den Screen genauer an. Also der Spider ist ja nicht sehr schnell aber so langsam wie bei Dir sollte er definitiv nicht sein.

*Edit2*
Wenn Du mir per PN mal das Spider Passwort schicken würdest, könnte ich den Spider mal hier auf meinem PC starten und nachsehen was da nicht richtig läuft.

PN mit PW schicke ich Dir.
Ich habe es jetzt nochmal ohne Virenscan versucht, da kommt gleich am Anfang die "Spider-Client.exe hat ein Problem fest gestellt und muß beendet werden".

Ausserdem spiderst du nur 1 Kampagne gleichzeitig. Nehmen wir mal an das eine Kampagne 20 Sekunden aufenthalt hat dann braucht der Spider schonmal: 30 Sekunden (weil wir glaube 10 Sekunden toleranz drin hatten) für diese Kampagne um sie auf zu langsames Laden zu prüfen! Macht also pro Minute 2 Kampagnen (im Bestfalle, durch Virentest würde ich nochmal 5 Sekunden hinzurechnen da ich nicht weis wie lange der dauert) aber gehen wir mal weiterhin von 2 pro Minute aus ^^ das macht 120 in der Stunde.

Du hast in deinem Beispiel nun in 36 Minuten 35 Kampagnen getestet also circa 1 pro Minute. Vielleicht hat deine Seite einfach sehr viele Kampagnen mit hoher Aufenthaltsdauer drin. Bei diversen Seiten kursieren Banner mit 45 Sek. Aufenthalt rum vielleicht hast du hiervon welche drin.

Wenn du mehrere gleichzeitig testest geht das deutlich schneller.

Gruß
Gremlin

Das kam mir auch schon in den Sinn. :ideaann habe ich auf 6 Kampagnen gleichzeitig prüfen gestellt. Siehe da, es wurden dann pro Minute 6 Kampagnen geprüft. Mehr geht ja nicht!

Trotzdem ist ja noch das Problem, das er nach ca. 20 min sich selbst beendet.
Ich lasse jetzt nochmal einen Test laufen und melde mich dann.

*Edit*
Das wars dann auch schon, nach ca. 15 min war er wieder weg (beendet, abgebrochen?).

[Worka]

Hallo
Die PN habe ich bekommen, heute Abend werde ich mal nachsehen ob der Spider bei mir mit der Kampangenliste auch Probleme macht.

Wenn er wieder mit einer Fehlermeldung abstürzt, könntest Du dann mal die Zuätzlichen infos kopieren und mir schicken?
(Also in der Fehlermeldung auf "Für weitere Informationen zu diesem Fehler, klicken Sie hier" klicken)

Ich erkenne zwar kaum mehr als der normal user dadrin, aber immerhin kann es sein, dass man die Datei, die den Fehler verursacht dort findet und wenn es nicht der Spider selber ist (bzw der Spider alleine) , sonderen eine Datei die dem Spider beiliegt, kann man diese dann mal austauschen (gegen eine neuere Version).

[Hardy]

Also Worka ich muss dir hier mal sagen das ist wirklich eine TOP Arbeit von dir :thumbsup:
Der Spider funktioniert bei mir ohne Große Probleme...Das einzigste was mich ein wenig stört ist das er jedesmal von 0 anfängt wenn ich ihn starte so müsste ich den spider ja rund um die uhr laufen lassen damit er alle kampagnen abarbeitet...das ist aber leider nicht möglich da ich ja auch mal arbeiten und schlafen muss :nonod:

Ansonsten finde ich es klasse das du uns so ein tolles tool wofür man woanders bestimmt locker ein paar hundert euro auf den tisch legen muss einfach so kostenfrei zur verfügung stellst....das finde ich ganz große klasse von dir :thumbsup:

[Worka]

Danke für die Blumen!
Ich dachte mir, wenn ich schon keine Serverscripte coden kann und auch sonst nix Serverseitiges für das VMS, dann Versuche ich mal meine VB Kentnisse sinnvoll einzubringen.

Der Dank gebührt aber auch Gremlin, ohne Ihn wäre der Spider nur eine Idee.

Das mit dem von Anfang anfangen, könnte man vielleicht im Server regeln, so dass man z.B. immer nur 200 Kampangen ausgeben lässt.
Der Spider prüft die Kampangen und wenn er fertig ist, so fordert er eine neue Liste an.
Der Server könnte nun die nächsten 200 Kampangen ausgeben usw.

Aber da ich den Spider noch um ein paar Sinnvolle Optionen erweitern will, kann ich ja mal versuchen eine Option einzubauen, die es erlaubt, dem Spider eine Startposition in der Liste vorzugeben, oder die letzte position zu speichern und später dort weiterzuspidern.

Das erste was ich in Angriff nehmen möchte ist aber ein Zeitplaner, der den Spider dann zu vorgegebenen Zeiten startet und stoppt.

*Edit*
Ich werde die Tage eine neue Version an Gremlin schicken, die aber noch keine neuen Funktionen beinhaltet (nun doch ein paar), sondern erst mal kleinere Bugs behebt (z.B. Anzeige eines Unbekannten Fehlers, obwohl die Fehlerursache bekannt ist), sowie eine verbesserung des Ladezeit Tests.
Der Test sollte dann deutlich weniger abhängig von der eigenen Seitenperformance sein, was ihn zuverlässiger macht.

Hier mal eine Liste der Änderungen. Alle Änderungen werden gearde noch getestet und es ist möglich, dass ich einige Änderungen rückgängig mache, wenn Sie nicht richtig funktionieren.

-Bug fixed:
Javatestscript Offline wird nun erkannt
und als "Java Testscript: 404" angezeigt.

-Bug Fixed
Möglicher Absturz bei Verwendung der Option
"Bei Virenscan Fehler: Retry" behoben.

-Bug Fixed
Fehler behoben, der das Automatische beenden der
Meldungen der Internen Browser verhindert hat.

-Bug Fixed
Probleme beim VScan behoben

-Neu
Fehler 403 wird nun Erkannt und als
"Java Testscript: 403" angezeigt.

-Neu
Erkennung von Langsamladern ist nun weniger
von der eigenen Seitengeschwindigkeit abhängig.
Das bedeutet weniger Fehlmeldungen von
Countdownstoppern.

-Neu
Geschwindigkeit minimal verbessert.

-Neu
Option: "Spider beschleunigen"
Setzt bei allen eingelesenen Kampangen, deren
Aufenthaltszeit länger als 10 Sekunden ist,
die Aufenthaltszeit auf 10 Sekunden.

-Neu
Auswertung eines Weiteren Parameters
nach Viren Scan.

-Neu
Option: Pause/Resume
Stopt den Spider und Speichert die Liste in
eine Datei. Der Spider kann beendet werden und später
an der ursprünglichen Position der Liste weiterabarbeiten.

@carlos99
Das hier könnte für Dich interessant werden, leider ist die Option noch nicht getestet.
-Neu
Erstellung eines Bug Reports bei Absturz
(ich sehe schon klappt nicht so gut, aber ich lasse es mal drin)

...
kann man dies erweitern auf seamonkey da ich eher überwiegend mit seamonkey klicke...

Sorry dass die Antwort so lange auf sich warten liess.
Leider habe ich kein Control gefunden dass man einbauen könnte, so wie ich es gesehen habe, scheint das bei der Entwickelung auch nicht geplant.

Man könnte möglicherweise durch Header Manipulation den IE oder Mozilla als Seamonkey tarnen aber das würde dem Spider ja nichts nützen.

[Xenon]

Ich habe mal nachgeforscht und habe entdeckt das man vill doch den spider für seamonkey nutzen kann indem man in bei ff einschaltet also da einen hacken rein machen da seeamonkey zur der gleichen firma gehörtt

[Hardy]

Ich erhalte öffters folgende meldung:

The information you have entered is to be send over an enencrypted connection and could easily be read by a third party.
Are you sure you want to continue sending information?

Was kann ich dagegen machen?