Fritz!Load - (Oneclickhoster-) Down- und Uploads via FB

[wetzstein513]

Morgen. So hier ist die fertige captcha_gocr Version. Wäre super wenn das mal wieder jemand testen könnte. Speziell das er auch jpg einliest.

@redxi: Keine Ahnung was bei dir los ist. Kann es sein du einen alten Trunk bzw. eine der Rapidshare-Versionen nutzt? Da ist die Captchaerkennung noch auskommentiert. Ansonsten muss es bei dir etwa so aussehen:

### oneclickhoster: http://www.filer.net/get/d792a447eb2...eorie-test.pdf
07:22:50 Uhr: filer-free
GET1: http://www.filer.net/get/d792a447eb2...eorie-test.pdf Options: --cookie-jar /var/tmp/fritzload1/cookie.txt
Starte filer download for file: f_url=http://www.filer.net/get/d792a447eb23615/file/Stringtheorie-test.pdf  

% Total    % Received % Xferd  Average Speed   Time    Time     Time  Current
                                 Dload  Upload   Total   Spent    Left  Speed

  0     0    0     0    0     0      0      0 --:--:-- --:--:-- --:--:--     0
105   737  105   737    0     0   3226      0 --:--:-- --:--:-- --:--:--  5264
erkanntes Captcha: 96021

Und hier der Testfolder: Anhang anzeigen gocr_test.zip

@Harald: In der gui_config.cgi wird der reconnect-Button nicht gesetzt angezeigt und der autorun ist nach einem Neustart der Box wieder eingeschaltet.

@schlaubi666: Danke.

 

[D00mhammer]

habe mich mal versucht für hotfile die captcha erkennung zu ergänzen.. es gibt zwei probleme :

1. das Captcha die url vom captcha wird generiert:

http://hotfile.com/captcha.php?id=158553206&hash1=a94e292f6bb7dc5ae076708e84940ac627b8f891

oder

http://hotfile.com/captcha.php?id=158549050&hash1=66584f44c94dd02c48f7ce54132279d13a503e00

wie kann ich as per skript für verschiedene dateien runterladen?

2. habe versucht per hand zu laden und dann zu erkennen.

/var/media/ftp/uStor01/apache/htdocs/FritzLoad-Trunk576/bin # ./gocr /var/media/
ftp/uStor01/apache/htdocs/FritzLoad-Trunk576/tmp/captcha.jpg
Not a JPEG file: starts with 0x62 0x61

ERROR pnm.c L323: unexpected EOF

wird aber bei firefox als jpg erkannt?

alles mit trunk 576

 

[wetzstein513]

@doomhammer: du kannst es nicht direkt mit gocr starten sondern musst es mit jpegtopnm in pnm konvertieren und dann per pipe übergeben. Intern versucht gocr djpeg zu öffnen. Du wirst aber so keinen Erfolg mit Erkennung haben da das Bild erst vorverarbeitet werden muss. Hatte ich mir auch schonmal angeschaut ist aber bei den Bildern von hotfile nicht ganz so trivial wie bei netload oder filer. Zurzeit scheint hotfile keine captcha zu schalten die Links sind tot.

 

[ukvideo]

Hallo Harald, habe gerade Deine neue Version 0.28 getestet feine Sache, ich habe große Achtung vor Deiner Arbeit.

Eine kleine Sache ist mir doch aufgefallen. Die Fenster Liste, Fertig und Fehler lassen sich nur löschen wenn mindestens ein Zeichen im Fenster bleibt (kann auch Leerzeichen sein).

Ansonsten klarer Favorit. Muß Funktional sein läuft ja auf der Box.

mfg

 

[The Brad]

Habe ich etwas verpasst? Wo gibt es v0.29?

 

[wetzstein513]

ukvideo war etwas voreilig. Es gibt erst V0.28.

 

[redxenja]

ukvideo war etwas voreilig. Es gibt erst V0.28.

OK,
Danke Wetz, die Version 028 mit CGI hab ich jetzt, damit sollte es gehen.

 

[TelefonSparbuch]

Kannst du die Datum/Zeit-sache die ich in die letzte php-Version für fireball eingefügt hatte noch mit in den cgi-Teil übernehmen.

In der Konfiguration ja (übernimmt die Zeit zum Zeitpunkt des speicherns - Option bleibt in der Konfiguration aktiviert). Ansonsten sehe ich keinen Sinn und Zweck, die aktuelle Rechnerzeit in der Downloadseite auszugeben.

Grüße
Harald

 

[wetzstein513]

@Harald: Du nicht aber fireball wollte es gern und ich fand es auch ganz witzig... Er gibt ja nicht die Rechner- sondern die aktuelle Zeit der Fritzbox aus. Ansonsten auch von mir mal ein Danke für die Umgestaltung.

 

[TelefonSparbuch]

Die meisten werden eine Uhr auf Ihrem Desktop vorfinden. Von daher halte ich es für überflüssig und nicht relevant für die Downloadseite, es sind eh schon zu viele Informationen auf der Seite...

Edit:

Er gibt ja nicht die Rechner- sondern die aktuelle Zeit der Fritzbox aus

Nicht die im SVN eingecheckte Downloadseite.

Grüße
Harald

 

[wetzstein513]

@Harald: Stimmt schon. Wenn man du die fritzbox-Systemzeit dann in der config ausgibst passt das auch.

@all: Habe das fast fertige netload-plugin in den svn gepackt. Vielleicht kann sich das einer mal anschauen denn ich komme nicht weiter: Nachdem das captcha eingeben wurde kommt immer die Seite "You may forgot the security code or it might be wrong" was nicht stimmt. Ich denke die Fehlermeldung ist irreführend. Sie kommt auch dann wenn das richtige Captcha eingegeben wurde. Ich glaube ich habe hier irgendwas im Formular übersehen oder so. Die Erkennung ist jetzt bei etwa 90% und damit vollkommen ausreichend. Muss sagen ich bin nicht so fit bei der Pluginprogrammierung und würde mich lieber weiter mit der Captchaerkennung beschäftigen. Shellscripting ist echt nicht so schwer, falls es mal einer lernen will

Edit: @Harald: Danke, die Zeiteinstellung ist ja sogar noch genauer ais ich es hatte...

 

[SagHalt]

lighttpd mit Fritz!Load

Hi,

nachdem Harald den php Part durch cgi ersetzt hat, wollte ich mal probieren den apache durch den schlankeren lighttpd zu ersetzen, aber ich bekomme immer nen 404 Error beim Zugriff auf die Fritzload Seiten. Hat jemand sonst schon mal probiert apache durch lighttpd zu ersetzen?

 

[Fireball3]

Hallo zusammen,
ihr wart ja ziemlich fleißig in den letzen Tagen!
Ich habe die Anleitungen von wetzstein studiert und bin dann
zuletzt bei sed hängen geblieben. Sieht sehr kryptisch aus und
ich habe gewisse Schwierigkeiten das nachzuvollziehen.
Zwar habe ich mir im Netz die Hilfe zu sed geholt, aber es ist immer
noch relativ "dunkel" was das Beispiel angeht.
Vielleicht kann jemand zum konkreten Beispiel hier etwas mehr erkären?
Wichtig wäre ein Beispiel woraus verständlich wird,
was hier im einzelnen passiert:

url="$(grep "Click here to start download" $f | sed -n 's,.*;\" [^>]*href=\"\([^\"]*\)[^>]*> Click.*,\1,p')"

Vielleicht mit der dazugehörigen Seite die verarbeitet wird, damit man sich ein
Bild über die Vorgehensweise machen kann?
Speziell um den sed Ausdruck zu verstehen, müssten die zu verarbeitenden
html-Codezeilen vorliegen.

Anderes Thema:

Ansonsten sehe ich keinen Sinn und Zweck, die aktuelle Rechnerzeit in der Downloadseite auszugeben.

Das ist richtig, die Desktopzeit nochmal anzuzeigen ist nicht sinnvoll.
Wie Harald das jetzt umgesetzt hat konnte ich noch nicht begutachten, aber
vielleicht findet sich ein eindeutigerer Name als "Systemzeit"?
Auf jeden Fall hat wetzstein es so umgesetzt, wie es gewünscht war.
http://www.ip-phone-forum.de/showpost.php?p=1411378&postcount=3022

Thema neue Version 0.28
Reden wir hier von einer offiziellen 0.28 oder ist das die aktuelle SVN?
Hier sollte man vielleicht mit den Begrifflichkeiten aufpassen!
Auf jeden Fall sehe ich bis jetzt keine 0.28 auf SourceForge und auch
Harald hat keinen Link gesetzt - so wie er das immer macht.

Gruß
Fireball

 

[TelefonSparbuch]

Systemzeit (Fritzbox) werde ich ganz unten in der rechten Ecke einer jeden Seite ausgeben (das stört zumindest nicht).

Die V0.28 im SVN ist noch nicht offiziell (es ist halt die Entwicklungsversion). Sobald die Arbeiten abgeschlossen sind kann auch eine erste Version offziell veröffentlicht werden. Die neue Version sollte keine nennenswerten Probleme mehr aufzeigen, sonst ist die Freude an den Verbesserungen den meisten nicht anzumerken...


EDIT: grep/sed

url="$(grep "Click here to start download" $f | sed -n 's,.*;\" [^>]*href=\"\([^\"]*\)[^>]*> Click.*,\1,p')"

Jede Zeile einer Datei, die den String "Click here to start download" wird von grep an sed weitergereicht. Sed löscht alles bis zum Semikolon, welchem ein Anführungszeichen folgt und dem ein href folgt (dazwischen kann aber kein Entdtag ">" stehen. Im Prinzip wird hier nur die URL zwischen dem href="...." herausgelesen. Falls der Pattern in der Zeile nicht passt, wird nichts ausgegeben, dazu wird zu Anfangs sed auf keine Ausgabe gesetzt (-n) und sofern eine Ersetzung erfolgt wird die Ausgabe erzwungen (,p).

Grüße
Harald

 

[wetzstein513]

Mahlzeit. Also irgendwie sind die Hosterdienste mit Captcha komisch: Habe in den svn das netload-plugin gepackt, wo die Erkennung auskommentiert ist denn damit funktioniert der download?! Sprich wenn das Formular ganz leer übergeben wird muss das Captcha nicht erkannt werden. Scheint ein häufiger Bug zu sein. Vielleicht muss man ja gar keinen Erkenner bauen
Das Problem warum es mit Captcha nicht geht ist: 1.) Die Erkennung auf der Box ist schlechter als bei mir in der Entwicklungsumgebung und 2.) Wird durch das nachladen des Captchas ein falsches ausgewertet so das der Code nie stimmen kann. Also kann mal getestet werden.

 

[ukvideo]

@wetzstein513

das wars

:groesste:


mfg

 

[gbel]

habe das ganze von Webserver von Fritzbox gestartet.
dafür braucht man ein Startscript

#! /bin/sh
#CGI install
mkdir /var/tmp/cgi-bin/
ln -sf  /var/media/ftp/<name_von_USB_Speicher> /var/tmp/fritzload
ln -sf /usr/www/cgi-bin/capture_notimeout /var/tmp/cgi-bin/
ln -sf /usr/www/cgi-bin/firmwarecfg /var/tmp/cgi-bin/
ln -sf /usr/www/cgi-bin/system_status /var/tmp/cgi-bin/
ln -sf /usr/www/cgi-bin/webcm /var/tmp/cgi-bin/
mount -o bind /var/tmp/cgi-bin   /usr/www/$OEM/cgi-bin
mount -o bind /var/tmp/fritzload/menu2.html  /usr/www/$OEM/html/de/menus/menu2.html
ln -sf /var/tmp/fritzload/cgi /var/tmp/cgi-bin/flcgi

# Autorun FritzLoad
/var/tmp/fritzload/autorunfl.sh -r > /dev/null &

Datei menu2.html aus dem Anhang soll im FritzLoad Verzeichis liegen.

Vorteil vom dieser Losung - man brauch weder Apache noch anderen Webserver und die Steuerung von FritzLoad über Remoteadministrierung ist problemlos möglich

könnte aber Probleme mit anderen Fritzbox Erweiturungen geben

 

[DirtMcGirt]

Ich habe ein kleines Problem, ich musste die Festplatte formatieren jetzt geht auch alles wieder nur beim Premium Download von Rapidshare kommt diese Meldung, woran könnte das liegen?

Download: 6 Couldn t resolve host. The given remote host was not resolved. / HTTP-Code:(200000) / HEAD:HTTP/1.1 200 OK ;P3P: CP="ALL DSP COR CURa ADMa DEVa TAIa PSAa PSDa IVAa IVDa CONa TELa OUR STP UNI NAV STA PRE" ;Date: Fri, 16 Oct 2009 14:14:34 GMT ;Connection: close ;Accept-Ranges: bytes ;Cache-Control: no-cache ;Content-Type: text/html; charset=UTF-8 ;Content-Length: 27599 ; ;

 

[wetzstein513]

@Harald: Hier die für die Fritzbox kompilierte Datei inkl. der Library weiss jetzt leider nicht wie ich damit weitermachen soll. Wenn man sie so startet gibt es nur eine unlesbare Ausgabe...

Anhang anzeigen avm2cap_lib.zip

@DirtMcGirt: Kannst du das nächste mal den "Code"-Tag verwenden. Ist besser lesbar...

 

[ukvideo]

@wetzstein513
zu NL
Hallo es gibt noch ein Problem mit der Wartezeit. Sie wird nicht ausgeführt.
Mit Reconnect klappt es zwar, bei mehrern Instanzen werden die aber gekillt.

mfg