FTP Server - Abbruch nach 8 MB upload

[tc_fun]

Hallo,

mithilfe des Forums ist es uns gelungen, unter Windows 7 einen FTP-Server (Quick and Easy FTP Server Lite) und unter Windows 8 mit Total Commander 8/9 den passiven Zugriff darauf zu realisieren.

(1)

Beim Upload vom Total Commander 8/9 auf den FTP-Server (über das Internet – kein lokales Netzwerk) bricht die Übertragung reproduzierbar nach 8,x MB ab.

(Beim Download auf dem gleichen Wege bricht es ab 100 MB ab.)

Woran kann das liegen, dass beim Upload von TC zum FTP-Server schon bei 8 MB Schluss ist?

(Wir können ohne Probleme mehrere einzelne Dateien mit jeweils 8 MB hochladen ... Im FTP-Server-Programm ist keine (sichtbare) Beschränkung vorhanden.)

(2)

Gibt es im Total Commander 9 bereits einen integrierten FTP Server, so das man über das Internet zwischen zwei Instanzen mit dem Total Commander Dateien übertragen und vor allen Dingen Dateiverzeichnisse synchronisieren kann?

Ist sowas für TC 10 geplant, falls es das noch nicht gibt?

(3)

Welche alternativen FTP-Server unter Windows nutzt Ihr, bei denen eine Übertragung von Dateien > 8 MB aus Eurer Erfahrung problemlos läuft?


Danke

[Dalai]

Hast du mal probiert, den FTP-Server auf einen anderen Port zu legen?

Ich hatte kürzlich eine "lustige" Erfahrung mit Port 21 gemacht: Normalerweise verbinde ich mich in die Firma über PuTTY. In der Initialverbindung sind diverse Tunnel eingerichtet, die auf die Server in der Firma weiterleiten, d.h. mit je einer zusätzlichen Verbindung auf localhost (via PuTTY) komme ich direkt auf die Server. Seit meinem Wechsel zu Win7 vor einigen Monaten bekam ich immer wieder Verbindungsabbrüche zu einem der Server; alle anderen Tunnel liefen einwandfrei und unter XP liefen alle Tunnel immer einwandfrei. Es hat mich einige Zeit gekostet, herauszufinden, dass Win7 die Verbindung zu Port 21 immer nach kurzer Zeit trennt. Ich weiß bis heute nicht, warum. Also Tunnel auf Port 121 gelegt und alles läuft sauber.

Will sagen: Leg den FTP-Server auf dem Win7-Rechner testweise auf einen anderen Port und ändere die Portweiterleitung auf dem Router entsprechend. Nach außen kannst du ja weiterhin Port 21 nutzen (also z.B. Port 21 weiterleiten auf Win7 Port 121 oder so).

FTP-Server wird es im TC übrigens nie geben, da bin ich sehr sicher, denn auch wenn ich nicht der Autor bin, kann ich aus Erfahrung abschätzen, welche Dinge er einbaut und welche nicht (Serverdienste gehören nicht dazu).

Grüße
Dalai

[tc_fun]

Hallo Dalai,

das ist ein interessanter Gedanke. Danke

Wenn ich das richtig verstanden habe, brauche ich "nur" im FTP-Server-Programm von Port 21 auf einen anderen Port wechseln und diesen zusätzlich im Router als Umleitung eintragen.

Richtig? .... (edit) ... hat leider nicht zum gewünschten Erfolg geführt.

Vielleicht doch ein anderes FTP-Programm? - mh - Wer nutzt von Euch erfolgreich den Total Commander mit einem FTP-Server (win)?

[Dalai]

Wenn ich das richtig verstanden habe, brauche ich "nur" im FTP-Server-Programm von Port 21 auf einen anderen Port wechseln und diesen zusätzlich im Router als Umleitung eintragen.

Richtig, aber nicht zusätzlich im Router eintragen sondern die vorhandene Umleitung anpassen.

Vielleicht doch ein anderes FTP-Programm? - mh - Wer nutzt von Euch erfolgreich den Total Commander mit einem FTP-Server (win)?

Ich nutze Bulletproof FTP-Server unter WinXP, kann diesen aber nicht grundsätzlich empfehlen. Nicht etwa, weil der schlecht wäre, sondern weil ich (absichtlich) eine steinalte Version nutze und keine Erfahrungen mit aktuellen Versionen habe.

Probier mal FileZilla FTP Server. Der ist mir jetzt als erster kostenfreier in den Sinn gekommen.

Allerdings bezweifle ich, dass der FTP-Server das Problem ist. Geben denn die Logs auf einer oder beiden Seiten (Client+Server) Aufschluss über das Problem?

Grüße
Dalai

[tc_fun]

Guten Morgen,

Allerdings bezweifle ich, dass der FTP-Server das Problem ist. Geben denn die Logs auf einer oder beiden Seiten (Client+Server) Aufschluss über das Problem?

Das ist ein sehr interessanter Gedanke Danke !

# Wo ist die Log-Datei vom Total Commander für den FTP Vorgang?
(unter TC - FTP-Server verbinden - Einstellungen - sehe ich keinen Haken für eine Log-Datei)

Beim FTP-Server in der Log-Datei steht (siehe ganz unten ...)

Probier mal FileZilla FTP Server. Der ist mir jetzt als erster kostenfreier in den Sinn gekommen.

Es darf auch ein kostenpflichtiger FTP-Server sein, im Idealfall einer, der so eine Funktionalität wie der Total Commander "Verzeichnis synchronisieren" besitzt.


-----------


Winrar - Datei entpacken:
CRC-Fehler in Firefox Setup 51.0.exe. Die Datei ist fehlerhaft.

kommentierter Auszug Logdatei FTP-Server

09:58:14.270 [6376] FTP Server started on port 21.

09:59:43.134 [6040] 215 UNIX emulated by Quick 'n Easy FTP Server.

09:59:43.165 [6040] FEAT
09:59:43.165 [6040] 211-Extensions supported SIZE MDTM XCRC 211 END

09:59:43.510 [6040] OPTS UTF8 ON

10:00:18.521 [6800] 227 Entering Passive Mode
10:00:21.596 [6800] STOR Firefox Setup 51.0.rar
10:00:21.596 [6800] 150 Opening BINARY mode data connection for file transfer.
10:01:15.392 [6800] SIZE Firefox Setup 51.0.rar
10:01:15.398 [6800] 213 0
10:01:15.733 [6800] PASV

...

10:03:04.568 [6800] STOR Firefox Setup 51.0.rar
10:03:04.568 [6800] 150 Opening BINARY mode data connection for file transfer.
10:04:22.886 [6800] 226 Transfer complete

... nach 8,5 MB abgebrochen und Übertragung im Total Commander fortgesetzt.
Dann wird ohne weitere Unterbrechung der Rest der 45 MB Datei übertragen.

10:06:44.262 [5004] 227 Entering Passive Mode
10:06:47.310 [5004] APPE Firefox Setup 51.0.rar
10:06:47.310 [5004] 150 Opening BINARY mode data connection for file transfer.
10:07:28.520 [6040] NOOP
10:07:28.520 [6040] 200 OK

...

10:12:42.492 [6800] 226 Transfer complete
10:12:42.536 [6800] SIZE Firefox Setup 51.0.rar
10:12:42.536 [6800] 213 44967806

... die im FTP-Server angezeigte Dateigröße ist richtig, dennoch ist die Datei fehlerhaft, obwohl sie im Binär-Modus in 2 Teilen (Fortsetzung) übertragen wurde
... auch auf dem Zielrechner steht die Dateigröße "44967806" im Total Commander

10:12:42.590 [6800] QUIT

...

[Stefan2]

# Wo ist die Log-Datei vom Total Commander für den FTP Vorgang?
(unter TC - FTP-Server verbinden - Einstellungen - sehe ich keinen Haken für eine Log-Datei)

...

Suche 'ftp log'
(o) Search for any term
Author: ghisler(Author)
Forum: Deutsch

Ergebnis u.a.
viewtopic.php?p=324891#324891

Bitte schalten Sie die FTP-Logdatei ein, vielleicht gibt diese einen Hinweis auf das Problem: Konfigurieren - Einstellungen - FTP- Logdatei.

 

HTH?

[tc_fun]

Vielen Dank Stefan2, TC Log aktiviert Probiere es, sowie mein Gegenpart da ist.

PS:

(x) komprimieren während des Transfers (Mode Z)

... kann das problematisch sein?

Ist aus obiger Log-Datei vom FTP-Server irgendwas zu entnehmen, was auf die Abbruchursache hinweist und warum die Forsetzung der Übertragung nicht korrekt läuft?

[Dalai]

Komprimierung kann problematisch sein, ja. Das gezeigte Log beinhaltet keine Angaben zur Ursache, noch nicht einmal einen Transferabbruch.

Grüße
Dalai

[tc_fun]

Das gezeigte Log beinhaltet keine Angaben zur Ursache, noch nicht einmal einen Transferabbruch.

Danke Dalai

10:04:22.886 [6800] 226 Transfer complete

Meiner Meinung nach ist das die Zeile, wo der FTP-Server ausgibt, dass der Transfer komplett sein sollte und die Übertragung beendet wird.
In Wirklichkeit sind an dieser Stelle nur 8,5 MB übertragen (reproduzierbar ... egal, was für eine Datei).

Ich probiere weiter.

[Dalai]

10:04:22.886 [6800] 226 Transfer complete

Meiner Meinung nach ist das die Zeile, wo der FTP-Server ausgibt, dass der Transfer komplett sein sollte und die Übertragung beendet wird.

Korrekt, aber ich meinte wirklich einen Abbruch. Transferende != Transferabbruch. "Transfer complete" kommt, wenn ein Transfer sauber beendet wurde. Wenn z.B. die Verbindung zwischen Server und Client abbricht, sollte die nicht kommen. Simpler Test: totalcmd.exe via Taskmanager während des Transfers abschießen und auf dem Server in die Logs schauen. Bei mir kommt dort (Transferbeginn in der ersten Zeile)

Code: Select all

(000598) 01.08.2017 23:26:03 - dalai (192.168.x.y) > started downloading 'E:\file'.
(000598) 01.08.2017 23:26:12 - dalai (192.168.x.y) > aborted downloading 'E:\file' -  (00:00:09 - 55972,000 KB - 6219,111 KBytes/s)
(000598) 01.08.2017 23:26:12 - dalai (192.168.x.y) > 426 Cannot retrieve. Failed. Connection reset (10054).
(000598) 01.08.2017 23:26:12 - dalai (192.168.x.y) > disconnected. (00:01:11)

Etwas ähnliches sollte passieren, wenn z.B. die Firewall die Verbindung trennt.

Grüße
Dalai

[tc_fun]

Fortsetzung

Habe im Total Commander Kompression deaktiviert, Dateiname ohne Leerzeichen, FTP Übertragung nicht im Hintergrund, Log-Datei ... dennoch unvollständige Übertragung.

Und bei Fortsetzung der Übertragung stimmt die Dateigröße, aber die RAR Datei hat einen CRC Fehler.

Ich habe die Datei mal auf einen "normalen" FTP Server übertragen, das funktioniert. Im Total Commander Fortschrittsbalken kommt dort die erste Änderung der Anzeige nach 19 % mit 8,1 MB ... und läuft weiter. Während es bei der Verbindung zum Windows-FTP-Server an dieser Stelle zum Abbruch kommt. Kurz nach der ***erstmaligen*** Aktualisierung der Anzeige des Fortschrittsbalken auf 8,1 MB und Teilstück grüner Balken kommt die Fehlermeldung, dass die Übertragung abgebrochen sei. ... mh

Hier die Total Commander (win - Logdatei für den FTP-Server - Übertragung auf Windows 7
(seht Ihr dort etwas, was weiterhelfen könnte?)

TYPE I
200 Type set to BINARY
PASV
227 Entering Passive Mode
STOR Testdatei.rar
150 Opening BINARY mode data connection for file transfer.
Senden
SIZE Testdatei.rar
213 0
PASV
227 Entering Passive Mode
STOR Testdatei.rar
150 Opening BINARY mode data connection for file transfer.
Senden
SIZE Testdatei.rar
213 0
PASV
227 Entering Passive Mode
STOR Testdatei.rar
150 Opening BINARY mode data connection for file transfer.
Senden
SIZE Testdatei.rar
213 0
PASV
227 Entering Passive Mode
STOR Testdatei.rar
150 Opening BINARY mode data connection for file transfer.
Senden
Verzeichnis einlesen
TYPE A
200 Type set to ASCII
PASV
227 Entering Passive Mode
LIST
150 Opening ASCII mode data connection for directory list.
Herunterladen
Warte auf Antwort des Servers...
226 Transfer complete
Verzeichnis einlesen
PASV
227 Entering Passive Mode
LIST
150 Opening ASCII mode data connection for directory list.
Herunterladen
Warte auf Antwort des Servers...
226 Transfer complete

... Fortsetzung per Hand ...

TYPE I
200 Type set to BINARY
SIZE Testdatei.rar
213 3760128
PASV
227 Entering Passive Mode
APPE Testdatei.rar
150 Opening BINARY mode data connection for file transfer.
Senden
SIZE Testdatei.rar
213 3760128
PASV
227 Entering Passive Mode
APPE Testdatei.rar
150 Opening BINARY mode data connection for file transfer.
Senden
SIZE Testdatei.rar
213 6176768
PASV
227 Entering Passive Mode
APPE Testdatei.rar
150 Opening BINARY mode data connection for file transfer.
Senden
SIZE Testdatei.rar
213 7275948
PASV
227 Entering Passive Mode
APPE Testdatei.rar
150 Opening BINARY mode data connection for file transfer.
Senden
SIZE Testdatei.rar
213 9823660
PASV
227 Entering Passive Mode
APPE Testdatei.rar
150 Opening BINARY mode data connection for file transfer.
Senden
SIZE Testdatei.rar
213 12207532
PASV
227 Entering Passive Mode
APPE Testdatei.rar
150 Opening BINARY mode data connection for file transfer.
Senden
SIZE Testdatei.rar
213 14575020
PASV
227 Entering Passive Mode
APPE Testdatei.rar
150 Opening BINARY mode data connection for file transfer.
Senden
SIZE Testdatei.rar
213 17106348
PASV
227 Entering Passive Mode
APPE Testdatei.rar
150 Opening BINARY mode data connection for file transfer.
Senden
SIZE Testdatei.rar
213 19572140
PASV
227 Entering Passive Mode
APPE Testdatei.rar
150 Opening BINARY mode data connection for file transfer.
Senden
SIZE Testdatei.rar
213 22136236
PASV
227 Entering Passive Mode
APPE Testdatei.rar
150 Opening BINARY mode data connection for file transfer.
Senden
SIZE Testdatei.rar
213 24700332
PASV
227 Entering Passive Mode
APPE Testdatei.rar
150 Opening BINARY mode data connection for file transfer.
Senden
SIZE Testdatei.rar
213 27116972
PASV
227 Entering Passive Mode
APPE Testdatei.rar
150 Opening BINARY mode data connection for file transfer.
Senden
SIZE Testdatei.rar
213 29500844
PASV
227 Entering Passive Mode
APPE Testdatei.rar
150 Opening BINARY mode data connection for file transfer.
Senden
SIZE Testdatei.rar
213 32081324
PASV
227 Entering Passive Mode
APPE Testdatei.rar
150 Opening BINARY mode data connection for file transfer.
Senden
SIZE Testdatei.rar
213 34612652
PASV
227 Entering Passive Mode
APPE Testdatei.rar
150 Opening BINARY mode data connection for file transfer.
Senden
SIZE Testdatei.rar
213 37225900
PASV
227 Entering Passive Mode
APPE Testdatei.rar
150 Opening BINARY mode data connection for file transfer.
Senden

[Dalai]

Und bei Fortsetzung der Übertragung stimmt die Dateigröße, aber die RAR Datei hat einen CRC Fehler.

Kannst du feststellen (z.B. mittels Vergleich nach Inhalt), wo und wie sich genau der Unterschied darstellt?

Ich habe die Datei mal auf einen "normalen" FTP Server übertragen, das funktioniert.

Kannst du das etwas näher erläutern? Was ist für dich ein normaler FTP-Server? Unter welchem OS läuft der? Steht der im selben Netzwerk?

(seht Ihr dort etwas, was weiterhelfen könnte?)

Ja, ich sehe einen Haufen Wiederholungen. Entweder sind das parallele Verbindungen (mit TC nicht möglich) oder Verbindungsabbrüche. Das ist definitiv nicht normal. In welchen zeitlichen Abständen erfolgen diese Abbrüche? Von wo überträgst du die Dateien zum FTP? Geht's in die andere Richtung fehlerfrei? Funktioniert's mit einem anderen Client problemlos? Irgendwie muss man ja langsam mal eingrenzen, ob der Client oder der Server oder das/die Netzwerk(e) das Problem ist/sind.

Grüße
Dalai

[tc_fun]

Hallo Dalai,

vielen Dank für Dein Feedback - ich versuche, Deine Fragen zu beantworten.

Ein "normaler" FTP-Server ist für mich von einem kommerziellen Anbieter, bei dem man z.B. seine Internetseite hosten und somit Dateien hochladen kann. Das funktioniert auch mit der hier verwendeten 40 MB Datei (und anderen problemlos).

Probleme habe ich damit, mit dem Total Commander auf einen FTP-Server unter Windows 7 (privat) übers Internet eine Datei hochzuladen.

Im lokalen Netzwerk gibt es keine Probleme - das sind alles Transfers übers Internet, die ich oben als fehlerhaft beschrieben habe.

"Ja, ich sehe einen Haufen Wiederholungen. Entweder sind das parallele Verbindungen (mit TC nicht möglich) oder Verbindungsabbrüche."

Es sind Verbindungsabbrüche nach 3,4 MB, dann später nochmal und noch ein drittes Mal und per Hand Übertragung fortgesetzt.

"In welchen zeitlichen Abständen erfolgen diese Abbrüche?"

DSL Anschluss 16.000 - Upload von 40 MB (3 bzw. 8 MB erfolgreich ... dauert nur wenige Minuten, dann kommt der Abbruch reproduzierbar).

"Von wo überträgst du die Dateien zum FTP?"

Von Windows 8 mit dem Total Commander von einer Festplatte (unterschiedliche HD / SSD getestet).

"Geht's in die andere Richtung fehlerfrei?"

Kann ich nicht testen, da auf meinem PC kein FTP-Server läuft.

"Funktioniert's mit einem anderen Client problemlos?"

Das wäre noch ein Gedanke, mal alternativ zum Total Commander ein Tool zum upload zu verwenden.

Danke

[Dalai]

Ein "normaler" FTP-Server ist für mich von einem kommerziellen Anbieter, bei dem man z.B. seine Internetseite hosten und somit Dateien hochladen kann. Das funktioniert auch mit der hier verwendeten 40 MB Datei (und anderen problemlos).

OK, also irgendwas unter Linux (oder BSD) gehostetes, was nicht im selben Netzwerk steht. Das bedeutet leider auch, wir wissen weiterhin nicht, ob das Netzwerk (oder beide, von Client und Server), der FTP-Server oder der/die Router das Problem sind.

Im lokalen Netzwerk gibt es keine Probleme - das sind alles Transfers übers Internet, die ich oben als fehlerhaft beschrieben habe.

Das schließt den FTP-Server zwar nicht als Problemursache aus, lässt ihn aber wenigstens unwahrscheinlicher werden.

Es sind Verbindungsabbrüche nach 3,4 MB, dann später nochmal und noch ein drittes Mal und per Hand Übertragung fortgesetzt.

Das sind nicht nur drei Abbrüche! Zähl allein mal die Anzahl der SIZE oder STOR/APPE Komandos!

DSL Anschluss 16.000 - Upload von 40 MB (3 bzw. 8 MB erfolgreich ... dauert nur wenige Minuten, dann kommt der Abbruch reproduzierbar).

Ich bezog mich direkt auf das von dir gepostete Log. In welchen Abständen schreibt TC ein STOR bzw. SIZE ins Log? Wieviele Sekunden liegen dazwischen? Ist das regelmäßig?

Von Windows 8 mit dem Total Commander von einer Festplatte (unterschiedliche HD / SSD getestet).

OK, also lokaler Massenspeicher auf FTP.

Kann ich nicht testen, da auf meinem PC kein FTP-Server läuft.

Das vielleicht nicht, aber du kannst Dateien vom FTP runterladen. Das obige Log zeigt ja nur Uploadversuche.

Das wäre noch ein Gedanke, mal alternativ zum Total Commander ein Tool zum upload zu verwenden.

OK, da war ich etwas ungenau. Mit Client meinte ich nicht etwas anderes als TC (das wäre ja Blasphemie! ) sondern ein anderes (Windows-)System mit TC, das auf denselben FTP-Server zugreift.

Grüße
Dalai

[tc_fun]

Guten Morgen Dalai,

dank Deiner vielen Ideen sind wir einen großen Schritt weiter.

Habe Filezilla FTP-Client anstelle von Total Commander als Client getestet.

Die gute Nachricht, die Testdatei wurde mit Filezilla (Client) fehlerfrei übertragen.

Die Nachricht, die weiterhilft, auch hier gab es die Abbrüche, mit denen FileZilla (Client) allerdings umgehen konnte (siehe Log-Datei unten).

Ob der Total Commander eine entsprechende Fehlerroutine und automatische Wiederaufnahme implementieren kann - das weiß alleine Herr Ghisler , der in die Tiefen des Quellcodes schauen kann.
(oder gibt es sowas bereits jetzt? ... manuelle Wiederaufnahme führte zu CRCFehlern)

Hier die Log-Datei Auszug von FileZilla (Client):

10:17:41 Befehl: STOR Testdatei_2.rar
10:17:41 Antwort: 150 Opening BINARY mode data connection for file transfer.
10:17:41 Fehler: Zeitüberschreitung der Verbindung nach 20 Sekunden Inaktivität
10:17:41 Fehler: Dateiübertragung fehlgeschlagen nach Übertragung von 9.961.472 Bytes in 23 Sekunden
10:17:41 Status: Verbindung zum Server getrennt

10:18:05 Befehl: APPE Testdatei_2.rar
10:18:05 Antwort: 150 Opening BINARY mode data connection for file transfer.
10:18:05 Fehler: Zeitüberschreitung der Verbindung nach 20 Sekunden Inaktivität
10:18:05 Fehler: Dateiübertragung fehlgeschlagen nach Übertragung von 9.961.472 Bytes in 20 Sekunden
10:18:05 Status: Verbindung zum Server getrennt

und so geht es munter weiter - bei 40 MB - 4 Abbrüche und automatische Wiederaufnahmen in Filezilla (Client) - und am Ende eine fehlerfreie Datei auf dem FTP Server (win 7)