Performance beim upload vielen kleinen Dateien per FTP

German support forum

Moderators: Hacker, Stefan2, white

Post Reply
SGR
Junior Member
Junior Member
Posts: 4
Joined: 2004-07-16, 12:56 UTC

Performance beim upload vielen kleinen Dateien per FTP

Post by *SGR »

Hallo!

Für den Upload von 4400 Dateien (Gesamtgröße 31 MB) beim gleichzeitigen überschreiben aller Dateien auf dem Server benötiget TC gute 2 Stunden. D.h. jede Datei benötigt über 1,5 s.

Warum? kann man das beschleunigen?

Vielen Dank im Voraus!


Gruß aus Berlin
Stefan
User avatar
Cineatic
Power Member
Power Member
Posts: 876
Joined: 2003-06-02, 14:09 UTC

Post by *Cineatic »

Hallo!

Da spielen mehrere Faktoren eine Rolle. Zum Beispiel:

Was nutzt du für eine Internetverbindung?
Wie ist der Server konfiguriert?
Nutzt du einen Proxy?
Gruß,
Christian
SGR
Junior Member
Junior Member
Posts: 4
Joined: 2004-07-16, 12:56 UTC

Post by *SGR »

Hallo!

Es scheint egal, ob ich per analog, isdn oder DSL reingehe - heute hatte ich es gerade per DSL (von Arbeit aus).
Was meinst Du genau mit Serverkonfiguration?
Einen Proxy verwende ich nicht.

Danke!

Gruß Stefan
User avatar
Cineatic
Power Member
Power Member
Posts: 876
Joined: 2003-06-02, 14:09 UTC

Post by *Cineatic »

SGR wrote:...
Was meinst Du genau mit Serverkonfiguration?
...
Damit meinte ich, wie der FTP-Server, auf den du die Daten hochlädst, konfiguriert ist. Z.B. kann er so konfiguriert sein, das er automatisch jede zu überschreibende Datei vorher noch einmal als Backup sichert, oder aber dass die Transfergeschwindigkeit gedrosselt wird.

Probiere doch bitte mal den Passive Modus für den Transfer aus. Das kann auch schon mal helfen.

Hast du schon mal versucht, mit einem anderen FTP-Client die Daten hochzuladen? Zum Beispiel mit FileZilla
Falls es damit ebenfalls nicht schneller geht, liegt es schon mal nicht am Total Commander :wink:
Gruß,
Christian
formtapez
Junior Member
Junior Member
Posts: 48
Joined: 2004-02-13, 19:41 UTC

Post by *formtapez »

FTP ist generell nicht dafür geeignet viele kleine Dateien zu übertragen, weil für jede Datei einfach sehr viele Kommandos hin- und hergeschickt werden.
Am schnellsten würde es gehen wenn Du die Dateien vorher z.B. in ein ZIP-File packst und dieses überträgst. Ok, das geht nicht immer, ich weiss.

MfG
formtapez
SGR
Junior Member
Junior Member
Posts: 4
Joined: 2004-07-16, 12:56 UTC

Post by *SGR »

Hallo!

Den Passiv-Modus habe ich probiert - hat nichts geholfen.

Auch einen Test mit FileZilla habe ich durchgeführt - und siehe da:
bei "Use multible connections to transfer files"=10 kam ich für die 4400 Dateien auf 20 min statt >2 h wie beim Total Commander.

Eine solche Einstellung habe ich beim Total Commander leider nicht gefunden.


Gruß Stefan
User avatar
Sheepdog
Power Member
Power Member
Posts: 5150
Joined: 2003-12-18, 21:44 UTC
Location: Berlin, Germany
Contact:

Post by *Sheepdog »

SGR wrote:mit FileZilla .... "Use multible connections to transfer files"=10

Eine solche Einstellung habe ich beim Total Commander leider nicht gefunden.
Ham wa nich, kriegn wa neechstet Vierteljahr nich rin.

Sieh auch mal hier

sheepdog
"A common mistake that people make when trying to design something
completely foolproof is to underestimate the ingenuity of complete fools."
Douglas Adams
SGR
Junior Member
Junior Member
Posts: 4
Joined: 2004-07-16, 12:56 UTC

Post by *SGR »

Hi!

Schade auch...ich hätte gern den TC dafür benutzt.

Danke für den Link - da stand nun wirklich alles drin.

Gruß Stefan
Post Reply