Anzeige - [Hier werben / Mediadaten]
(?) Tags raten (?) (edit)
 
Reply to this topicStart new topicStart Poll
> FTP Upload von 100'000 Pics, FTP-Programme sind überfordert..
dandelion
Geschrieben am: Do 3.02.2005, 21:42
Report PostQuote Post

AyomRank 3
******

Gruppe: Member (aktiv)
Beiträge: 32
Mitglied seit: 30.06.2004


Hallo,

Ich muss auf meinen dedicated Server ca. 100'000 Bilder (in verschiedenen Verzeichnissen und Unterverzeichnissen) hochladen. Dies ist gar nicth so einfach, weil ich ständig Fehlermeldungen kriege. Der Internet Explorer (mit ftp://ftp....) ist überfordert, sobald man mehrere tausend Files kopieren will; auch habe ich das Tool PSFTP Professional ausprobiert - auch da
kriege ich Fehlermeldungen (Memory overflow), wenn ich das ganze Hauptverzeichnis kopieren will. Gibt es denn wirklich keinen zuverlässigen Weg, ein Verzeichnis mit vielen Bildern auf einen Server hochzuladen ? Ich wäre für jeden Hinweis dankbar !

Philipp
Top
PMEmail Poster
Top
 
 
Irene
irene.ch
#2 Geschrieben am: Do 3.02.2005, 22:22 (+00:39)
Report PostQuote Post

AyomRank 7
Group Icon

Gruppe: Experten Entwicklung (Mod)
Beiträge: 1114
Mitglied seit: 3.05.2004


Hm, das sind schon etwas viele Dateien huh.gif
Müssten ja auch grössenmässig ziemlich viele Megabytes sein, und da werden wohl die meisten FTP-Programme ein Problem haben - dafür sind die einfach nicht ausgelegt.
Falls es nicht unterbunden ist, würd ich das über einen Laufwerksmap machen. Also genauso, wie man im lokalen Netzwerk auf den Fileserver zugreift. Aus sicherheitstechnischen Gründen sollte sowas heutzutage eigentlich nicht mehr möglich sein, aber vielleicht könnte man es ja temporär und nur für Deine IP zulassen.

Sonst würd ich sagen, brenn die Dateien auf CD oder tu sie auf einen USB-Stick oder so ähnlich, und schick sie dem Hoster, dass der sie auf den Server tut. Vielleicht ist das dem sogar lieber, als wenn die Leitung stundenlang ausgelastet ist ;-)

Griessli
Irene


--------------------
Top
PMUsers Website
Top
 
Ansgar Berhorn
TOPdesk Deutschland
#3 Geschrieben am: Do 3.02.2005, 23:54 (+01:31)
Report PostQuote Post

AyomRank 6
Group Icon

Gruppe: Experten Entwicklung (Mod)
Beiträge: 857
Mitglied seit: 8.10.2004


Am meisten Sinn würde machen, die Dateien in ein TAR-Archiv oder ähnliches (ZIP, etc) zu packen, dass man dann hinterher auf dem Server wieder leicht entpacken kann.
Das macht es zwar nicht schneller, aber man spart sich den ständigen Auf- und Abbau der Leitung, die bei der FTP-Übertragung bei jeder Datei neu stattfindet.

Wenn der Server Webdav Unterstützt, wäre das eventuell eine Alternative, weil das Protokoll neuer ist und Repository-Tools (TortoiseSVN, tigris.org) einen Abgleich von großen Datenmengen ermöglichen.

QUOTE
Vielleicht ist das dem sogar lieber, als wenn die Leitung stundenlang ausgelastet ist ;-)

Der dürfte sich eher die Hände reiben, weil eventuell Zusatztraffic zu berechnen ist. ;-)


--------------------
Top
PMUsers Website
Top
 
Roger Bobst
calac gmbh
#4 Geschrieben am: Fr 4.02.2005, 10:14 (+10:20)
Report PostQuote Post

AyomRank 5
Group Icon

Gruppe: Experten Entwicklung (Mod)
Beiträge: 426
Mitglied seit: 15.02.2004


Ich würde rsync oder scp nehmen. Dies bedingt aber, dass du einen SSH Zugang zum Server hast. Wenn das nicht vorhanden ist, würd ich das konzept von Ansgar gehen: Einpacken und in einem Stück hochladen. Problem bei dieser Lösung: Wie entpacken auf der Serverseite ohne SSH Zugang ?

Andererseits frag ich mich, ob nicht einfach dein FTP Client Müll ist: Wir haben früher sinnlos Daten per FTP übertragen und hatten ausser Firewall- und Performanceproblemen nie Abstürze der Clientsoftware. Evt. den von www.flashfxp.com testen.
Top
PMEmail PosterUsers Website
Top
 
dandelion
#5 Geschrieben am: Sa 5.02.2005, 10:42 (+24:28)
Report PostQuote Post

AyomRank 3
******

Gruppe: Member (aktiv)
Beiträge: 32
Mitglied seit: 30.06.2004


Danke für all Eure Tipps und Hinweise !

Ich habe mal das Programm flashfxp ausprobiert und bis jetzt hab ich tatsächlich noch
keine Probleme damit, ausser, dass der Upload ziemlich langsam ist.
So wie es aussieht, muss ich den noch etwa 6x24 Std. laufen lassen. Aber ich
bin froh, mich nicht mehr mit Fehlermeldungen und Speicherüberlaufen herumschlagen zu müssen.

Gruss
dandelion
Top
PMEmail Poster
Top
 
Michael Hierweck
#6 Geschrieben am: Sa 5.02.2005, 11:47 (+01:04)
Report PostQuote Post

AyomRank 4
********

Gruppe: Member (aktiv)
Beiträge: 72
Mitglied seit: 22.08.2004


Ich schließe mich Roger an: nimm, wenn möglich, rsync. Rsync kann jederzeit bei Unterbrechung wieder aufsetzen bzw. bei späteren Updates nur die Änderungen hochladen bzw. löschen. Rsync kann über rsh oder ssh (ssh kann transparent komprimieren) arbeiten. ssh Zugriff sollte man auf einem Dedicated Server eigentlich haben - oder?
Top
PMEmail PosterUsers Website
Top
 
sequenz
#7 Geschrieben am: Sa 5.02.2005, 12:04 (+00:17)
Report PostQuote Post

AyomRank 2
****

Gruppe: Member (aktiv)
Beiträge: 11
Mitglied seit: 4.02.2005


FTP kann unterbrochene Up/downloads auch wieder aufnehmen. Ich wuerd das zeugs auch per ssh oder rsync hochladen, aber das gibts im ie nicht. wieso willst du soviele bilder hochladen? sinds denn grosse? oder nur so kleine? mit windows gibt das sicher probleme, drum besser in tranchen machen...


--------------------
Top
PMEmail PosterUsers Website
Top
 
Thema wird von 0 Benutzer(n) gelesen (0 Gäste und 0 anonyme Benutzer)
0 Mitglieder:
Trackback-Url: http://www.ayom.com/track/t/5905

Topic Options Reply to this topicStart new topicStart Poll

 


> Ähnliche Themen
[S] PHP -> Upload auf One-Klick-Hoster Tannenbaum 286 13 Mi 22.10.2008, 17:31




Anzeige - [Hier werben / Mediadaten]



Anzeigen


[Hier werben / Mediadaten]