PUT Recursively Dateien auf einem Remote-Server mit FTP

Question

Ich bin derzeit in einer Situation, wo ich sehr begrenzten Zugriff auf einen Server haben, müssen aber zum Hochladen und eine erhebliche Menge an Dateien in einem einzigen Verzeichnisstruktur enthalten herunterladen. Ich habe nicht den SSH-Zugriff haben, so kann ich SCP nicht verwenden -. Und rsync ist keine Option leider

Ich bin derzeit ncftpput, das ist toll, aber es scheint sehr langsam zu sein (trotz einer schnellen Verbindung).

Gibt es eine Alternative / bessere Methode Ich sehe in könnte?

(Bitte akzeptieren Sie meine Entschuldigung, wenn diese abgedeckt wurde, ich habe eine schnelle Suche vor der Veröffentlichung, aber meine Frage beantwortet haben nichts gefunden, das spezifisch)

Answer 1

Versuchen LFTP mit: http://lftp.yar.ru/

oder yafc: http://yafc.sourceforge.net/index.php

Answer 2

Wenn Sie eine gute Verbindung haben, würde ich empfehlen, den FTP-Server über das GNOME oder KDE-Dateimanager Montag oder auch mit curlftpfs . Dann können Sie es nur wie ein Ordner zu behandeln.

Answer 3

Ich bin nicht vertraut mit ncftpput. Für nicht-interaktive FTP, habe ich früher immer die Perl-Net :: FTP-Modul - http: //perldoc.perl.org/Net/FTP.html

Dies wird schneller sein, weil Sie sich einloggen können, dann auf einmal die Transfers alles tun (es scheint, von einem flüchtigen Blick, die Sie ncftpput einmal für jede Datei ausführen man / put).

Denken Sie daran, NIEMALS ASCII Mangeln verwenden! Dies ist die Standardeinstellung, so verwenden:

$ftp->binary

ASCII Mangeln muss im gleichen Feuer mit MySQL automatische-Zeitzone-Dolmetschen sterben.

Answer 4

Da ich immer ein Problem mit diesem am Ende mit, ich werde meine Notizen schreibe hier:

Eine Sache, die ich bekommen immer zu verwechseln ist die Syntax; so unten ein bash Tester Skript, das einige temporären Verzeichnisse erstellt, beginnt dann einen temporären FTP-Server und vergleicht rsync (im Klar lokalen Dateimodus, da es nicht ftp nicht unterstützt) mit lftp und ftpsync.

Die Sache ist - man kann rsync /path/to/local /path/to/remote/ verwenden, und rsync automatisch herauszufinden, dass Sie ein local Unterverzeichnis unter remote erstellt werden sollen; jedoch für lftp oder ftpsync Sie Haben das Zielverzeichnis manuell angeben, wie in ... /path/to/local /path/to/remote/local (wenn es nicht es erstellt wird, nicht vorhanden ist).

Sie können die ftpserver-cli.py in finden Wie vorübergehend ich ein FTP laufen Server? - Fragen Sie Ubuntu ; und ftpsync ist hier: FTPSync (aber beachten Sie, es ist fehlerhaft, siehe auch Search/grep ftp remote Dateinamen - Unix & Linux-Stack Exchange-);

Hier ist eine verkürzte Ausgabe des puttest.sh Skript, das rekursive Put-Verhalten in verschiedenen Fällen zeigt:

$ bash puttest.sh 
Recreate directories; populate loctest, keep srvtest empty:
show dirs:
+ tree --noreport -a /tmp/srvtest /tmp/loctest
/tmp/srvtest
/tmp/loctest
├── .git
│   └── tempa2.txt
└── tempa1.txt

*NOTE, rsync can automatically figure out parent dir:
+ rsync -a --exclude '*.git*' /tmp/loctest /tmp/srvtest/
show dirs:
+ tree --noreport -a /tmp/srvtest /tmp/loctest
/tmp/srvtest
└── loctest
    └── tempa1.txt
/tmp/loctest
├── .git
│   └── tempa2.txt
└── tempa1.txt
cleanup:
+ rm -rf /tmp/srvtest/loctest

Start a temporary ftp server:
+ sudo bash -c 'python /path/to/pyftpdlib/ftpserver-cli.py --username=user --password=12345 --directory=/tmp/srvtest &'
+ sleep 1
Using: user: user pass: 12345 port: 21 dir: /tmp/srvtest
[I 14-03-02 23:24:01] >>> starting FTP server on 127.0.0.1:21, pid=21549 <<<
[I 14-03-02 23:24:01] poller: <class 'pyftpdlib.ioloop.Epoll'>
[I 14-03-02 23:24:01] masquerade (NAT) address: None
[I 14-03-02 23:24:01] passive ports: None
[I 14-03-02 23:24:01] use sendfile(2): False
test with lftp:

*NOTE, lftp syncs *contents* of local dir (rsync-like syntax doesn't create target dir):
+ lftp -e 'mirror -R -x ".*\.git.*" /tmp/loctest / ; exit' -u user,12345 127.0.0.1
show dirs:
+ tree --noreport -a /tmp/srvtest /tmp/loctest
/tmp/srvtest
└── tempa1.txt
/tmp/loctest
├── .git
│   └── tempa2.txt
└── tempa1.txt
cleanup:
+ rm -rf /tmp/srvtest/tempa1.txt

*NOTE, specify lftp target dir explicitly (will be autocreated):
+ lftp -e 'mirror -R -x ".*\.git.*" /tmp/loctest /loctest ; exit' -u user,12345 127.0.0.1
show dirs:
+ tree --noreport -a /tmp/srvtest /tmp/loctest
/tmp/srvtest
└── loctest
    └── tempa1.txt
/tmp/loctest
├── .git
│   └── tempa2.txt
└── tempa1.txt
cleanup:
+ sudo rm -rf /tmp/srvtest/loctest

*NOTE, ftpsync syncs *contents* of local dir (rsync-like syntax doesn't create target dir); also info mode -i is buggy (it puts, although it shouldn't):

*NOTE, ftpsync --ignoremask is for older unused code; use --exclude instead (but it is buggy; need to change  in source)
+ /path/to/ftpsync/ftpsync -i -d '--exclude=.*\.git.*' /tmp/loctest ftp://user:12345@127.0.0.1/
show dirs:
+ tree --noreport -a /tmp/srvtest /tmp/loctest
/tmp/srvtest
└── tempa1.txt
/tmp/loctest
├── .git
│   └── tempa2.txt
└── tempa1.txt
cleanup:
+ sudo rm -rf /tmp/srvtest/tempa1.txt

*NOTE, specify ftpsync target dir explicitly (will be autocreated):
+ /path/to/ftpsync/ftpsync -i -d '--exclude=.*\.git.*' /tmp/loctest ftp://user:12345@127.0.0.1/loctest
show dirs:
+ tree --noreport -a /tmp/srvtest /tmp/loctest
/tmp/srvtest
└── loctest
    └── tempa1.txt
/tmp/loctest
├── .git
│   └── tempa2.txt
└── tempa1.txt
cleanup:
+ sudo rm -rf /tmp/srvtest/loctest
+ sudo pkill -f ftpserver-cli.py

Und hier ist das puttest.sh Skript:

#!/usr/bin/env bash
set -x

# change these to match your installations:
FTPSRVCLIPATH="/path/to/pyftpdlib"
FTPSYNCPATH="/path/to/ftpsync"

{ echo "Recreate directories; populate loctest, keep srvtest empty:"; } 2>/dev/null

sudo rm -rf /tmp/srvtest /tmp/loctest

mkdir /tmp/srvtest

mkdir -p /tmp/loctest/.git
echo aaa > /tmp/loctest/tempa1.txt
echo aaa > /tmp/loctest/.git/tempa2.txt

{ echo "show dirs:"; } 2>/dev/null
tree --noreport -a /tmp/srvtest /tmp/loctest

{ echo -e "\n*NOTE, rsync can automatically figure out parent dir:"; } 2>/dev/null

rsync -a --exclude '*.git*' /tmp/loctest /tmp/srvtest/

{ echo "show dirs:"; } 2>/dev/null
tree --noreport -a /tmp/srvtest /tmp/loctest

{ echo "cleanup:"; } 2>/dev/null
rm -rf /tmp/srvtest/*

{ echo -e "\nStart a temporary ftp server:"; } 2>/dev/null

# https://askubuntu.com/questions/17084/how-do-i-temporarily-run-an-ftp-server

sudo bash -c "python $FTPSRVCLIPATH/ftpserver-cli.py --username=user --password=12345 --directory=/tmp/srvtest &"
sleep 1

{ echo "test with lftp:"; } 2>/dev/null
# see http://russbrooks.com/2010/11/19/lftp-cheetsheet
# The -R switch means "reverse mirror" which means "put" [upload].
{ echo -e "\n*NOTE, lftp syncs *contents* of local dir (rsync-like syntax doesn't create target dir):"; } 2>/dev/null

lftp -e 'mirror -R -x ".*\.git.*" /tmp/loctest / ; exit' -u user,12345 127.0.0.1

{ echo "show dirs:"; } 2>/dev/null
tree --noreport -a /tmp/srvtest /tmp/loctest

{ echo "cleanup:"; } 2>/dev/null
rm -rf /tmp/srvtest/*

{ echo -e "\n*NOTE, specify lftp target dir explicitly (will be autocreated):"; } 2>/dev/null

lftp -e 'mirror -R -x ".*\.git.*" /tmp/loctest /loctest ; exit' -u user,12345 127.0.0.1

{ echo "show dirs:"; } 2>/dev/null
tree --noreport -a /tmp/srvtest /tmp/loctest

{ echo "cleanup:"; } 2>/dev/null
sudo rm -rf /tmp/srvtest/*

{ echo -e "\n*NOTE, ftpsync syncs *contents* of local dir (rsync-like syntax doesn't create target dir); also info mode -i is buggy (it puts, although it shouldn't):"; } 2>/dev/null
{ echo -e "\n*NOTE, ftpsync --ignoremask is for older unused code; use --exclude instead (but it is buggy; need to change `  'exclude=s' => \$opt::exclude,` in source)"; } 2>/dev/null

$FTPSYNCPATH/ftpsync -i -d --exclude='.*\.git.*' /tmp/loctest ftp://user:12345@127.0.0.1/

{ echo "show dirs:"; } 2>/dev/null
tree --noreport -a /tmp/srvtest /tmp/loctest

{ echo "cleanup:"; } 2>/dev/null
sudo rm -rf /tmp/srvtest/*

{ echo -e "\n*NOTE, specify ftpsync target dir explicitly (will be autocreated):"; } 2>/dev/null

$FTPSYNCPATH/ftpsync -i -d --exclude='.*\.git.*' /tmp/loctest ftp://user:12345@127.0.0.1/loctest

{ echo "show dirs:"; } 2>/dev/null
tree --noreport -a /tmp/srvtest /tmp/loctest

{ echo "cleanup:"; } 2>/dev/null
sudo rm -rf /tmp/srvtest/*


sudo pkill -f ftpserver-cli.py

{ set +x; } 2>/dev/null