RSync: estrema lentezza!

Discussioni sulla replicazione remota.
iena
Messaggi: 24
Iscritto il: 12 dic 2008, 10:26

RSync: estrema lentezza!

Messaggio da iena »

Ho un TS-409 PRO

Ho un PC con XP sul quale ho installato il servizio RSync

Ho schedulato un backup che parte tutte le sere alle 23 e che fa il backup incrementale di circa 30GB di files su un HD USB attaccato a questo PC.

Il problema è che la mattina dopo alle 8.30 quando la segretaria accede al PC e stacca l'hd esterno il backup non è ancora finito!

Come mai ci mette così tanto? Non c'è un modo per accelerare il processo? Non ho la possibilità di attaccare l'HD esterno direttamente alla porta USB del NAS.
Avatar utente
edo
Messaggi: 2654
Iscritto il: 25 ago 2008, 22:59
Località: Brescia
Contatta:

Re: RSync: estrema lentezza!

Messaggio da edo »

Con un calcolo veloce trasferisci circa 50 mega al minuto, in effetti è un po' pochino. :o
Servono altre info:
Se provi a trasferire un file da pc a nas a che velocità arrivi? ( da PC non da HDD collegato in USB)
Che tipo di Raid utilizzi e con quanti dischi?
E' indispensabile fare la copia totale e non la copia solo dei file modificati? (dato che RSync lo permette)
- TS-659 Pro - TS-509 Pro - FW v3.8.0 - 6 * WD RED 2TB - RAID5 - EXT4 -
- iMac 27 i7 3,4Ghz SSD256GB - OSX 10.8.2 Mountain Lion
- TViXM6500A - Popcorn Hour C300 A400 - NMP1000P - AppleTv
- Dreambox 8000HD -Dreambox 800se - XBOX360 - WII
- Router Netgear DGND3700 - Switch CISCO SG 100-16 - APC Smart-UPS 1500
- http://www.hitech-audiovideo.it
iena
Messaggi: 24
Iscritto il: 12 dic 2008, 10:26

Re: RSync: estrema lentezza!

Messaggio da iena »

Allora, i dati prima erano su un server IBM con installata una distro di linux. Quando ho passato via rete tutti i dati da questo server al NAS ci ha impiegato un paio d'ore e questo era il tempo che stimavo ci avrebbe messo per fare i backup notturni.

Uso 3 dischi da 500GB in raid 5

Il backup è già incrementale, solo che la prima volta ovviamente deve fare il backup di tutto. Solo quello del venerdì è andato a buon fine e guardando dal log ha iniziato alle 23 del venerdì per finire alle 4 della domenica!! 29 ORE!!

Ora il backup incrementale del venerdì lo fa in circa 5 ore, già accettabile, ma è decisamente troppo per 30GB di roba ...

La rete è a 100mbps
Avatar utente
edo
Messaggi: 2654
Iscritto il: 25 ago 2008, 22:59
Località: Brescia
Contatta:

Re: RSync: estrema lentezza!

Messaggio da edo »

Visto e considerato che il NAS registra con una velocità accettabile il problema sta altrove.
La prova che ti avevo chiesto era da farsi sul pc che oggi fa il RSync per verificare se fosse il disco collegato in USB a rallentare il tutto.
Non conosco in dettaglio il comportamento di RSync ma penso che verifichi di ogni file se è stato modificato, creando una marea di piccoli pacchetti di comunicazione poco performanti per reti, USB, Raid5, etc, rallentando molto tutto il processo di BackUp.
- TS-659 Pro - TS-509 Pro - FW v3.8.0 - 6 * WD RED 2TB - RAID5 - EXT4 -
- iMac 27 i7 3,4Ghz SSD256GB - OSX 10.8.2 Mountain Lion
- TViXM6500A - Popcorn Hour C300 A400 - NMP1000P - AppleTv
- Dreambox 8000HD -Dreambox 800se - XBOX360 - WII
- Router Netgear DGND3700 - Switch CISCO SG 100-16 - APC Smart-UPS 1500
- http://www.hitech-audiovideo.it
Avatar utente
luciano
Amministratore
Messaggi: 8710
Iscritto il: 25 apr 2008, 01:45
Località: Roma
Contatta:

Re: RSync: estrema lentezza!

Messaggio da luciano »

Iena, premesso che non arriverai mai alle prestazioni di un PC (non con il 409 perlomeno), ti volevo chiedere: che versione del firmware hai installata sul 409?
iena
Messaggi: 24
Iscritto il: 12 dic 2008, 10:26

Re: RSync: estrema lentezza!

Messaggio da iena »

Allora provo a fare la copia diretta su quel PC, così vedo se le prestazioni decadono o sono in linea a quelle di prima.

Per quanto riguarda il tempo magari provo a cambiare tipologia, fare copia diretta invece che backup incrementale.

La versione del firmware è l'ultima, 2.0.2 se non ricordo male, so che non avrò mai le prestazioni di un server, ma non credevo che sarei passato da 1h e mezza a 29 ore :D
Avatar utente
luciano
Amministratore
Messaggi: 8710
Iscritto il: 25 apr 2008, 01:45
Località: Roma
Contatta:

Re: RSync: estrema lentezza!

Messaggio da luciano »

Secondo i test di smallnetbuilder il 409 trasferisce file di dimensioni mediamente grandi (32MB - 1GB) su una rete a 100Mb/s, a circa 9,4MB/s in scrittura e 9,2MB/s in lettura. Ovvero in un minuto scrive circa 9,4 x 60 = 564MB.
Con file di dimennsioni mediamente piccoli (64KB - 16MB) sempre a 100Mb/s, scendiamo a 8,1MB/s in scrittura e 8,5MB/s in lettura.
Dai test si nota anche la diversa enfasi che i vari produttori danno alle prestazioni in lettura/scrittura, qualcuno preferisce prediligere i file di grosse dimensioni (secondo + corretto in funzione della destinazione d'uso tipica dei NAS) qualcun altro viceversa i piccoli.
iena
Messaggi: 24
Iscritto il: 12 dic 2008, 10:26

Re: RSync: estrema lentezza!

Messaggio da iena »

Ok, ma anche tenendo la velocità più bassa stimata e raddoppiando il tempo necessario che verrebbe fuori dai calcoli siamo sempre attorno alle 2h per 30GB di roba .. quello che non riesco a capire è come possa metterci 29 ore per duplicare il nas tramite rsync ...
Avatar utente
luciano
Amministratore
Messaggi: 8710
Iscritto il: 25 apr 2008, 01:45
Località: Roma
Contatta:

Re: RSync: estrema lentezza!

Messaggio da luciano »

E' evidente che c'è qualcosa che non torna nella tua rete. Anche mettendosi nella peggiore condizione per 30GB dovresti essere nell'ordine della mezzora. Se proprio vogliamo esagerare un'ora!
iena
Messaggi: 24
Iscritto il: 12 dic 2008, 10:26

Re: RSync: estrema lentezza!

Messaggio da iena »

Boh, la rete non è mia, e cmq le prestazioni sono sempre state in linea con una rete a 100Mbps ... magari provo a fare un po' di prove attaccando direttamente il nas al pc sul quale viene fatto il backup...
Avatar utente
luciano
Amministratore
Messaggi: 8710
Iscritto il: 25 apr 2008, 01:45
Località: Roma
Contatta:

Re: RSync: estrema lentezza!

Messaggio da luciano »

"La potenza è nulla senza controllo"...... recitava un famoso spot TV. ;)
Fai la prova che hai detto e vediamo cosa/se cambia la situazione!
iena
Messaggi: 24
Iscritto il: 12 dic 2008, 10:26

Re: RSync: estrema lentezza!

Messaggio da iena »

Ma non esiste un modo per vedere lo stato di avanzamento dell'RSync? Leggendo sui vari forum in inglese parlano di percentuali di avanzamento, ma io non trovo nessun punto dove posso vederlo ... sono io cecato?
Avatar utente
e.pastore
Messaggi: 61
Iscritto il: 23 apr 2009, 14:18
Località: Roma
Contatta:

Re: RSync: estrema lentezza!

Messaggio da e.pastore »

Scusate se mi intrometto, sono anch'io nella condizione di dover fare il backup dal Nas (TS-119) ad un PC con Windows XP ma non riesco (forse mi manca qualche fondamentale) a configurare il server rsync su Windows XP. Potreste spiegarmi quale programma usare e come configurare il PC che riceve il backup e la sezione "replica remota" del NAS?
Grazie in anticipo per qualsiasi tipo di aiuto potrete darmi (anche minimo perchè sono fermo al palo)!
Qnap TS-119 - Seagate Barracuda 1,5 Tb 32Mb - Fw. 3.4.2 Build 0331T
O2media HMR-600W - WD Caviar Green 0,5 Tb - Last Stable Fw.
Samsung Galaxy S - Android 2.2.1
Avatar utente
luciano
Amministratore
Messaggi: 8710
Iscritto il: 25 apr 2008, 01:45
Località: Roma
Contatta:

Re: RSync: estrema lentezza!

Messaggio da luciano »

e.pastore a parte che sei un pò off-topic.... cmq cercando sul sito QNAP trovi questo: http://www.qnap.com/pro_application.asp?ap_id=134, in fondo al tutorial ti rimanda a questo link dove spiega come installare il sw necessario x far girare rsync su un PC con Windows.
A puro titolo informativo, tieni in considerazione che per fare un semplice backup del PC puoi usare il sw di backup che QNAP fornisce, oppure ne puoi usare altri a tuo piacimento (Acronis su tutti direi).

Se hai ulteriori info da chiedere ti prego di aprire un apposito nuovo thread, grazie.
Avatar utente
e.pastore
Messaggi: 61
Iscritto il: 23 apr 2009, 14:18
Località: Roma
Contatta:

Re: RSync: estrema lentezza!

Messaggio da e.pastore »

Prima di tutto grazie per la risposta. Ho aperto un thread apposito come da tuo suggerimento.

Volevo comunque dirti che naturalmente avevo letto molte volte (!) quella pagina (tutta!) e il link a Deltacopy si trova in un paragrafo intitolato "How can I use rsync to back up the data from a Windows PC to QNAP NAS?".

Ebbene io ho il problema inverso ovvero quello di backuppare "from a QNAP NAS to a Windows PC", forse mi ero spiegato male.

La differenza fondamentale mi pare che sia quella che nel primo caso (da win a Qnap) Windows deve eseguire un client rsync mentre nel secondo caso (da Qnap a Win) Windoes deve eseguire una versione SERVER di rsync. Scusate tutti per il non rispetto delle regole del forum, sono nuovo e ci farò la mano :mrgreen:
Qnap TS-119 - Seagate Barracuda 1,5 Tb 32Mb - Fw. 3.4.2 Build 0331T
O2media HMR-600W - WD Caviar Green 0,5 Tb - Last Stable Fw.
Samsung Galaxy S - Android 2.2.1
Avatar utente
luciano
Amministratore
Messaggi: 8710
Iscritto il: 25 apr 2008, 01:45
Località: Roma
Contatta:

Re: RSync: estrema lentezza!

Messaggio da luciano »

e.pastore ha scritto: Ebbene io ho il problema inverso ovvero quello di backuppare "from a QNAP NAS to a Windows PC", forse mi ero spiegato male.
No scusa hai ragione, ho letto velocemente il tuo post. Ti ho fatto un'altra domanda sul nuovo thread che hai aperto.
iena
Messaggi: 24
Iscritto il: 12 dic 2008, 10:26

Re: RSync: estrema lentezza!

Messaggio da iena »

Io alla fine ho risolto con Cobian Backup: in 20 minuti fa tutto a differenza delle 4 ore dell'rsync e soprattutto è molto più configurabile ...
zumba72
Messaggi: 39
Iscritto il: 28 dic 2009, 14:28

Re: RSync: estrema lentezza!

Messaggio da zumba72 »

Scusate , anche io ho un TS-409 PRO sul quale ho i dati dell'azienda.

Mi chiedevo , no posso fare il backup dei dati dal NAS a un HD esterno o da un HD interno del NAS ad un altro HD interno del NAS senza dover tenere acceso un qualche PC?

Il massimo sarebbe quest'ultima ipotesi.

grazie
zumba72
Messaggi: 39
Iscritto il: 28 dic 2009, 14:28

Re: RSync: estrema lentezza!

Messaggio da zumba72 »

Scusate , anche io ho un TS-409 PRO sul quale ho i dati dell'azienda.

Mi chiedevo , no posso fare il backup dei dati dal NAS a un HD esterno o da un HD interno del NAS ad un altro HD interno del NAS senza dover tenere acceso un qualche PC?

Il massimo sarebbe quest'ultima ipotesi.

grazie
iena
Messaggi: 24
Iscritto il: 12 dic 2008, 10:26

Re: RSync: estrema lentezza!

Messaggio da iena »

Basta che colleghi l'HD esterno al NAS e premi il pulsante che trovi sul davanti: parte il backup delle cartelle impostate e non serve nessun'altro pc acceso
Rispondi

Torna a “Remote Replication/ Disaster Recovery”