RSync: estrema lentezza!
RSync: estrema lentezza!
Ho un TS-409 PRO
Ho un PC con XP sul quale ho installato il servizio RSync
Ho schedulato un backup che parte tutte le sere alle 23 e che fa il backup incrementale di circa 30GB di files su un HD USB attaccato a questo PC.
Il problema è che la mattina dopo alle 8.30 quando la segretaria accede al PC e stacca l'hd esterno il backup non è ancora finito!
Come mai ci mette così tanto? Non c'è un modo per accelerare il processo? Non ho la possibilità di attaccare l'HD esterno direttamente alla porta USB del NAS.
Ho un PC con XP sul quale ho installato il servizio RSync
Ho schedulato un backup che parte tutte le sere alle 23 e che fa il backup incrementale di circa 30GB di files su un HD USB attaccato a questo PC.
Il problema è che la mattina dopo alle 8.30 quando la segretaria accede al PC e stacca l'hd esterno il backup non è ancora finito!
Come mai ci mette così tanto? Non c'è un modo per accelerare il processo? Non ho la possibilità di attaccare l'HD esterno direttamente alla porta USB del NAS.
Re: RSync: estrema lentezza!
Con un calcolo veloce trasferisci circa 50 mega al minuto, in effetti è un po' pochino. :o
Servono altre info:
Se provi a trasferire un file da pc a nas a che velocità arrivi? ( da PC non da HDD collegato in USB)
Che tipo di Raid utilizzi e con quanti dischi?
E' indispensabile fare la copia totale e non la copia solo dei file modificati? (dato che RSync lo permette)
Servono altre info:
Se provi a trasferire un file da pc a nas a che velocità arrivi? ( da PC non da HDD collegato in USB)
Che tipo di Raid utilizzi e con quanti dischi?
E' indispensabile fare la copia totale e non la copia solo dei file modificati? (dato che RSync lo permette)
- TS-659 Pro - TS-509 Pro - FW v3.8.0 - 6 * WD RED 2TB - RAID5 - EXT4 -
- iMac 27 i7 3,4Ghz SSD256GB - OSX 10.8.2 Mountain Lion
- TViXM6500A - Popcorn Hour C300 A400 - NMP1000P - AppleTv
- Dreambox 8000HD -Dreambox 800se - XBOX360 - WII
- Router Netgear DGND3700 - Switch CISCO SG 100-16 - APC Smart-UPS 1500
- http://www.hitech-audiovideo.it
- iMac 27 i7 3,4Ghz SSD256GB - OSX 10.8.2 Mountain Lion
- TViXM6500A - Popcorn Hour C300 A400 - NMP1000P - AppleTv
- Dreambox 8000HD -Dreambox 800se - XBOX360 - WII
- Router Netgear DGND3700 - Switch CISCO SG 100-16 - APC Smart-UPS 1500
- http://www.hitech-audiovideo.it
Re: RSync: estrema lentezza!
Allora, i dati prima erano su un server IBM con installata una distro di linux. Quando ho passato via rete tutti i dati da questo server al NAS ci ha impiegato un paio d'ore e questo era il tempo che stimavo ci avrebbe messo per fare i backup notturni.
Uso 3 dischi da 500GB in raid 5
Il backup è già incrementale, solo che la prima volta ovviamente deve fare il backup di tutto. Solo quello del venerdì è andato a buon fine e guardando dal log ha iniziato alle 23 del venerdì per finire alle 4 della domenica!! 29 ORE!!
Ora il backup incrementale del venerdì lo fa in circa 5 ore, già accettabile, ma è decisamente troppo per 30GB di roba ...
La rete è a 100mbps
Uso 3 dischi da 500GB in raid 5
Il backup è già incrementale, solo che la prima volta ovviamente deve fare il backup di tutto. Solo quello del venerdì è andato a buon fine e guardando dal log ha iniziato alle 23 del venerdì per finire alle 4 della domenica!! 29 ORE!!
Ora il backup incrementale del venerdì lo fa in circa 5 ore, già accettabile, ma è decisamente troppo per 30GB di roba ...
La rete è a 100mbps
Re: RSync: estrema lentezza!
Visto e considerato che il NAS registra con una velocità accettabile il problema sta altrove.
La prova che ti avevo chiesto era da farsi sul pc che oggi fa il RSync per verificare se fosse il disco collegato in USB a rallentare il tutto.
Non conosco in dettaglio il comportamento di RSync ma penso che verifichi di ogni file se è stato modificato, creando una marea di piccoli pacchetti di comunicazione poco performanti per reti, USB, Raid5, etc, rallentando molto tutto il processo di BackUp.
La prova che ti avevo chiesto era da farsi sul pc che oggi fa il RSync per verificare se fosse il disco collegato in USB a rallentare il tutto.
Non conosco in dettaglio il comportamento di RSync ma penso che verifichi di ogni file se è stato modificato, creando una marea di piccoli pacchetti di comunicazione poco performanti per reti, USB, Raid5, etc, rallentando molto tutto il processo di BackUp.
- TS-659 Pro - TS-509 Pro - FW v3.8.0 - 6 * WD RED 2TB - RAID5 - EXT4 -
- iMac 27 i7 3,4Ghz SSD256GB - OSX 10.8.2 Mountain Lion
- TViXM6500A - Popcorn Hour C300 A400 - NMP1000P - AppleTv
- Dreambox 8000HD -Dreambox 800se - XBOX360 - WII
- Router Netgear DGND3700 - Switch CISCO SG 100-16 - APC Smart-UPS 1500
- http://www.hitech-audiovideo.it
- iMac 27 i7 3,4Ghz SSD256GB - OSX 10.8.2 Mountain Lion
- TViXM6500A - Popcorn Hour C300 A400 - NMP1000P - AppleTv
- Dreambox 8000HD -Dreambox 800se - XBOX360 - WII
- Router Netgear DGND3700 - Switch CISCO SG 100-16 - APC Smart-UPS 1500
- http://www.hitech-audiovideo.it
Re: RSync: estrema lentezza!
Iena, premesso che non arriverai mai alle prestazioni di un PC (non con il 409 perlomeno), ti volevo chiedere: che versione del firmware hai installata sul 409?
Re: RSync: estrema lentezza!
Allora provo a fare la copia diretta su quel PC, così vedo se le prestazioni decadono o sono in linea a quelle di prima.
Per quanto riguarda il tempo magari provo a cambiare tipologia, fare copia diretta invece che backup incrementale.
La versione del firmware è l'ultima, 2.0.2 se non ricordo male, so che non avrò mai le prestazioni di un server, ma non credevo che sarei passato da 1h e mezza a 29 ore :D
Per quanto riguarda il tempo magari provo a cambiare tipologia, fare copia diretta invece che backup incrementale.
La versione del firmware è l'ultima, 2.0.2 se non ricordo male, so che non avrò mai le prestazioni di un server, ma non credevo che sarei passato da 1h e mezza a 29 ore :D
Re: RSync: estrema lentezza!
Secondo i test di smallnetbuilder il 409 trasferisce file di dimensioni mediamente grandi (32MB - 1GB) su una rete a 100Mb/s, a circa 9,4MB/s in scrittura e 9,2MB/s in lettura. Ovvero in un minuto scrive circa 9,4 x 60 = 564MB.
Con file di dimennsioni mediamente piccoli (64KB - 16MB) sempre a 100Mb/s, scendiamo a 8,1MB/s in scrittura e 8,5MB/s in lettura.
Dai test si nota anche la diversa enfasi che i vari produttori danno alle prestazioni in lettura/scrittura, qualcuno preferisce prediligere i file di grosse dimensioni (secondo + corretto in funzione della destinazione d'uso tipica dei NAS) qualcun altro viceversa i piccoli.
Con file di dimennsioni mediamente piccoli (64KB - 16MB) sempre a 100Mb/s, scendiamo a 8,1MB/s in scrittura e 8,5MB/s in lettura.
Dai test si nota anche la diversa enfasi che i vari produttori danno alle prestazioni in lettura/scrittura, qualcuno preferisce prediligere i file di grosse dimensioni (secondo + corretto in funzione della destinazione d'uso tipica dei NAS) qualcun altro viceversa i piccoli.
Re: RSync: estrema lentezza!
Ok, ma anche tenendo la velocità più bassa stimata e raddoppiando il tempo necessario che verrebbe fuori dai calcoli siamo sempre attorno alle 2h per 30GB di roba .. quello che non riesco a capire è come possa metterci 29 ore per duplicare il nas tramite rsync ...
Re: RSync: estrema lentezza!
E' evidente che c'è qualcosa che non torna nella tua rete. Anche mettendosi nella peggiore condizione per 30GB dovresti essere nell'ordine della mezzora. Se proprio vogliamo esagerare un'ora!
Re: RSync: estrema lentezza!
Boh, la rete non è mia, e cmq le prestazioni sono sempre state in linea con una rete a 100Mbps ... magari provo a fare un po' di prove attaccando direttamente il nas al pc sul quale viene fatto il backup...
Re: RSync: estrema lentezza!
"La potenza è nulla senza controllo"...... recitava un famoso spot TV. ;)
Fai la prova che hai detto e vediamo cosa/se cambia la situazione!
Fai la prova che hai detto e vediamo cosa/se cambia la situazione!
Re: RSync: estrema lentezza!
Ma non esiste un modo per vedere lo stato di avanzamento dell'RSync? Leggendo sui vari forum in inglese parlano di percentuali di avanzamento, ma io non trovo nessun punto dove posso vederlo ... sono io cecato?
Re: RSync: estrema lentezza!
Scusate se mi intrometto, sono anch'io nella condizione di dover fare il backup dal Nas (TS-119) ad un PC con Windows XP ma non riesco (forse mi manca qualche fondamentale) a configurare il server rsync su Windows XP. Potreste spiegarmi quale programma usare e come configurare il PC che riceve il backup e la sezione "replica remota" del NAS?
Grazie in anticipo per qualsiasi tipo di aiuto potrete darmi (anche minimo perchè sono fermo al palo)!
Grazie in anticipo per qualsiasi tipo di aiuto potrete darmi (anche minimo perchè sono fermo al palo)!
Qnap TS-119 - Seagate Barracuda 1,5 Tb 32Mb - Fw. 3.4.2 Build 0331T
O2media HMR-600W - WD Caviar Green 0,5 Tb - Last Stable Fw.
Samsung Galaxy S - Android 2.2.1
O2media HMR-600W - WD Caviar Green 0,5 Tb - Last Stable Fw.
Samsung Galaxy S - Android 2.2.1
Re: RSync: estrema lentezza!
e.pastore a parte che sei un pò off-topic.... cmq cercando sul sito QNAP trovi questo: http://www.qnap.com/pro_application.asp?ap_id=134, in fondo al tutorial ti rimanda a questo link dove spiega come installare il sw necessario x far girare rsync su un PC con Windows.
A puro titolo informativo, tieni in considerazione che per fare un semplice backup del PC puoi usare il sw di backup che QNAP fornisce, oppure ne puoi usare altri a tuo piacimento (Acronis su tutti direi).
Se hai ulteriori info da chiedere ti prego di aprire un apposito nuovo thread, grazie.
A puro titolo informativo, tieni in considerazione che per fare un semplice backup del PC puoi usare il sw di backup che QNAP fornisce, oppure ne puoi usare altri a tuo piacimento (Acronis su tutti direi).
Se hai ulteriori info da chiedere ti prego di aprire un apposito nuovo thread, grazie.
Re: RSync: estrema lentezza!
Prima di tutto grazie per la risposta. Ho aperto un thread apposito come da tuo suggerimento.
Volevo comunque dirti che naturalmente avevo letto molte volte (!) quella pagina (tutta!) e il link a Deltacopy si trova in un paragrafo intitolato "How can I use rsync to back up the data from a Windows PC to QNAP NAS?".
Ebbene io ho il problema inverso ovvero quello di backuppare "from a QNAP NAS to a Windows PC", forse mi ero spiegato male.
La differenza fondamentale mi pare che sia quella che nel primo caso (da win a Qnap) Windows deve eseguire un client rsync mentre nel secondo caso (da Qnap a Win) Windoes deve eseguire una versione SERVER di rsync. Scusate tutti per il non rispetto delle regole del forum, sono nuovo e ci farò la mano :mrgreen:
Volevo comunque dirti che naturalmente avevo letto molte volte (!) quella pagina (tutta!) e il link a Deltacopy si trova in un paragrafo intitolato "How can I use rsync to back up the data from a Windows PC to QNAP NAS?".
Ebbene io ho il problema inverso ovvero quello di backuppare "from a QNAP NAS to a Windows PC", forse mi ero spiegato male.
La differenza fondamentale mi pare che sia quella che nel primo caso (da win a Qnap) Windows deve eseguire un client rsync mentre nel secondo caso (da Qnap a Win) Windoes deve eseguire una versione SERVER di rsync. Scusate tutti per il non rispetto delle regole del forum, sono nuovo e ci farò la mano :mrgreen:
Qnap TS-119 - Seagate Barracuda 1,5 Tb 32Mb - Fw. 3.4.2 Build 0331T
O2media HMR-600W - WD Caviar Green 0,5 Tb - Last Stable Fw.
Samsung Galaxy S - Android 2.2.1
O2media HMR-600W - WD Caviar Green 0,5 Tb - Last Stable Fw.
Samsung Galaxy S - Android 2.2.1
Re: RSync: estrema lentezza!
No scusa hai ragione, ho letto velocemente il tuo post. Ti ho fatto un'altra domanda sul nuovo thread che hai aperto.e.pastore ha scritto: Ebbene io ho il problema inverso ovvero quello di backuppare "from a QNAP NAS to a Windows PC", forse mi ero spiegato male.
Re: RSync: estrema lentezza!
Io alla fine ho risolto con Cobian Backup: in 20 minuti fa tutto a differenza delle 4 ore dell'rsync e soprattutto è molto più configurabile ...
Re: RSync: estrema lentezza!
Scusate , anche io ho un TS-409 PRO sul quale ho i dati dell'azienda.
Mi chiedevo , no posso fare il backup dei dati dal NAS a un HD esterno o da un HD interno del NAS ad un altro HD interno del NAS senza dover tenere acceso un qualche PC?
Il massimo sarebbe quest'ultima ipotesi.
grazie
Mi chiedevo , no posso fare il backup dei dati dal NAS a un HD esterno o da un HD interno del NAS ad un altro HD interno del NAS senza dover tenere acceso un qualche PC?
Il massimo sarebbe quest'ultima ipotesi.
grazie
Re: RSync: estrema lentezza!
Scusate , anche io ho un TS-409 PRO sul quale ho i dati dell'azienda.
Mi chiedevo , no posso fare il backup dei dati dal NAS a un HD esterno o da un HD interno del NAS ad un altro HD interno del NAS senza dover tenere acceso un qualche PC?
Il massimo sarebbe quest'ultima ipotesi.
grazie
Mi chiedevo , no posso fare il backup dei dati dal NAS a un HD esterno o da un HD interno del NAS ad un altro HD interno del NAS senza dover tenere acceso un qualche PC?
Il massimo sarebbe quest'ultima ipotesi.
grazie
Re: RSync: estrema lentezza!
Basta che colleghi l'HD esterno al NAS e premi il pulsante che trovi sul davanti: parte il backup delle cartelle impostate e non serve nessun'altro pc acceso