backup in cloud con HBS3 errore troppi file

[crealex]

ciao a tutti mi si è posto questo problema dopo alcuni giorni di processo con HBS3 verso un archivio in cloud (microsoft), ripeto dopo alcuni giorni arrivato al 12% del processo oggi si chiude con questo messaggio

Livello gravità Data Ora Utente IP origine Applicazione Categoria Contenuto
Errore 2019/12/29 00:29:22 System 127.0.0.1 Hybrid Backup Sync Custom Job Event [Hybrid Backup Sync] Failed to complete Sync job: "Sync WEB". The job has exceeded the maximum allowed number of skipped files. Check logs for more information.

l'archivio web era un archivio in cui vi erano molte cartelle di lavorazione di siti web quindi ogni sito web una infinità di piccoli file (inclusi quelli nascosti) circa 300 gb ma con milioni di file

è a questo punto evidente che non posso backuppare sul cloud questi file, come posso fare? non so bene i termini ma può essere una soluzione fare un pacchetto e caricare questo sul cloud? ci sono metodi sicuri per farlo e semplici per poi recuperare all'evenienza il materiale dal cloud?
grazie

[FFFAB]

Usa QuDedup:

https://www.qnap.com/solution/hbs-qudedup/it-it/

[crealex]

ho testato QuDedup da HBS3 ma se per 2 Gb (60000 file) ci ha messo quasi 2 ore deduco che per 400 gb (5000000 file) il tempo sia sempre esageratamente troppo con il rischio che ne consegue di una interruzione dopo giorni di lavoro...stò sbagliando qualcosa?

[FFFAB]

Io in 2 ore carico circa 4.5GB su OneDriveBusiness: velocità di upload del tuo ISP???
QuDedup ti evita lo skipping di cui sopra, e, se hai doppioni, riduce i tempi.
Se ti studi un buon incrementale, dal secondo backup in poi carichi solo le differenze (indipendentemente dal loro numero).

[PiaNi]

Non sono sicuro ma con QuDedup fa un solo file zippato.....

[crealex]

esatto fa un file zippato che poi posso spulciare con QuDedup extractor,

sono ancora un po dubbioso perché il mio problema sono gli oltre 5 milioni di piccoli file...anche solo il controllo ho paura che poi a regime ci metterà parecchio tempo...più di una notte che è il tempo in cui vorrei dedicare al backup settimanale

pensavo ad un metodo piuttosto radicale....zippare tutto in un blocco e upload sul cloud...ma poi sarebbe scomodo in caso di restore ...valuterò di farlo a blocchi

[FFFAB]

Il DeDup non fa un zippone.... crea una struttura effettivamente accessibile solo con l'utility (o FileStation) ma è più consistente di un zippato manualmente. Appena riesco, vi posto la struttura di un backup QuDeDup di 60GB che ho su OneDriveB.
Io continuo a consigliartelo.
Non mi hai risposto: velocità di upload del tuo ISP???

[crealex]

attualmente 16/20 mega in upload e 90 in download

[FFFAB]

Allora c'è qualcosa che non va...
Il tempo che impieghi è tutto nella gestione dei piccoli files: QuDeDup ha cmq necessità di tempo (risorse macchina) per elaborali....eviti lo skipping come ti dicevo ma non il tempo di gestione.
Lo zippone inizia ad essere preso in considerazione purtroppo...