Jump to content

Upload mais rápido


Gavin
 Share

Recommended Posts

Estou precisando fazer o upload de algo próximo a 50 milhões de arquivos (.csv) para o servidor via FTP(filezilla)
Cada arquivo contem em cerca de 2Kb a 2MB

porém os testes que eu fiz com meio milhão, o upload estava muito lento

Já tentei verificar o tempo que demoraria para fazer o upload com estes arquivos compactado, porém ainda continua lento (cerca de 10 dias)

Como fazer para fazer este upload mais rápido?

Link to comment
Share on other sites

Rui Carlos

Diria que o melhor que podes fazer é dividir os 50M de ficheiros por uns 50 ou 100 ficheiros compactados, e fazer upload destes, possivelmente com algum nível de paralelismo no upload.

 

Pode ser também caso para ouvir os conselhos do Tanenbaum: "Never underestimate the bandwidth of a station wagon full of tapes hurtling down the highway." :)

  • Vote 1
Link to comment
Share on other sites

Create an account or sign in to comment

You need to be a member in order to leave a comment

Create an account

Sign up for a new account in our community. It's easy!

Register a new account

Sign in

Already have an account? Sign in here.

Sign In Now
 Share

×
×
  • Create New...

Important Information

By using this site you accept our Terms of Use and Privacy Policy. We have placed cookies on your device to help make this website better. You can adjust your cookie settings, otherwise we'll assume you're okay to continue.