IDO老徐，在深圳，某上市公司质量部负责人，干了十二年软件测试，公号"简尚" ，博客isTester.com ，关注「软件测试从业者综合能力提升」，微信957863300

linux下快速转移大量小文件？

上一篇 / 下一篇  2016-08-22 16:50:47 / 个人分类：linux

查看( 3353 ) / 评论( 0 ) / 评分( 0 / 0 )
51Testing软件测试网:z|5g9r@y'L$S t1T+z


iB(T5b4_2u.b0d?b0

记录一个知乎上的提问：
51Testing软件测试网:q NE.DV7HV

linux下快速转移大量小文件？

在一个文件夹下，存放有大约30,000,000个小文件，每个文件大小为8K，如何才能快速转移这些文件到另一台服务器？ 尝试了SCP，速度非常慢；也尝试了tar ssh传输，同样很慢；ftp这个更不用说了，直接爆了。如果能打包，那一切都不是问题，关键现在打包也很耗时，如果有快速打包方式那问题也可以解决？求助啊！
51Testing软件测试网F,F#h fR1c
rsync -ax -e 'ssh -c blowfish' /root/start_dir root@x.x.x.x:/root/dest_dir

h ?+U;X;`%G"X8n0
原文：
http://serverfault.com/questions/18125/how-to-copy-a-large-number-of-files-quickly-between-two-servers

收藏 举报

TAG: 软件测试 Linux rsync scp linux

 

评分：0

我来说两句

xuquan

xuquan

IDO老徐，坐标深圳，测试经理，干了十年测试，公号"简尚" ，个人博客isTester.com ，关注「软件测试从业者综合能力提升」，微信957863300

日历

« 2024-04-06  
日 一 二 三 四 五 六
 123456
78910111213
14151617181920
21222324252627
282930    

数据统计

  • 访问量: 912554
  • 日志数: 427
  • 建立时间: 2012-06-04
  • 更新时间: 2022-02-23

RSS订阅

Open Toolbar