Linux传输超大文件

linux下的文件传输,大家首先会想到rsync、scp之类的工具,但这类工具有一个特点——慢,因为这类工具都是加密传输,发送端加密,接收端解密,当我们传输一些非敏感文件的时候,完全可以不加密,直接在网络上传输。
直接上实例,传输一个2077M的ISO文件。

nc发送接收数据

接收端:

nc -l 45.55.0.86 9999 > jieshou.iso

➤ -l :监听一个端口来接收数据
➤ -u : 不使用 TCP 而是使用 UDP 来进行数据连接(应该速度更快,没试)

整条命令的意思:本地开启9999端口来接收数据,把接收到的数据存到“jieshou.iso”文件里面。

发送端:

time nc  45.55.0.86 9999 < CentOS-6.9-x86_64-bin-DVD2.iso

命令最前面的time是用来检测该命令运行耗时的。

24秒就在公网上传完了一个2077M的文件,平均速度高达87M/s,传输完毕后在两端校验MD5,发现文件完全一致。
用nc传输有两个特点:
➤速度快
➤传输简单,不需要登录对方服务器,不需要验证信息。

nc进度显示

若你文件实在太大,想看到传输进度,用PV

yum install epel-release -y
yum install pv -y
cat CentOS-6.9-x86_64-bin-DVD2.iso |pv -b | nc  45.55.0.86 9999

传输目录

接收端:

nc -l 45.55.0.86 9999 | pv -b > home.tar.gz

发送端:

tar -czf - /home/ | nc  45.55.0.86 9999

中转文件

A、B、C三台主机,A美国,C昌南,C只能访问到B,不能直接访问A,B和AC互通。C要怎么才能拿到A上的文件呢?
C上执行:

nc -l 9999 > google_file.txt

B上执行:

nc -l 9999 | nc (C的外网IP) 9999

A上执行:

nc (B的外网IP) 9999 < google_file.txt

原创文章,转载请注明: 转载自笛声

本文链接地址: Linux传输超大文件

14 条评论

  • 姜辰 2017年12月1日 回复

    如果win要取文件怎呢弄?

    • dige 2017年12月1日 回复

      windows平台也有nc,名字不一样,叫netcat

  • 历史趣谈 2017年12月4日 回复

    linux用起来就是又方便又效率

  • 懿古今 2017年12月5日 回复

    这个对于我本人用到的机会倒是不多,不过这个传输速度真的非常牛

  • 萧何 2017年12月8日 回复

    这速度,泪流满面,是国内的网络吗?

    • dige 2018年1月17日 回复

      这里说明一下,用于测试的两台机器都在美国,国内扑朔迷离的网络环境可能达不到上面的速度。

  • 明月清风 2017年12月10日 回复

    请问这是更新了吗?

    • dige 2017年12月10日 回复

      请问,你请问的是啥?

  • 大伟哥博客 2018年1月3日 回复

    传输速度惊掉下吧啊,能断点续传吗?

    • dige 2018年1月7日 回复 作者

      看其传输原理,是不能断点续传的。

  • 广州网站建设 2018年6月26日 回复

    传输速度还不错

  • jiangbo 2018年8月28日 回复

    我的还是超级慢 49G的压缩文件

  • jiangbo 2018年8月28日 回复

    49G文件,穿了10min29s才传了2.1个G,是什么原因?

    • dige 2018年8月31日 回复 作者

      这个速度受制于服务器的出网带宽,国内环境你这速度不算慢了,一秒钟有3M多。

发表评论

您的电子邮箱地址不会被公开。 必填项已用*标注

Copyright © 2015-2024 笛声博客 All Rights Reserved     浙ICP备15036123号-1