IT技术互动交流平台

如何使用Linux来进行超大文件的传送

作者:whl  来源:网络整理  发布日期:2018-12-02 08:34:00
  最近小编收到一个朋友的求助说自己最近在整理一些资料然后要对一些文件进行传送,然后传送过程中发现出了一些问题。有些文件因为是超大文件,所以导致传送失败,朋友不知道怎么解决这个问题才好。下面小编就这个问题给大家介绍一下如何使用Linux来进行超大文件的传送,其中也会对nc方面的传输使用进行相关介绍,感兴趣的朋友一起继续往下看吧。

  本文研究的主要内容是Linux下如何传输超大文件,具体如下。

  linux下的文件传输,大家首先会想到rsync、scp之类的工具,但这类工具有一个特点——慢,因为这类工具都是加密传输,发送端加密,接收端解密,当我们传输一些非敏感文件的时候,完全可以不加密,直接在网络上传输。

  直接上实例,传输一个2077M的ISO文件。

  nc发送接收数据

  接收端:

  nc -l 45.55.0.86 9999 > jieshou.iso

  ➤ -l :监听一个端口来接收数据

  ➤ -u : 不使用 TCP 而是使用 UDP 来进行数据连接(应该速度更快,没试)

  整条命令的意思:本地开启9999端口来接收数据,把接收到的数据存到“jieshou.iso”文件里面。

  发送端:

  time nc 45.55.0.86 9999 < CentOS-6.9-x86_64-bin-DVD2.iso

  命令最前面的time是用来检测该命令运行耗时的。

检测命令运行耗时

  24秒就在公网上传完了一个2077M的文件,平均速度高达87M/s,传输完毕后在两端校验MD5,发现文件完全一致。

  用nc传输有两个特点:

  ➤速度快

  ➤传输简单,不需要登录对方服务器,不需要验证信息。

  nc进度显示

  若你文件实在太大,想看到传输进度,用PV

  yum install epel-release -y

  yum install pv -y

  cat CentOS-6.9-x86_64-bin-DVD2.iso |pv -b | nc 45.55.0.86 9999

  传输目录

  接收端:

  nc -l 45.55.0.86 9999 | pv -b > home.tar.gz

  发送端:

  tar -czf - /home/ | nc 45.55.0.86 9999

  中转文件

  A、B、C三台主机,A美国,C昌南,C只能访问到B,不能直接访问A,B和AC互通。C要怎么才能拿到A上的文件呢?

  C上执行:

  nc -l 9999 > google_file.txt

  B上执行:

  nc -l 9999 | nc (C的外网IP) 9999

  A上执行:

  nc (B的外网IP) 9999 < google_file.txt

  这篇文章主要介绍了如何使用Linux来进行超大文件的传送,对于一些具体的代码都给大家进行了示范,相信大家按照代码来输入那么想要解决超大文件传输就不在话下了。如果大家对于这方面的内容还想了解的更多可以在本站进行搜索,小编这里就不一样详细介绍了。

延伸阅读:

Tag标签: Linux文件传送   nc传输使用  
  • 专题推荐

About IT165 - 广告服务 - 隐私声明 - 版权申明 - 免责条款 - 网站地图 - 网友投稿 - 联系方式
本站内容来自于互联网,仅供用于网络技术学习,学习中请遵循相关法律法规