全球主机交流论坛

标题: 网站迁移，3000W+的小文件，600G左右，打包快还是rsync快？ [打印本页]

作者: qimo 时间: 2020-9-1 09:04
标题: 网站迁移，3000W+的小文件，600G左右，打包快还是rsync快？
本帖最后由 qimo 于 2020-9-1 10:23 编辑

直接用rsync了，简单，算了一下，2天应该足够了。

------------------------------------------------------------------------------------------------
tar打包看不到头

别想快递了。

前期低估了文件数量导致inodes占满

tmpfs          1275948    17 1275931 1% /sys/fs/cgroup
/dev/sda2    45817856 45811014 6842  100% /
/dev/sda1       64000    340 63660 1% /boot
tmpfs          1275948       1 1275947 1% /run/user/0

如果有安全的ext4转xfs推荐一下。

作者: 周润发 时间: 2020-9-1 09:04
3000w 小文件要命了

作者: motao 时间: 2020-9-1 09:06

原来3000W+，对楼主来说是小文件

作者: cyz971337 时间: 2020-9-1 09:07

motao 发表于 2020-9-1 09:06
原来3000W+，对楼主来说是小文件

你的理解能力堪忧，应该加强身体锻炼，早睡早起

作者: kivim 时间: 2020-9-1 09:07
传输的话，肯定是打包快。

作者: googlebot2 时间: 2020-9-1 09:08
如果硬盘有空间就tar，

作者: yjlml 时间: 2020-9-1 09:09
又不能快递

那你打包又是一段长时间传输又是一段时间解压又是一段时间

让我想起了一首歌三天三夜三天三夜！！！！！

作者: wcn 时间: 2020-9-1 09:13
按子目录打包吧，打包后就传输过去解压，同时又打另外的子目录包。
就是这边边打包，那边边传输解压。
这样也许能节省些时间。

作者: motao 时间: 2020-9-1 09:14

cyz971337 发表于 2020-9-1 09:07
你的理解能力堪忧，应该加强身体锻炼，早睡早起

的确，该睡觉了

作者: root 时间: 2020-9-1 09:15
肯定 rsync 呀

作者: kingo 时间: 2020-9-1 09:15
换个强劲的CPU打包，应该快很多的，7ZIP可以把CPU的线程跑完

作者: kingo 时间: 2020-9-1 09:16
或者直接同步到网盘吧

作者: 忘江湖 时间: 2020-9-1 09:17
搞块新硬盘对拷，然后把新硬盘邮寄给对方

作者: opelnic 时间: 2020-9-1 09:21

scp或者nfs，不过那个速度你懂的

作者: 88170351 时间: 2020-9-1 09:24

motao 发表于 2020-9-1 09:06
原来3000W+，对楼主来说是小文件

600G 还真是不算多，一个高级站长的量
对于机房老大都是pb级别的迁移应该算大文件吧

作者: motao 时间: 2020-9-1 09:25

88170351 发表于 2020-9-1 09:24
600G 还真是不算多，一个高级站长的量
对于机房老大都是pb级别的迁移应该算大文件吧 ...

学到了

作者: nisekoi 时间: 2020-9-1 09:28
3000W小文件。。这要打包多久啊。。不过直接发应该更慢吧

可以打包一点发一点

作者: ttzpp 时间: 2020-9-1 09:34
syncthing 试试

作者: march1993 时间: 2020-9-1 10:14
直接整个分区镜像传输过去

作者: march1993 时间: 2020-9-1 10:15

march1993 发表于 2020-9-1 10:14
直接整个分区镜像传输过去

然后再扩容

欢迎光临全球主机交流论坛 (https://loc.imgfree.eu.org/)

Powered by Discuz! X3.4