首页 > itarticle > 服务器上同步/备份大量文件的处理方式 rsync + parallel

服务器上同步/备份大量文件的处理方式 rsync + parallel

admin 11月 13, 2020 0

hjmangalam/parsyncfp: follow-on to parsync (parallel rsync) with better startup perf

1	./parsyncfp --NP=4 --CS=100K --nowait --rsyncopts="-uv" --startdir="/home/zzp" "test" "/home/zzp/program/"

rsync + parallel

将



并行增量备份的另一种实现(rsync+parallel)

```bash
#!/bin/bash

dst="/mnt/500G移动硬盘/results/"
filename="backuplist"
ncpu=8

cat $filename | parallel -j $ncpu "rsync -urv {} $dst"