BitTorrent. So stellt Twitter einige Dinge intern bereit.
http://engineering.twitter.com/2010/07/murder-fast-datacenter-code-deploys.html (Link zum Webarchiv)
Wie wäre es mit UFTP, es verwendet Multicast, um Dateien über UDP gleichzeitig an mehrere Clients zu liefern. Nicht jedermanns Sache und ich bin kein Experte dafür, aber es hört sich so an, als würde es das tun, was Sie wollen.
Haben Sie versucht, diese Daten mit rsync
zu kopieren? ? Wenn Sie ein LAN mit 1 Gbit oder schneller haben, sollte das Kopieren von über 4*20 GB kein Problem sein.
Wie oft wird diese Kopie vorkommen? Spielt es eine Rolle, ob es ein paar Minuten dauert, bis es fertig ist?