]> Sergey Matveev's repositories - stargrave-blog.git/commit
Как перемещать огромные объёмы данные по сети
authorSergey Matveev <stargrave@stargrave.org>
Fri, 2 Aug 2019 19:54:15 +0000 (22:54 +0300)
committerSergey Matveev <stargrave@stargrave.org>
Fri, 2 Aug 2019 19:54:15 +0000 (22:54 +0300)
commit8796a56b5b26ce8478b373ab6ad5bf8a97005fc8
tree4b825dc642cb6eb9a060e54bf8d69288fbee4904
parentf5d5db94316e1a88d11b0086bc57700ea5884b63
Как перемещать огромные объёмы данные по сети

http://moo.nac.uci.edu/~hjm/HOWTO_move_data.html
Рекламируют GridFTP, который используется для Большого Адронного
Коллайдера, но по ссылке на github оно говорит:

    After a two decade run, the Globus Toolkit is no longer available as
    a do-it-yourself distributed computing toolkit, but its spirit lives
    on in a mature, full-featured and easy to use service for research
    data management -- Globus.org!

то есть как свободное ПО оно вот отсутствует. Но статья интересна
подниманием темы параллельных TCP для увеличения пропускной способности.
Упоминает tar | nc -- то, что я сам не редко использую как самый быстрый
способ передать в LAN-е что-то (ещё и используя link-local адрес, чтобы
оно через маршрутизацию или IPsec-и не ходило).