目录同步与自动对等发现

我正在使用位于Amazon云自动扩展功能（文档）背后的Linux服务器集群。每个服务器上都有累积的文件，它们是应用程序的缓存文件。我正在寻找一种自动化的方法，以使服务器之间相互同步该文件夹。

• Rsync 如果有人有一个聪明的方法来进行对等检测，它将可以工作。
• 同样适用Unison。
• 我们还考虑过使用SaaS（例如Dropbox）。
• Gluster似乎有些矫kill过正，而且我不确定让一台新计算机自动加入群集有多么容易。

理想情况是，当启动新服务器时，它将发现其对等端并开始同步文件夹。从那时起，它是最新的文件时间戳赢得P2P同步。

那里有什么可以做的吗？

您可能听起来很奇怪，但是在私有ec2范围内使用启用了DHT的rtorrent可以工作

这会给你

• 自动对等发现
• 验证文件的状态（对哈希表示是）
• 最低配置要求（在启动脚本中为torrent添加磁石（或最新ip的虚拟IP））
• 可扩展性

Rsync上游提供对SLP（服务定位协议）的支持。在原始rsync来源中未启用该功能，但是您可以在rsync主页（slp.diff）的rsync-patches tarball中找到SLP支持。例如，SUSE rsync软件包是使用该补丁构建的；我不知道其他发行版。

我不确定这是您要寻找的东西，但是我对SLP没有任何经验。

也许我在这里丢失了一些东西，但是是否有某些原因使您不只是设置一个简单的NFS目录，而是让所有计算机都挂载了该目录？每当应用程序写入新的缓存文件时，它都应该覆盖所有旧的缓存文件。

我非常确定有一些Amazon管理工具，例如Command Line Tools，它允许您编写启动脚本以使节点通过私有或公共IP地址彼此发现。

顺便说一句，如果rsync和Unison必须非常频繁地分发更改以缓存，则它们不是正确的工具。在这种情况下，您应该考虑使用一些真正的分布式文件系统。

也许DRBD（分布式块设备）？