8
写入速度要求:1.1GB / s可能吗?
我们将拥有一台正在运行的机器,该机器在达到最佳性能时,应该能够每小时推送50个(“写磁头”)x 75GB的数据。那是约1100MB / s写入速度的最高性能。要从计算机上获得该数据,它需要两条10GBi线路。我的问题是什么样的服务器+技术可以处理/存储这种数据流? 当前,对于数据存储,我们使用ZFS,尽管写入速度从来都不是问题。(我们甚至没有接近这些速度)ZFS(Linux上的zfs)是否可以选择?我们还需要存储大量数据,“ IT指南”建议总计在50-75 TB之间。因此,除非我们想为我们的长子提供孩子,否则可能不可能全部都是SSD。 根据出色的答复,添加了一些内容: 高峰期间最大为50x75GB /小时,少于24小时(最有可能是<6小时) 我们预计这种情况不会很快发生,很有可能我们将以每小时5-10x75GB的速度运行 这是pre-alpha机器,但是应该满足要求(即使有很多问号在起作用) 我们将使用NFS作为从机器到服务器的连接 布局:生成机->存储(这一个)->(安全团队6)->计算集群 因此读取速度不是必需的,但是从计算群集中使用它会很好(但这是完全可选的) 最有可能是大数据文件(不是很多)