我们有一个问题,Hadoop 是否适合不需要运行应用程序但需要非常快速地读写少量数据的简单任务。
要求是能够以每秒 30 的速率编写带有一对索引的大约 100-200 字节长的消息,同时能够以每秒大约 10 的速率读取(通过这两个索引搜索)。读取查询必须非常快 - 每个查询最多 100-200 毫秒并返回少量匹配记录。
总数据量预计将达到 50-100 GB,并将通过删除较旧的记录(例如删除 14 天以上的记录的日常任务)保持此速度
如您所见,总数据量并没有那么大,但我们担心 Hadoop 的搜索速度可能会比我们需要的要慢。
Hadoop是一个解决方案吗?
谢谢尼克