S3mper 介绍
S3mper 是通过一致的,二级索引对亚马逊 S3 索引做额外的一致性检查。
S3mper 利用面向方面编程和
AspectJ 实现来引导
Hadoop 文件系统实现(主要是实现
NativeS3FileSystem),和额外的逻辑,进行反复的二次索引的一致性检查。
二级索引默认使用
DynamoDB,因为它的服务提供速度,一致性和可用性的保证。轻量级的表模式设计速度非常快,不会影响文件系统的性能。
表结构:
Hash Key: path | Range Key: file | epoch | deleted | dir | linkPath | linkFile |
---|---|---|---|---|---|---|
// |
|
|
|
|
N/A | N/A |
epoch[^2] |
|
N/A | N/A | N/A |
// |
|
S3mper 官网
https://github.com/Netflix/s3mper
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。