NoSQL数据库的35个应用场景

现在我们站在各个用例的角度上来考虑那种系统适合于这些用例。

你的意见是?
首先,我们要纵览各种数据模型。这些模型的分类方法来自于Emil Eifrem 和 NoSQL databases。

文档数据库

  1. 源起:受Lotus Notes启发。
  2. 数据模型:包含了key-value的文档集合
  3. 例子:CouchDB,MongoDB
  4. 优点:数据模型自然,编程友好,快速开发,web友好,CRUD。
图数据库
  1. 源起: 欧拉和图理论。
  2. 数据模型:节点和关系,也可处理键值对。
  3. 例子:AllegroGraph,InfoGrid,Neo4j
  4. 优点:解决复杂的图问题。
关系数据库
  • 源起: E. F. Codd 在A Relational Model of Data for Large Shared Data Banks提出的
  • 数据模型:各种关系
  • 例子:VoltDB,Clustrix,MySQL
  • 优点:高性能、可扩展的OLTP,支持SQL,物化视图,支持事务,编程友好。
  • 对象数据库
  • 源起:图数据库研究
  • 数据模型:对象
  • 例子:Objectivity,Gemstone
  • 优点:复杂对象模型,快速键值访问,键功能访问,以及图数据库的优点。
  • Key-Value数据库
  • 源起:Amazon的论文 Dynamo 和 Distributed HashTables。
  • 数据模型:键值对
  • 例子:Membase,Riak
  • 优点:处理大量数据,快速处理大量读写请求。编程友好。
  • BigTable类型数据库
  • 源起:Google的论文 BigTable。
  • 数据模型:列簇,每一行在理论上都是不同的
  • 例子:HBase,Hypertable,Cassandra
  • 优点:处理大量数据,应对极高写负载,高可用,支持跨数据中心, MapReduce。
  • 数据结构服务
  • 源起: ?
  • 数据模型:字典操作,lists,sets和字符串值
  • 例子:Redis
  • 优点:不同于以前的任何数据库
  • 网格数据库
  • 源起:数据网格和元组空间研究。
  • 数据模型:基于空间的架构
  • 例子:GigaSpaces,Coherence
  • 优点:适于事务处理的高性能和高扩展性
  • 你的应用应该用什么?
  • 关键是要意识到不同的应用需要不同的数据模型和产品。选择合适的数据模型和产品。
  • 要了解你的应用需要什么样的数据模型可以看 What The Heck Are You Actually Using NoSQL For? 在这篇文章里我总结了一些特色各异的非常规的使用场景。
  • 适应你的需求和应用场景。依次而为你就能找到最适合你的架构的产品。无论NoSQL还是SQL都不重要。
  • 综合考虑数据模型、产品特性和应用情景。不同产品功能各异,只凭数据模型来决定选择谁是不可能的。
  • 哪个产品具有你最需要的特点哪个就是最好的。
  • 假如你的应用有以下需求:
  • 复杂事物,如果你不能承受数据丢失的风险或者你想要一个简单的事务编程模型可以选择关系数据库和网格数据库。
  • 例子:一个库存系统需要完整的ACID特性。如果我在买了一个东西后才被告知它已经售罄我会非常不快。不不想要补偿,我只要我买的东西。
  • 扩展性,NoSQL或SQL皆可,目标产品要支持水平扩展、分区、在线增减硬件、负载均衡、自动分片、数据平衡和容错等特性。
  • 追求高可用性,可用Bigtable类型的等支持最终一致性的数据库。
  • 需要处理长期的快速读写,可以看看文档数据库,Key-value数据库或者内存数据库,还可以考虑SSD。
  • 要实现社会化网络,第一选择应该是图数据库。其次像Riak这样支持关系的数据库也可以。一个支持简单SQL join操作的内存关系数据库能够处理数据量不大的情况。Redis' set 和list 操作就是这样。
  • 需要不同的访问方式和数据类型的话可以看看文档数据库,它们在这方面很灵活。
  • 大数据量的离线分析首先应该考虑Hadoop,其次是其他支持MapReduce的产品。当然,支持MapReduce与擅长MapReduce处理不是一回事。
  • 如需跨越多个数据中心,可选用基于Bigtable模型的产品,或其分布式的,能解决延迟问题,分区容错性问题的产品
  • CRUD类型的应用可以考虑文档数据库,这样不需要join就可访问复杂的数据结构。
  • 搜索可以考虑Riak。
  • 需要lists,sets,queues,publish-subscribe等数据结构的话,可以考虑Redis,它的分布式锁等特性也非常有用。
  • 编程友好,如果要使用JSON,HTTP,REST,Javascript等程序员喜闻乐见的数据类型,第一选择就是文档数据库和Key-value数据库。
  • 用于实时事务处理的物化视图,可以考虑VoltDB,非常适合于快速处理大量事务。
  • 企业级支持及服务级协议 ,可以寻找市场上以此为卖点的产品,如Membase。
  • 要记录连续的大量数据,又对一致性无太高要求,可以看看Bigtable类型数据库,因为它工作在分布式文件系统上,可以处理大规模的写入请求。
  • 需要尽可能使用简单,请考虑PAAS方案,用这种方案你自己几乎不需要做什么。
  • 如果你的产品要卖给企业客户请考虑关系数据库,因为他们习惯于关系数据库。
  • 要动态构建对象间的关系,对象的属性能够动态加减,可以考虑图数据库,因为它不需要schema,可以在代码中随需建模。
  • 要支持大影音文件,可以看看像S3这样的存储服务。NoSQL不适于存储BLOBS,尽管MongoDB也提供了文件服务。
  • 要快速批量上传大量数据,得寻找支持这种场景的产品。但是大多数产品都不支持批量操作。
  • 易于变化,要选择支持动态schema的文档数据库和 Key-value数据库。它支持可选域,不需要修改schema即可增加、减少域。
  • 为了支持完整性约束,选择支持SQL DDL的数据库,可以在存储过程或者应用代码中实现。
  • 深度连接用图数据库,它支持实体键间的快速定位。
  • 为了让计算靠近数据,减少数据在网络中传送的开销,可以考虑存储过程。关系数据库,网个数据库,文档数据库和Key-value数据库都支持存储过程。
  • 要存储BLOB数据,可选择Key-value数据库。它可以存储网页或者复杂对象,后者在关系数据库中要用join才能获取,代价高昂。还可以降低延迟。
  • 选择一个经过验证的成熟产品,在处理扩展性问题的时候的时候选择通用的方案(纵向扩展、调优、缓存、数据分片、反范式等等)
  • 多变的数据类型,数据不规整,列数不固定,复杂的数据结构等,考虑文档数据库,Key-value数据库,和Bigtable型数据库。它们的数据类型都比较灵活。
  • 需要快速的关系查询,但是又不想自己实现,那么就选择支持SQL的数据库。
  • 能够在云中操作,自动利用云的一切特性和好处,目前还没有这样的东西。
  • 支持二级索引,通过不同的键来检索,可以考虑关系数据库和 Cassandra,后者新增了对二级索引的支持。
  • 规模不断增长(真正的大数据场景),但是访问不频繁的数据可以使用Bigtable类型的数据库,因为它的数据存储在一个分布式文件系统上,很容易扩展 。
  • 要和其他服务集成,检查数据库是否提供某种写后同步功能,以便能够捕捉到数据库变化,通知其它系统,保证一致性。
  • 容错性,检查在停电、分区故障以及其他故障场景下写操作是否能够成功。
  • 如果只是为了推动某个方向上的技术创新,似乎没有现成的东西能够达到这个目的,你得自己去创造一个新的。这可不是件容易事。
    移动平台上可以用CouchDB/Mobile couchbase.
    那个更好?

    为了25%的性能提升而迁移到NoSQL是不值得的。

    性能测试数据都有其特定的场景,不见得能适合你的情况。

    如果你的公司刚刚成立,还没有一个成型的产品,并且你很愿意尝试一些新东西,那么选择SQL还是NoSQL对你而言需要费上些心思(言下之意,一张白纸好作画,没有既有系统的负担就可以随便折腾?)。

    数据量不大的时候性能差距并不明显,但是当数据量变大的时候呢?

    没有完美的东西,如果你去Amazon的论坛上去看,上面充满了对各种产品的性能和服务的抱怨,GAE也是一样。每个产品都会有问题,你能解决你选择的产品的问题吗?

    版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

    相关推荐


    文章浏览阅读752次。关系型数据库关系型数据库是一个结构化的数据库,创建在关系模型(二维表模型)基础上,一般面向于记录SQL语句(标准数据查询语言)就是一种基于关系型数据库的语言,用于执行对关系型数据库中数据的检索和操作主流的关系数据库包括Oracle、Mysql、SQL Server、Microsoft Access、DB2等非关系型数据库NoSQL(nOSQL=Not Only SQL),意思是“不仅仅是SQL”,是非关系型数据库的总称。除了主流的关系型数据库外的数据库,都认为是非关系型主流的NoSQ.._redis是非关系型数据库吗
    文章浏览阅读687次,点赞2次,收藏5次。商城系统中,抢购和秒杀是很常见的营销场景,在一定时间内有大量的用户访问商场下单,主要需要解决的问题有两个:1. 高并发对数据库产生的压力;2. 竞争状态下如何解决商品库存超卖;高并发对数据库产生的压力对于第一个问题,使用缓存来处理,避免直接操作数据库,例如使用 Redis。竞争状态下如何解决商品库存超卖对于第二个问题,需要重点说明。常规写法:查询出对应商品的库存,判断库存数量否大于 0,然后执行生成订单等操作,但是在判断库存是否大于 0 处,如果在高并发下就会有问题,导致库存_php库存结余并发
    文章浏览阅读1.4k次。MongoTemplate开发spring-data-mongodb提供了MongoTemplate和MongoRepository两种方式访问MongoDB,MongoRepository的方式访问较为简单,MongoTemplate方式较为灵活,这两种方式在Java对于MongoDB的运用中相辅相成。_springboot插入指定的mongodb数据库
    文章浏览阅读887次,点赞10次,收藏19次。1.背景介绍1. 背景介绍NoSQL数据库是一种非关系型数据库,它的特点是可以存储非结构化的数据,并且可以处理大量的数据。HBase是一个分布式、可扩展的列式存储系统,它是基于Google的Bigtable设计的。HBase是一个开源的NoSQL数据库,它的核心功能是提供高性能的随机读写访问。在本文中,我们将对比HBase与其他NoSQL数据库,例如Redis、MongoDB、Cass...
    文章浏览阅读819次。MongoDB连接失败记录_edentialmechanisn-scram-sha-1
    文章浏览阅读470次。mongodb抽取数据到ES,使用ELK内部插件无法获取数据,只能试试monstache抽取mongodb数据,但是monstache需要mongodb replica set 模式才能采集数据。############monstache-compose文件。#replicas set 启动服务。# 默认备份节点不能读写,可以设置。# mydb指的是需要同步的数据库。#登录主mongodb初始化rs。#primary 创建用户。# ip地址注意要修改。# ip地址注意要修改。_monstache csdn
    文章浏览阅读913次,点赞4次,收藏5次。storage:fork: trueadmin登录切换数据库注意: use 代表创建并使用,当库中没有数据时默认不显示这个库删除数据库查看表清单> show tables # 或者 > show collections表创建db.createCollection('集合名称', [options])table1字段类型描述capped布尔(可选)如果为 true,则创建固定集合。固定集合是指有着固定大小的集合,当达到最大值时,它会自动覆盖最早的文档。_mongodb5
    文章浏览阅读862次。Centos7.9设置MongoDB开机自启(超全教程,一条龙)_mongodb centos开机启动脚本
    文章浏览阅读1.3k次,点赞6次,收藏21次。NoSQL数据库使用场景以及架构介绍
    文章浏览阅读856次,点赞21次,收藏20次。1.背景介绍1. 背景介绍NoSQL数据库是一种非关系型数据库,它的设计目标是为了解决传统关系型数据库(如MySQL、Oracle等)在处理大量不结构化数据方面的不足。NoSQL数据库可以处理大量数据,具有高性能、高可扩展性和高可用性。但是,与关系型数据库不同,NoSQL数据库没有固定的模式,数据结构也不一定是表格。在NoSQL数据库中,数据存储和查询都是基于键值对、列族、图形等不同的...
    文章浏览阅读416次。NoSQL定义:非关系型、分布式、开放源码和具有横向扩展能力的下一代数据库。由c++编写的开源、高性能、无模式的基于分布式文件存储的文档型数据库特点:高性能、高可用性、高扩展性、丰富的查询支持、可替换已完场文档某个指定的数据字段应用场景:社交场景:使用mongodb存储用户信息游戏场景:用户信息,装备积分物流场景:订单信息,订单状态场景操作特点:数据量大;读写操作频繁;价值较低的数据,对事物性要求不高开源、c语言编写、默认端口号6379、key-value形式存在,存储非结构化数据。_nosql
    文章浏览阅读1.5k次,点赞3次,收藏2次。Exception in thread "main" redis.clients.jedis.exceptions.JedisConnectionException: Failed to create socket. at redis.clients.jedis.DefaultJedisSocketFactory.createSocket(DefaultJedisSocketFactory.java:110) at redis.clients.jedis.Connection.connect(Conne_redis.clients.jedis.exceptions.jedisconnectionexception: failed to create so
    文章浏览阅读6.5k次,点赞3次,收藏12次。readAnyDatabase(在所有数据库上都有读取数据的权限)、readWriteAnyDatabase(在所有数据库上都有读写数据的权限)、userAdminAnyDatabase(在所有数据库上都有管理user的权限)、dbAdminAnyDatabase(管理所有数据库的权限);:clusterAdmin(管理机器的最高权限)、clusterManager(管理和监控集群的权限)、clusterMonitor(监控集群的权限)、hostManager( 管理Server);_mongodb创建用户密码并授权
    文章浏览阅读593次。Redis是一个基于内存的键值型NoSQL数据库,在实际生产中有着非常广泛的用处_搭建本地redis
    文章浏览阅读919次。Key 的最佳实践[业务名]:[数据名]:[id]足够简短:不超过 44 字节不包含特殊字符Value 的最佳实践:合理的拆分数据,拒绝 BigKey选择合适数据结构Hash 结构的 entry 数量不要超过 1000(默认是 500,如果达到上限则底层会使用哈希表而不是 ZipList,内存占用较多)设置合理的超时时间批量处理的方案:原生的 M 操作Pipeline 批处理注意事项:批处理时不建议一次携带太多命令。Pipeline 的多个命令之间不具备原子性。_redis高级实战
    文章浏览阅读1.2k次。MongoDB 递归查询_mongodb数据库 递归
    文章浏览阅读1.2k次。通过实际代码例子介绍:如何通过MongoTemplate和MongoRepository操作数据库数据_springboot操作mongodb
    文章浏览阅读687次,点赞7次,收藏2次。首先欢迎大家阅读此文档,本文档主要分为三个模块分别是:Redis的介绍及安装、RedisDesktopManager可视化工具的安装、主从(哨兵)模式的配置。_redis 主从配置工具
    文章浏览阅读764次。天下武功,无坚不摧,唯快不破!我的名字叫 Redis,全称是 Remote Dictionary Server。有人说,组 CP,除了要了解她外,还要给机会让她了解你。那么,作为开发工程师的你,是否愿意认真阅读此心法抓住机会来了解我,运用到你的系统中提升性能。我遵守 BSD 协议,由意大利人 Salvatore Sanfilippo 使用 C 语言编写的一个基于内存实现的键值型非关系(NoSQL)..._redis 7.2 源码
    文章浏览阅读2k次。MongoDB 的增删改查【1】_mongodb $inc