登录  /  注册
首页 > 常见问题 > 正文

hdfs mongodb的区别是什么

coldplay.xixi
发布: 2020-08-24 13:50:17
原创
3171人浏览过

hdfs mongodb的区别是:1、mongodb适合无严格事务性要求的各种数据,而hdfs对大量小文件的存储开销比较大,适合大文件处理;2、mongodb适合做缓存,而更加适合写入一次,读取多次的应用场景。

hdfs mongodb的区别是什么

hdfs mongodb的区别是:

MongoDB: 日志的采集和存储,小文件的分布式存储,类似互联网微博应用的数据存储

1)适合无严格事务性要求的各种数据,如对象数据,JSON格式数据

2)由于性能非常高,非常适合实时的插入,更新与查找,并具备高度伸缩性

3)适合做缓存

HDFS:适合大文件存储,可append,但不可修改。适合Hadoop离线数据分析,Apache Spark的数据存储。

1)HDFS对大量小文件的存储开销比较大,适合大文件处理,如果有多个小文件,可以合并为大文件再处理

2)HDFS适用于高吞吐量,而不适合低时间延迟的访问

3)HDFS适用于流式读取的方式,不适合多用户写入一个文件、随机写以及文件的覆盖操作

4)HDFS更加适合写入一次,读取多次的应用场景

 

mongodb适用于以下场景:

a.网站数据:mongo非常适合实时的插入,更新与查询,并具备网站实时数据存储所需的复制及高度伸缩性。

b.缓存:由于性能很高,mongo也适合作为信息基础设施的缓存层。在系统重启之后,由mongo搭建的持久化缓存可以避免下层的数据源过载。

c.大尺寸、低价值的数据:使用传统的关系数据库存储一些数据时可能会比较贵,在此之前,很多程序员往往会选择传统的文件进行存储。

d.高伸缩性的场景:mongo非常适合由数十或者数百台服务器组成的数据库。

e.用于对象及JSON数据的存储:mongo的BSON数据格式非常适合文档格式化的存储及查询。

不适合的场景:

a.高度事物性的系统:例如银行或会计系统。传统的关系型数据库目前还是更适用于需要大量原子性复杂事务的应用程序。

b.传统的商业智能应用:针对特定问题的BI数据库会对产生高度优化的查询方式。对于此类应用,数据仓库可能是更合适的选择。

c.需要SQL的问题。

HDFS适用场景

GB、TB、甚至PB级数据

百万规模以上的文件数量

10K+节点规模

以上就是hdfs mongodb的区别是什么的详细内容,更多请关注php中文网其它相关文章!

智能AI问答
PHP中文网智能助手能迅速回答你的编程问题,提供实时的代码和解决方案,帮助你解决各种难题。不仅如此,它还能提供编程资源和学习指导,帮助你快速提升编程技能。无论你是初学者还是专业人士,AI智能助手都能成为你的可靠助手,助力你在编程领域取得更大的成就。
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn
最新问题
热门教程
更多>
最新下载
更多>
网站特效
网站源码
网站素材
前端模板
关于我们 免责申明 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送
PHP中文网APP
随时随地碎片化学习
PHP中文网抖音号
发现有趣的

Copyright 2014-2024 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号