加入收藏 | 设为首页 | 会员中心 | 我要投稿 济南站长网 (https://www.0531zz.com/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 站长学院 > MySql教程 > 正文

Cassandra或Hadoop Hive或MYSQL?

发布时间:2021-01-27 02:31:27 所属栏目:MySql教程 来源:网络整理
导读:我正在开发网络爬虫,哪个对存储数据有好处?卡桑德拉或者Hadoop的蜂巢或MySQL?为什么?我有过去在我的MySQL数据库6个月的数据1TB,我需要索引他们,我需要得到了把我的搜索尽快,并且我认为,它会存储更多数据,例如10个Peta Byes,因为我的抓取工具正在快速运

我正在开发网络爬虫,哪个对存储数据有好处?卡桑德拉或者Hadoop的蜂巢或MySQL?为什么?我有过去在我的MySQL数据库6个月的数据1TB,我需要索引他们,我需要得到了把我的搜索尽快,并且我认为,它会存储更多数据,例如10个Peta Byes,因为我的抓取工具正在快速运行,我需要快速进行读/写操作,我需要将其集成到我的PHP应用程序中 最佳答案 这取决于您的要求的详细信息,但是我认为在您的情况下,HBase将是最佳选择.
充分证明了将HBase用作Web爬网程序数据库,BigTable白皮书中介绍了HBase的用法.

(编辑:济南站长网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

    热点阅读