hadoop和mysql的结合作用方案

Question

急求，hadoop和mysql的结合使用有没有好的设计方案？比如构建一种什么类型的中间件，可以达到在一个系统中，可以随时按需求调用hadoop和mysql的数据？有做过类似的项目的吗？提供些思路也可以。这里悬赏100个金币，先谢过了。

Answer 1

首先你的源数据是想存在mysql里，还是存到hadoop 里。
有一些方案是把最原始的数据，存入hadoop中。定期做清洗和分析，把处理好的数据放到mysql库里，供web应用读取，展示到页面上。追问

mysql里存储的是传统结构化数据，还有一些其他的数据存储在Hadoop中，只要意图是想灵活随时调用这两者

追答

这两个平台的数据如果需要关联的话，你需要把hadoop 中的数据导入到mysql 中。
如果只是两种独立的数据。mysql，用sql。hadoop 用hive 。

追问

对，我独立使用这两类数据的。你说各用各的我理解，但我想知道的是有没有什么中间件架构，或是系统能把mysql 和hadoop（或是hive)集合在一起。做到可以随时选择调用这两类数据。