Sunday, November 30, 2014

进入大数据这行一个礼拜,简单说一下认识

发信人: winetricks (winetricks), 信区: Quant
标  题: 进入大数据这行一个礼拜,简单说一下认识
发信站: BBS 未名空间站 (Tue Aug 26 10:40:48 2014, 美东)

大数据,从码农的角度看,分为2方面

1,数据
2,系统

其中系统又大致上为
data storage: hadoop
data access: hive
resource negotiation: yarn
...
或者类似替代品

其中按业务分,可以把数据处理分为
real-time (spark, storm)
non real-time (mr)

--
※ 来源:·WWW 未名空间站 网址:mitbbs.com 移动:在应用商店搜索未名空间·[FROM: 209.]

http://www.mitbbs.com/article_t/Quant/31368175.html

No comments:

Post a Comment