Recommended Services
› Amazon Web Services
› LeanCloud
› New Relic
› ClearDB
zhangneww
V2EX  ›  云计算

Hadoop or Spark ?

  •  
  •   zhangneww · Jun 11, 2015 · 3413 views
    This topic created in 4165 days ago, the information mentioned may be changed or developed.
    本人大三学生,会一点 java,C#,python,C,熟练程度递减。

    之前 配置过 Storm, kafka, zookeeper。只是配置过。现在在配置 hadoop,64位本地库还没编译。

    打算学大数据,看到 Spark 比 hadoop 好一点,可以直接学 Spark 吗,V友们给点意见,谢谢。
    9 replies  •  2015-06-19 21:14:26 +08:00
    johnsmith123
    johnsmith123
    Jun 11, 2015❤️1
    1
    只问一句 有100台服务器吗?
    Gonster
    Gonster
    Jun 11, 2015 via iPhone❤️1
    2
    这里好像不是或关系吧...
    zhangneww
    zhangneww
    OP
    Jun 11, 2015
    3
    @Gonster 先学 hadoop 吗?
    FeiMa
    FeiMa
    Jun 11, 2015
    4
    要学的话,还是先学Hadoop吧。
    另,两个的应用场景不同,有需要的话,两个都要学。
    sleeperqp
    sleeperqp
    Jun 11, 2015
    5
    看你是想往什么方向做了
    运维 就看看怎么怎么自动化配置 加上个docker nagios这些
    分布式平台 就看源码吧
    还是数据挖掘机器学习这类 先看理论然后在上面实现
    这两个都是平台而已
    20150517
    20150517
    Jun 12, 2015 via Android
    6
    你这是做运维了吧?装啊装配置什么的。。。其实还是关键写的map reduce程序啊,说到底到的java水平啊
    zhchaos
    zhchaos
    Jun 12, 2015
    7
    运维
    lujiajing1126
    lujiajing1126
    Jun 12, 2015
    8
    Hadoop和Spark都不是同一层面上的吧

    Hadoop一般主要是MR和HDFS,主要是用来做离线计算的,非常底层的

    Spark是实时计算
    locatelli
    locatelli
    Jun 19, 2015
    9
    现在的业务场景经常需要Hadoop和Spark结合,所以不是零和的关系
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   1525 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 35ms · UTC 23:05 · PVG 07:05 · LAX 15:05 · JFK 18:05
    ♥ Do have faith in what you're doing.