anonymoustian
V2EX  ›  Hadoop

自我搭建 Spark 集群方案?

  •  
  •   anonymoustian · Nov 1, 2016 · 3904 views
    This topic created in 3507 days ago, the information mentioned may be changed or developed.

    想学习一下 Hadoop Kafka Spark 的 Mlib 和 Streaming , 自己一台笔记本的话如何搭建集群?

    网上有没有便宜的 VPS 可以搭建么?

    有没有合适的方案?

    不要伪分布式

    5 replies    2016-11-01 16:37:33 +08:00
    mortonnex
        1
    mortonnex  
       Nov 1, 2016 via iPhone
    多 vp 开几台 vps ,花不了多少钱
    学习是有成本的,况且这个成分又不高
    mortonnex
        2
    mortonnex  
       Nov 1, 2016 via iPhone
    上面回复删掉前面的 vp
    fuling
        3
    fuling  
       Nov 1, 2016
    一台机器的话,起几个 instance ,分配不同的端口就行了
    0qeIrKoJk345hkoo
        4
    0qeIrKoJk345hkoo  
       Nov 1, 2016
    笔记本多开几台虚拟机
    9hills
        5
    9hills  
       Nov 1, 2016 via Android
    建议选择按时间付费的 VPS ,写个脚本一键创建。

    不常用的话很便宜,另外建议上全套 yarn mr hdfs spark
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   5489 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 40ms · UTC 07:55 · PVG 15:55 · LAX 00:55 · JFK 03:55
    ♥ Do have faith in what you're doing.