V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
Recommended Services
Amazon Web Services
LeanCloud
New Relic
ClearDB
loveltyoic
V2EX  ›  云计算

国内有没有可以部署 Spark 的云服务?

  •  
  •   loveltyoic · 2015-11-10 11:32:45 +08:00 · 4487 次点击
    这是一个创建于 3300 天前的主题,其中的信息可能已经有所发展或是发生改变。
    亚马逊的 EMR 好像可以方便部署 Spark ,但是节点都不在国内。
    请问国内有没有类似的提供商
    15 条回复    2015-12-22 14:21:34 +08:00
    ericson
        1
    ericson  
       2015-11-10 12:20:07 +08:00
    青云有
    liprais
        2
    liprais  
       2015-11-10 12:42:46 +08:00
    百度
    loveltyoic
        3
    loveltyoic  
    OP
       2015-11-10 16:44:13 +08:00
    多谢上面的回答。
    AWS 现在注册可以免费用一年,已经注册了一个账号,先试试。
    ligyxy
        4
    ligyxy  
       2015-11-10 20:06:31 +08:00
    spark-ec2 已经足够方便灵活,对我来说
    arronliu
        5
    arronliu  
       2015-11-10 22:06:27 +08:00
    青云有啊,
    loveltyoic
        6
    loveltyoic  
    OP
       2015-11-11 10:38:21 +08:00
    @ligyxy 就是 spark 自带的部署脚本吗?昨天刚刚试了一下,还没深入使用。另外你用的也是免费 1 年的吗
    ligyxy
        7
    ligyxy  
       2015-11-11 10:49:56 +08:00
    @loveltyoic 我们用在产品上。我的意思是 EMR 和 EC2 还是得根据需求挑选一下,如果你以后部署在 AWS 上的话
    zhique
        8
    zhique  
       2015-11-12 16:20:19 +08:00
    AWS 国内有 EMR 服务啊
    loveltyoic
        9
    loveltyoic  
    OP
       2015-11-12 18:25:59 +08:00
    @zhique 有国内节点吗?好像最近就是东京和新加坡
    loveltyoic
        10
    loveltyoic  
    OP
       2015-11-12 18:27:21 +08:00
    @ligyxy EC2 是不是就是虚拟机,而 EMR 直接有现成的 hadoop 环境了?
    zhique
        11
    zhique  
       2015-11-13 06:52:09 +08:00   ❤️ 1
    @loveltyoic AWS 有中国 region ,不过据说还没完全 public ,需要申请。最新的 EMR 自带 Hadoop 2.6.0, Hive 1.0.0, Hue 3.7.1, Mahout 0.11.0, Pig 0.14.0, and Spark 1.5.0
    MOS
        12
    MOS  
       2015-11-16 15:53:10 +08:00
    美团云提供 Spark 服务,当前处于免费公测阶段,您可以前往 https://mos.meituan.com/products/bds 申请免费试用。美团云大数据分析服务 MDS ( MOS Data Services )包含 Spark 、 HDFS 、 Yarn 、 Hive 、 Hbase 等组件,是根据美团自身大数据分析架构与技术实践,将美团内部使用磨合多年的数据分析平台整合剥离出来的产品。
    loveltyoic
        13
    loveltyoic  
    OP
       2015-11-17 17:47:23 +08:00
    @MOScloud 谢谢,申请一个试试
    linjuyx
        14
    linjuyx  
       2015-11-17 23:21:55 +08:00
    @loveltyoic 阿里云今天推出了 E-MapReduce ,你可以看看
    min
        15
    min  
       2015-12-22 14:21:34 +08:00
    azure 有
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1378 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 23ms · UTC 17:31 · PVG 01:31 · LAX 09:31 · JFK 12:31
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.