V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
snopy
V2EX  ›  Hadoop

hive 的存储路径的 .hive-staging_hive_yyyy-MM-dd_HH-mm-ss_SSS_xxxx-x 文件可以清理掉吗

  •  1
     
  •   snopy · 2016-11-01 15:36:24 +08:00 · 5021 次点击
    这是一个创建于 2943 天前的主题,其中的信息可能已经有所发展或是发生改变。

    hive 的存储路径下发现大量 .hive-staging_hive_yyyy-MM-dd_HH-mm-ss_SSS_xxxx-x 文件,而且个别文件已达到 GB 规模,不清楚能不能清理掉。此为发帖原因

    ---------------我是分割线----------------

    已尝试在谷歌上搜索关于这种文件的相关介绍,目前仅发现这篇 [ http://codefudg.blogspot.jp/2015/03/issuefix-too-many-hive-staging.html ] 资料,但是没涉及到我想问的问题,特来此求助大牛。

    tool-manager

    3 条回复    2016-11-02 06:34:24 +08:00
    20150517
        1
    20150517  
       2016-11-01 19:47:56 +08:00
    staging 文件可以清理的,这是 query 运行后留下的,但我们的好像是自动清理的,不知道为什么你有这么多
    snopy
        2
    snopy  
    OP
       2016-11-01 22:41:51 +08:00
    @20150517 有没有 staging 文件的说明?我在 google 上没搜到中文版的
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2771 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 24ms · UTC 13:34 · PVG 21:34 · LAX 05:34 · JFK 08:34
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.