第一范文网 - 专业文章范例文档资料分享平台

先电大数据平台操作手册-iandian-bigdata-v2.1

来源:用户分享 时间:2025/7/27 20:07:21 本文由loading 分享 下载这篇文档手机版
说明:文章内容仅供预览,部分内容可能不全,需要完整文档或者需要复制内容,请下载word后使用。下载word有问题请添加微信号:xxxxxxx或QQ:xxxxxx 处理(尽可能给您提供完整文档),感谢您的支持与谅解。

2. 安全模式

当在进行系统维护或者集群维护时,不希望用户进行再去操作HDFS文件系统中文件,这时候需要手动将NameNode设置成安全模式的状态。该操作需要HDFS管理用户来进行实现,即hdfs用户。

命令如下:

$ hadoop dfsadmin -safemode enter $ hadoop dfsadmin -safemode get 执行结果如下: Safe mode is ON 3. 回收站

设置HDFS文件系统回收站中的文件彻底删除的时间间隔为7天。进入到HDFS配置中修改“的值为10080(分钟)。注:当该值为0时,表示禁用回收站的功能。

4. 快照管理

为HDFS文件系统中“/1daoyun”目录创建快照,首先需要设置该目录可进行快照功能,然后再进行创建快照。

创建完成后,创建一个恢复文件夹,通过cp命令可以恢复快照,如下:

5.3 MapReduce

5.3.1 运行案例

进入/usr/hdp/目录中,存在一个 的案例JAR包,其所自带的案例如下:

这里,我们以运行一个圆周率的计算为例: # cd /usr/hdp/ hadoop jar pi 5 5

6 部署Hive数据仓库

6.1 部署Hive

进入先电大数据平台主界面,点击左侧的动作按钮,添加Hive服务。

6.1 Hive用户指南

6.1.1 测试验证

启动hive客户端

先电大数据平台操作手册-iandian-bigdata-v2.1.doc 将本文的Word文档下载到电脑,方便复制、编辑、收藏和打印
本文链接:https://www.diyifanwen.net/c9reqv47be06m3qp9xkwe9ersa9ps1u00x9f_7.html(转载请注明文章来源)
热门推荐
Copyright © 2012-2023 第一范文网 版权所有 免责声明 | 联系我们
声明 :本网站尊重并保护知识产权,根据《信息网络传播权保护条例》,如果我们转载的作品侵犯了您的权利,请在一个月内通知我们,我们会及时删除。
客服QQ:xxxxxx 邮箱:xxxxxx@qq.com
渝ICP备2023013149号
Top