今日要闻

启动hadoop的命令行

来源: 作者:达人百科 2024-05-13

问达人,WenDaRen最后更新 2024年05月13日,问达人 www.wendaren.com启动hadoop的命令行:1、start-all.sh启动所有的Hadoop守护进程。包括NameNode、 Secondary NameNode、DataNo

问达人 www.wendaren.com

启动hadoop的命令行:

  

  1、start-all.sh

  

  启动所有的Hadoop守护进程。包括NameNode、 Secondary NameNode、DataNode、JobTracker、 TaskTrack。

  

  2、start-dfs.sh

  

  启动Hadoop HDFS守护进程NameNode、SecondaryNameNode和DataNode。

  

  3、hadoop-daemons.sh start namenode

  

  单独启动NameNode守护进程。

  

  4、hadoop-daemons.sh start datanode

  

  单独启动DataNode守护进程。

  

  5、hadoop-daemons.sh start secondarynamenode

  

  单独启动SecondaryNameNode守护进程。

  

  6、start-mapred.sh

  

  启动Hadoop MapReduce守护进程JobTracker和TaskTracker。

  

  7、hadoop-daemons.sh start jobtracker

  

  单独启动JobTracker守护进程。

  

  8、hadoop-daemons.sh start tasktracker

  

  单独启动TaskTracker守护进程。

  

  9、hadoop-daemons.sh stop tasktracker

  

  单独启动TaskTracker守护进程。

  

  Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HDFS。HDFS有高容错性的特点,并且设计用来部署在低廉的(low-cost)硬件上;而且它提供高吞吐量(high throughput)来访问应用程序的数据,适合那些有着超大数据集(large data set)的应用程序。HDFS放宽了(relax)POSIX的要求,可以以流的形式访问(streaming access)文件系统中的数据。Hadoop的框架最核心的设计就是:HDFS和MapReduce。HDFS为海量的数据提供了存储,而MapReduce则为海量的数据提供了计算。

2022-05-21 13:31:32
文章标签:

声明: 凡注明为其他媒体来源的信息,均为转载自其他媒体,转载并不代表本网赞同其观点,也不代表本网对其真实性负责。如系原创文章,转载请注明出处; 您若对该稿件内容有任何疑问或质疑,请即联系,本网将迅速给您回应并做处理。邮箱:mail@laishu.com

为您推荐

今日要闻

健康知识

母婴知识

咖啡资讯

美食资讯

美容护肤

星座解读

命理运势

本地资讯

热点资讯