sunren 发表于 2016-12-6 10:45:50

hadoop namenode后台jetty web

  现在开始分析namenode启动时开启的第2类线程,jetty web访问hadoop的功能。hadoop提供了一个很简洁但是很强大的web后台用于管理hdfs与mapreduce等,大家知道java访问web的方式就是servlet的方式,然后jetty这个轻量级的web server又提供了 HTTP server, HTTP client, 和servlet container的功能(见jetty的主页说明),因此选择jetty做为内嵌的web server是最合适不过了。

          实现简单的web server的功能交给了HttpServer这个类,在这个类里设置了一些servlet的映射关系以及一些初始server的各种上下文,最重要的是加载hadoop自带的webapps目录,然后生成一个在jetty中运行的webapp项目,hadoop自带的webapps目录默认包含了以下资源路径:
Java代码    


[*]datanode    
[*]hdfs    
[*]job    
[*]secondary    
[*]static    
[*]task  

   
         如果想访问hadoop的jetty web的话,是依据
 
Java代码    


[*]dfs.http.address= 0.0 . 0.0 : 50070   

 这个配置来的,这里尤其需要说明的是,这里端口是可以随便修改的只要在1024到65536之间就好了(1024以下是root用户才能使用的端口,如果非root使用需要加s权限,然后65536是port的上限),然后监听地址必须是0.0.0.0,这个地址的含义是不限制ip的,谁都可以连接过来,如果你修改为当前本机ip,那好吧只有你本地发起的连接才有效(这个在tomcat或者jboss启动时可以参考下地址设置问题)
    在HttpServer中默认提供了如下2个servlet
Java代码    


[*]stacks=  "/stacks"              //获取当前的堆栈信息(不走web的话就是kill -3或者jstack命令)   
[*]logLevel= "/logLevel"       //设置log级别    

   同时启动时增加了如下servlet可以访问
 
Java代码    


[*]fsck= "/fsck"   
[*]getimage="/getimage"   
[*]listPaths="/listPaths/*"   
[*]data= "/data/*"   
[*]checksum= "/fileChecksum/*"   

   如果我们想增加自己的servlet也很简单,只需要调用HttpServer的
Java代码    


[*]addServlet(String name, String pathSpec,  
[*]      Class<? extends  HttpServlet> clazz)   

    第一个参数是servlet的名字,第2个参数是访问路径,第3个参数就是处理请求的servlet类,和配置一个servlet一样的逻辑,同时HttpServer也支持filter,你也可以实现自己的filter,例如权限验证等。
更多信息请查看 java进阶网 http://www.javady.com
页: [1]
查看完整版本: hadoop namenode后台jetty web