WEB开发网      婵犵數濞€濞佳囧磹婵犳艾鐤炬い鎰堕檮閸嬬喐銇勯弽銊с€掗梻鍕閺岋箑螣娓氼垱笑闂佽姘﹂褔婀佸┑鐘诧工妤犲憡绂嶉崜褏纾奸弶鍫涘妼缁楁岸鏌熷畡鐗堝殗闁诡喒鏅犲畷褰掝敃閵堝棙顔忔繝鐢靛仦閸ㄥ爼骞愰幘顔肩;闁规崘绉ぐ鎺撳亹闁绘垶锕╁Λ鍕⒑閹肩偛濡奸悗娑掓櫇缁顓兼径妯绘櫇闂佹寧绻傞弻濠囨晝閸屾稓鍘甸柣搴㈢⊕閿氶柣蹇ョ稻缁绘繃绻濋崘銊т紝闂佽鍨伴崯鏉戠暦閻旂⒈鏁傞柛鈾€鏅欑槐妯衡攽閻愬樊鍤熷┑顔藉劤铻為柛鏇ㄥ墯閸欏繘鏌嶉崫鍕櫣缂佲偓婢跺绠鹃柟瀛樼箘閿涘秵顨ラ悙顏勭伈闁诡喖缍婂畷鎯邦槻婵℃彃顭烽弻娑㈠Ω閵夈儺鍔夌紓浣稿€哥粔褰掑极閹剧粯鏅搁柨鐕傛嫹 ---闂傚倷鐒︾€笛兠洪埡鍛闁跨噦鎷�
开发学院服务器云计算 HADOOP本地可视化界面的设计及基本 阅读

HADOOP本地可视化界面的设计及基本

 2012-10-10 14:33:23 来源:WEB开发网 闂傚倷绶氬ḿ褍螞閹绢喖绠柨鐕傛嫹闂傚倷绀侀幉锟犲垂閻㈠灚宕查柟鎵閸庡秵銇勯幒鎴濃偓鐢稿磻閹炬枼妲堟繛鍡楃С濞岊亞绱撻崒姘扁枌闁瑰嚖鎷�婵犵數濮幏鍐川椤撴繄鎹曢梻渚€娼уú銈吤洪妸鈺佺劦妞ゆ帊鑳堕埊鏇㈡煏閸モ晛浠х紒杈╁仱閺佹捇鏁撻敓锟�闂傚倷绶氬ḿ褍螞閹绢喖绠柨鐕傛嫹  闂傚倷鑳舵灙缂佺粯顨呴埢宥夊即閵忕姵鐎梺缁樺姇閻忔氨鈧凹鍓熷娲垂椤曞懎鍓伴梺閫炲苯澧紒澶婄秺瀵濡歌閸嬫捇妫冨☉娆忔殘闂佷紮缍€娴滎剟鍩€椤掑倹鏆柛瀣躬瀹曚即寮借閺嗭箓鏌ㄩ悤鍌涘
核心提示: (1)设计思路:在hadoop节点上,运行程序后,HADOOP本地可视化界面的设计及基本,可显示可视化界面,和普通的资源管理器类似,所以如果时间允许,需要重新设计,实现简单的文件树查看、创建文件、删除文件等操作,目前界面设计如下:主要界面包括工具栏、文件树、查看区、状态栏四个部分

 (1)设计思路:

在hadoop节点上,运行程序后,可显示可视化界面,和普通的资源管理器类似,实现简单的文件树查看、创建文件、删除文件等操作。

目前界面设计如下:


主要界面包括工具栏、文件树、查看区、状态栏四个部分。

工具栏提供如下功能: 刷新(更新文件树和hdfs同步)、新建目录、删除目录或文件、查看目录(相当于ls命令)、查看文件(返回文件内容)


状态栏显示当前文件系统的操作结果。

查看区根据操作不同,显示不同的结果。

(2)基本实现

上述是设计思路,下面该说如何实现了。

对于实现我有以下几个思路:通过namenode的rpc机制(C/S架构方式)、运行在namenode上调用fs命令(本地模式)、直接读取镜像文件实现(dfs服务不启动也可以实现文件树的查看)

本地实现采用第二种方式,即直接在namenode上调用fs命令来解析结果和调用fs命令实现hdfs的操作。采用这样方式的原因在于较简单,同时也为另2种实现方式做一些基本的技术准备。(个人倾向于直接对镜像文件和数据块文件操作的方式实现,这个等同于在hdfs内核级别的操作,但是要注意和dfs服务本身的同步;所以或者折中的方式是采用rpc方式)。

由于目前的实现方式中,还没有涉及到hadoop的api接口调用,都是通过命令行方式来操作的,所以直接用java -jar命令即可运行。如果代码中用了hadoop的api,则需要用hadoop脚本来运行jar包。

(3)后续

由于时间原因,对文件操作错误的处理还没有实现。

后续希望实现新建文件、追加文件内容功能,由于工作任务较紧,所以这个只能先放着了。追加文件需要对hadoop的设置进行修改,改为支持追加方式后才可以进行文件追加。
由于代码为功能实现,一些细节处理很糟糕,效率也并不好,所以如果时间允许,需要重新设计,并对效率方面进行优化。

Tags:HADOOP 本地 可视化

编辑录入:爽爽 [复制链接] [打 印]
赞助商链接