提炼hadoop ipc模块,欢迎使用

Hadoop闻名遐迩,其内部通信工具IPC更是被多个apache项目重复使用,因此网络上不难发现分析IPC模块的文章。某天在作分布式爬虫时,须要用到RPC功能,改造IPC(去掉认证,IPC的无关类)就出现了。 主要的Feature: ``` * 去掉Writable等接口引用; * 去掉Socket认证功能; * 去掉全部配置; * 对外提供相似传统的XML-RPC面向接口的服务; * 保留原来的Ping功能; * 简单易用。 ``` 常见问题: ``` Q:IPC模块稳定吗? A:很稳定,除了废弃掉一些模块外,基本没有修改其核心功能。 Q:多并发性能怎么样? A:抱歉,没有测试过,本身只是在虚拟机中测试,实际状况有待你们验证。 …… ``` 缺点:与LVS负载均衡失败,期待你们的帮忙,本身测试时总是提示链接被重置。 更多,请参见WIKI其余文章,如http://git.oschina.net/jiangdx/hadoop-ipc/wikis/quick-start
相关文章
相关标签/搜索