博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
提炼hadoop ipc模块,欢迎使用
阅读量:6656 次
发布时间:2019-06-25

本文共 488 字,大约阅读时间需要 1 分钟。

hot3.png

Hadoop闻名遐迩,其内部通讯工具IPC更是被多个apache项目重复使用,所以网络上不难发现分析IPC模块的文章。某天在做分布式爬虫时,需要用到RPC功能,改造IPC(去掉认证,IPC的无关类)就出现了。
主要的Feature:
```
* 去掉Writable等接口引用;
* 去掉Socket认证功能;
* 去掉所有配置;
* 对外提供类似传统的XML-RPC面向接口的服务;
* 保留原来的Ping功能;
* 简单易用。
```
常见问题:
```
Q:IPC模块稳定吗?
A:很稳定,除了废弃掉一些模块外,基本没有修改其核心功能。
Q:多并发性能怎么样?
A:抱歉,没有测试过,自己只是在虚拟机中测试,实际情况有待大家验证。
……
```
缺点:与LVS负载均衡失败,期待大家的帮忙,自己测试时老是提示连接被重置。
更多,请参见WIKI其他文章,如http://git.oschina.net/jiangdx/hadoop-ipc/wikis/quick-start

转载于:https://my.oschina.net/twinkling/blog/147438

你可能感兴趣的文章
读写者锁与生产者/消费者模式
查看>>
关于python中的if __name__=='__main__'语句问题
查看>>
线程组
查看>>
涉密数据的处理
查看>>
python简介
查看>>
python字典开发三级菜单
查看>>
.net Framework下载地址
查看>>
深圳偶遇
查看>>
如何有效地记录 Java SQL 日志?
查看>>
学习Linux决心书
查看>>
Java本地文件操作(五)遍历文件夹
查看>>
BGP学习笔记
查看>>
linux 磁盘分区(一)
查看>>
在虚拟机中的域环境下批量安装部署软件(第三节)
查看>>
java基础(jdbc上)
查看>>
python文件读写,以后就用with open语句
查看>>
自然语言处理NLP(三)
查看>>
苏州大学GCT
查看>>
go语言碎片整理之 time
查看>>
spring mvc 返回json 数据
查看>>