Hadoop与RPC通讯格式需求有哪些
这篇文章将为大家详细讲解有关Hadoop与RPC通讯格式需求有哪些,小编觉得挺实用的,因此分享给大家做个参考,希望大家阅读完这篇文章后可以有所收获。
Hadoop在节点间的内部通讯使用的是RPC,RPC协议把消息翻译成二进制字节流发送到远程节点,远程节点再通过反序列化把二进制流转成原始的消息。
Rpc的序列化需要实现以下几点:
1、压缩,可以起到压缩的效果,占用的宽带的资源要小。
2、快速,内部进程为分布式系统构建了高速链路,因此在序列化和反序列化间必须是
快速的,不能让传输速度成为瓶颈。
3、可扩展的,新的服务端为新的客户端增加了一个参数,老客户端照样可以使用。
4、兼容性好,可以支持多个语言的客户端。
关于“Hadoop与RPC通讯格式需求有哪些”这篇文章就分享到这里了,希望以上内容可以对大家有一定的帮助,使各位可以学到更多知识,如果觉得文章不错,请把它分享出去让更多的人看到。
发布时间:2022-09-07
上一篇:香港服务器的带宽是真实的吗?
下一篇:Hadoop文件读取的示例分析