星空网 > 软件开发 > 数据库

Hadoop Avro支持多输入AvroMultipleInputs

Avro 提供了1.x版本的AvroMultipleInputs,但是不支持2.x API版本,因此修改对应代码,增加对hadoop 2.x API版本的的支持

代码放在https://github.com/jadepeng/AvroMultipleInputs/

使用方法和MultipleInputs类似,指定inputpath,key和value的SCHEMA,以及处理用的Mapper类即可

AvroMultipleInputs.addInputPath(job, new Path(inputPath),Schema.create(Schema.Type.STRING), 						SingerItem.SCHEMA$, SingerItemMapper.class);

  

 




原标题:Hadoop Avro支持多输入AvroMultipleInputs

关键词:ip

ip
*特别声明:以上内容来自于网络收集,著作权属原作者所有,如有侵权,请联系我们: admin#shaoqun.com (#换成@)。

受制裁却跻身金砖,一文解读伊朗的机遇和风险:https://www.kjdsnews.com/a/1601913.html
为什么大企业都要做VIE架构,什么是VIE架构呢?有哪些优势呢?:https://www.kjdsnews.com/a/1601914.html
消费类电子产品行业:科技创新和市场需求共舞:https://www.kjdsnews.com/a/1601915.html
亚马逊前置评论板块!赋予产品评论更大权重:https://www.kjdsnews.com/a/1601916.html
短视频直播成交话术攻略:https://www.kjdsnews.com/a/1601917.html
2023深圳进出口贸易博览会六大亮点抢先看!:https://www.kjdsnews.com/a/1601918.html
下周开始,安徽人免费游九华山,带上身份证就:https://www.vstour.cn/a/408234.html
上海滑雪场门票价格?:https://www.vstour.cn/a/408235.html
相关文章
我的浏览记录
最新相关资讯
海外公司注册 | 跨境电商服务平台 | 深圳旅行社 | 东南亚物流