设为首页 收藏本站
查看: 665|回复: 0

[经验分享] Spring for hadoop 简介

[复制链接]

尚未签到

发表于 2016-12-4 10:51:53 | 显示全部楼层 |阅读模式
  Spring for hadoop提供了统一的配置模式以简化Apache Hadoop的开发,并也易于调用HDFS、Mapreduce、Pig和Hive的API。它还提供了与Spring生态圈的其他项目集成的能力,例如Spring Intergration 和Spring Batch,让你可以优雅地开发大数据的提取/导出和Hadoop工作流项目。
  从OReilly公司下载Spring-data:Morden Data Access for Enterprise Java一书(http://shop.oreilly.com/product/0636920024767.do#),这本书包含了几章叙述了如何使用Sring for Apache Hadoop。此书的源码在Github网站可以下载(https://github.com/SpringSource/spring-data-book)。
  特性
  1、相对于使用Hadoop命令行工具,Spring for Hadoop可以创建使用依赖注入并且以标准的Java程序一样运行的应用。
  2、与Spring Boot集成可以方便地创建与HDFS连接读取和写入数据的Spring应用。
  3、创建和设置使用Java MapReduce、Streaming、Hive和HBase的应用。
  4、扩展Spring Batch 以支持创建适合任意类型的基于Hadoop的Hadoop Job或者HDFS操作的工作流。
  5、可以使用任意基于JVM的脚本语言来编写HDFS操作代码。
  6、易于创建定制的基于Spring Boot的应用并能在YARN上部署并运行。
  7、支持HBase的DAO组件(Template和Callbacks)。
  8、支持Hadoop的安全认证。

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.iyunv.com/thread-309479-1-1.html 上篇帖子: [Hadoop] 从WordCount 入门 下篇帖子: hadoop版本与glibc版本
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表