阿里云国际站经销商,主营阿里云,腾讯云,华为云,亚马逊aws,谷歌云gcp,微软云az,免费开户,代充值优惠大,联系客服飞机@jkkddd
通过ES-Hadoop实现Hive读写阿里云Elasticsearch数据
准备工作创建同一专有网络下的阿里云Elasticsearch和E-MapReduce(以下简称EMR)实例、关闭Elasticsearch实例的自动创建索引功能并创建索引和Mapping、下载与Elasticsearch实例版本一致的ES-Hadoop安装包。
步骤一:上传ES-Hadoop JAR包至HDFS
将已下载的ES-Hadoop安装包上传至EMR Master节点的HDFS目录下。
步骤二:创建Hive外表
创建Hive外表,与Elasticsearch索引中的字段进行映射。
步骤三:通过Hive写入索引数据
通过HiveSQL,向Elasticsearch实例的索引中写入数据。
步骤四:通过Hive读取索引数据
通过HiveSQL,读取Elasticsearch实例中的索引数据。
步骤一:上传ES-Hadoop JAR包至HDFS
下载ES-Hadoop安装包,其版本需要与Elasticsearch实例保持一致。
本文使用elasticsearch-hadoop-6.7.0.zip。
登录E-MapReduce控制台,获取Master节点的IP地址,并通过SSH登录对应的ECS机器。
具体操作步骤请参见登录集群。
将已下载的elasticsearch-hadoop-6.7.0.zip上传至Master节点,并解压获得elasticsearch-hadoop-hive-6.7.0.jar。
创建HDFS目录,将elasticsearch-hadoop-hive-6.7.0.jar上传至该目录下。
步骤二:创建Hive外表
在EMR控制台的数据开发模块中,创建HiveSQL类型的作业。
具体操作步骤请参见Hive SQL作业配置。
温馨提示:尊敬的[]站点管理员,将本页链接加入您的网站友情链接,下次可以快速来到这里更新您的站点信息哦!每天更新您的[阿里云24h自助充值,免费开户]站点信息,可以排到首页最前端的位置,让更多人看到您站点的信息哦。
将以下代码插入您网页中,让网友帮您更新网站每日SEO综合情况
-
root大师pc版手机版_ -
ATX工业计算机主板 什么是Root大师PC版和手机版? Root大师是一款专业的手机Root工具,旨在帮助用户解锁手机的潜力,获得更高的自由度和更多的个性化设置选项。Root大师提供了PC版和手
-
考mba还是免联考 -
904L不锈钢管 考mba还是免联考,是先上车后买票的学习模式,为了方便大家的学习,参加一月mba联考。 一月mba可以先学习,通过一月全国联考,修学分,毕业后可获得研究生毕业证书。 十月份的
-
recommend怎么记_recommend怎么记忆 -
如何记忆recommend? 记忆是一个重要的学习技巧,尤其对于学习外语词汇来说更是如此。那么,如何记忆英语单词recommend呢?下面是一些方法和技巧,希望对你有所帮助。 1. 了解单词的含
-
研修班要做些什么 -
316L不锈钢管 研修班要做些什么,什么是研修班?专门针对女性的朋友和干什么,大家读过什么是,这个道理不是什么,关键,什么是。 随着社会的发展,我国社会经济发展越来越今天,每年大学
-
“JBL推出新款真无线入耳式耳机” -
贵阳短视频拍摄 2019年1月7日,拉斯维加斯,2019年国际费用电子展( ces )真无线耳机备受瞩目,备受业界欢迎。 2019年,jbl将继续引领行业风气,在现有真正的无线耳机系列的基础上增加
-
seo黑帽联盟外推(seo黑帽论坛) -
800秀 seo黑帽联盟外推是什么,主要是利用网页制造大量的与关键词相关的描文本,使关键词在搜索引擎中能够更快的匹配到目标网站,增加了外部链接的数量和质量,锚文本外链seo软件价格