阿里云国际站经销商,主营阿里云,腾讯云,华为云,亚马逊aws,谷歌云gcp,微软云az,免费开户,代充值优惠大,联系客服飞机@jkkddd
通过ES-Hadoop实现Hive读写阿里云Elasticsearch数据
准备工作创建同一专有网络下的阿里云Elasticsearch和E-MapReduce(以下简称EMR)实例、关闭Elasticsearch实例的自动创建索引功能并创建索引和Mapping、下载与Elasticsearch实例版本一致的ES-Hadoop安装包。
步骤一:上传ES-Hadoop JAR包至HDFS
将已下载的ES-Hadoop安装包上传至EMR Master节点的HDFS目录下。
步骤二:创建Hive外表
创建Hive外表,与Elasticsearch索引中的字段进行映射。
步骤三:通过Hive写入索引数据
通过HiveSQL,向Elasticsearch实例的索引中写入数据。
步骤四:通过Hive读取索引数据
通过HiveSQL,读取Elasticsearch实例中的索引数据。
步骤一:上传ES-Hadoop JAR包至HDFS
下载ES-Hadoop安装包,其版本需要与Elasticsearch实例保持一致。
本文使用elasticsearch-hadoop-6.7.0.zip。
登录E-MapReduce控制台,获取Master节点的IP地址,并通过SSH登录对应的ECS机器。
具体操作步骤请参见登录集群。
将已下载的elasticsearch-hadoop-6.7.0.zip上传至Master节点,并解压获得elasticsearch-hadoop-hive-6.7.0.jar。
创建HDFS目录,将elasticsearch-hadoop-hive-6.7.0.jar上传至该目录下。
步骤二:创建Hive外表
在EMR控制台的数据开发模块中,创建HiveSQL类型的作业。
具体操作步骤请参见Hive SQL作业配置。
温馨提示:尊敬的[]站点管理员,将本页链接加入您的网站友情链接,下次可以快速来到这里更新您的站点信息哦!每天更新您的[阿里云24h自助充值,免费开户]站点信息,可以排到首页最前端的位置,让更多人看到您站点的信息哦。
将以下代码插入您网页中,让网友帮您更新网站每日SEO综合情况
-
ufo中文网_UFO中文网盈利 -
腾讯云国际经销商代充值 UFO中文网是如何盈利的? UFO中文网作为一个专注于UFO和外星人相关内容的网站,一直以来都吸引了大量的读者。但是,作为一个非商业性质的网站,UFO中文网
-
《SCUM》闪退 崩溃 黑屏怎么办?解决办法 -
有很多玩家在玩"人渣SCUM"时遇到游戏出现闪退、崩溃、黑屏的问题,下面给大家带来解决办法。 1.配置问题。检查电脑操作系统、内存大小、显卡驱动是否达到游戏最低配置要求,如果
-
ui设计和平面设计区别_ui设计师工资一般多少 -
考研笔记 UI设计和平面设计有何区别? UI设计(用户界面设计)和平面设计是两个不同的领域,尽管它们可能有一些交叉点,但在职责和技能上仍存在一些明显的区别。 UI设计师的工作
-
道教高功研修班通讯录 -
北京汽车报废厂 道教高功研修班通讯录于12月18日至19世纪是以追求()、提高中小学教师素质教育能力为目标的教育兴盛活动,把吸纳终身学习境界扩展到教师教育中来,深化自我管理,深化
-
voiture_voiture阴阳性 -
整形美容咨询 Voiture_voiture: 阴阳性是什么? Voiture_voiture是法语中"汽车"这个词的一种写法,同时也是用来描述法语名词的性别的术语。在法语中,每个名词都被归类为阴性或阳性,这是
-
煤厂工程车辆洗车机-怎么判断好坏 -
一些朋友问 煤厂工程车辆洗车机 ,会发现各种制造商都有,尤其是在过去的两年里,环境保护管制严格,每个人的需求都在增加。在哪里可以找到 煤厂工程车辆洗车机 ,当然,这样的