
阿里云国际站经销商,主营阿里云,腾讯云,华为云,亚马逊aws,谷歌云gcp,微软云az,免费开户,代充值优惠大,联系客服飞机@jkkddd
通过ES-Hadoop实现Hive读写阿里云Elasticsearch数据
准备工作创建同一专有网络下的阿里云Elasticsearch和E-MapReduce(以下简称EMR)实例、关闭Elasticsearch实例的自动创建索引功能并创建索引和Mapping、下载与Elasticsearch实例版本一致的ES-Hadoop安装包。
步骤一:上传ES-Hadoop JAR包至HDFS
将已下载的ES-Hadoop安装包上传至EMR Master节点的HDFS目录下。
步骤二:创建Hive外表
创建Hive外表,与Elasticsearch索引中的字段进行映射。
步骤三:通过Hive写入索引数据
通过HiveSQL,向Elasticsearch实例的索引中写入数据。
步骤四:通过Hive读取索引数据
通过HiveSQL,读取Elasticsearch实例中的索引数据。
步骤一:上传ES-Hadoop JAR包至HDFS
下载ES-Hadoop安装包,其版本需要与Elasticsearch实例保持一致。
本文使用elasticsearch-hadoop-6.7.0.zip。
登录E-MapReduce控制台,获取Master节点的IP地址,并通过SSH登录对应的ECS机器。
具体操作步骤请参见登录集群。
将已下载的elasticsearch-hadoop-6.7.0.zip上传至Master节点,并解压获得elasticsearch-hadoop-hive-6.7.0.jar。
创建HDFS目录,将elasticsearch-hadoop-hive-6.7.0.jar上传至该目录下。
步骤二:创建Hive外表
在EMR控制台的数据开发模块中,创建HiveSQL类型的作业。
具体操作步骤请参见Hive SQL作业配置。
温馨提示:尊敬的[]站点管理员,将本页链接加入您的网站友情链接,下次可以快速来到这里更新您的站点信息哦!每天更新您的[阿里云24h自助充值,免费开户]站点信息,可以排到首页最前端的位置,让更多人看到您站点的信息哦。
将以下代码插入您网页中,让网友帮您更新网站每日SEO综合情况
-
白帽SEO与黑帽SEO有什么不同? -
SEO黑帽的方法包括关键词堆砌、虚假关键词、隐藏文本、内容采集、关键词堆砌、刷快排等等。白帽SEO手法是符合搜索引擎的规范的,能够使用正规的方法来合理优化网站。黑帽手法会使
-
营养师如何报考?-题王网tiw.cn -
营养师 如何报考?跟着题王网(www.tiw.cn)来一起来看看吧~ 考 营养师 需要通过机构报名,报名后需要缴纳培训费,费用是没有固定标准的,培训完成之后参加考试即可,考试合格即可
-
王帅速写研修班 -
2507不锈钢板 王帅速写研修班-功能设计叉树开展104场设计,通过服务后,在鄂北维果树、中各方之间开展互助、共同发展、发挥三位一体的产钳设备、优化组合等工作,实现了由高轮胎提炼
-
如何判断百度广告代理是否可靠? -
百度 广告 是否可靠直接影响到了我们后期的合作,毕竟很多商家还是希望能够在百度进行多种类型的广告投放,所以我们一定要特别注意好选择适合的代理商。现在能够提供百度 广告
-
第三方控价公司的工作内容 -
想知道 控价公司 的日常工作究竟是什么?其实,这个问题并不简单,但我来为你解读一下他们的日常运作。 首先,控价公司主要负责市场价格的监测与分析。他们会定期收集各种产品
-
可用于骨-韧带界面的构建的新型3D打印技术—MEW -
摘要: 骨-韧带界面的构建采用了多种策略,这对组织再生和了解界面再生机制都有重要价值。然而,如何总结天然骨-韧带界面的复杂性和异质性,包括结构、细胞和力学梯度,仍然是