阿里云国际站经销商,主营阿里云,腾讯云,华为云,亚马逊aws,谷歌云gcp,微软云az,免费开户,代充值优惠大,联系客服飞机@jkkddd
通过DataWorks将HBase数据同步到Elasticsearch
步骤一:环境准备创建阿里云Elasticsearch实例,并开启实例的自动创建索引功能。
具体操作,请参见创建阿里云Elasticsearch实例和配置YML参数。本文以通用商业版实例为例。
创建DataWorks工作空间。
创建工作空间时,所选地域需要与阿里云Elasticsearch一致。具体操作,请参见创建工作空间。
创建HBase集群并准备测试数据。
创建HBase集群时,所选地域、专有网络和虚拟交换机要与阿里云Elasticsearch保持一致。本文以创建标准版HBase集群为例,具体操作,请参见购买集群。
测试数据
使用put命令向数据表中插入数据,例如:put "student", "row1", "name:a", "xiaoming"。
使用scan命令查看表中的数据,例如:scan "student"。
步骤二:购买并创建DataWorks独享资源组
区间
登录DataWorks控制台。
选择相应地域后,在左侧导航栏,单击资源组列表。
购买独享数据集成资源。
创建一个独享数据集成资源。
具体操作,请参见新增和使用独享数据集成资源组。本文使用的配置如下,其中资源组类型选择独享数据集成资源组
单击已创建的独享资源组右侧的网络设置,参见绑定专有网络,为该独享资源组绑定专有网络。
独享资源部署在DataWorks托管的专有网络中。DataWorks需要与HBase集群和Elasticsearch实例的专有网络连通才能同步数据。而HBase集群和Elasticsearch实例在同一专有网络下,因此在绑定专有网络时,选择Elasticsearch实例所在专有网络和交换机即可。
单击已创建的独享资源组右侧的修改归属工作空间,为该独享资源组绑定目标工作空间。
具体操作,请参见新增和使用独享数据集成资源组。
步骤三:配置HBase白名单
无论是公网访问,还是VPC内网访问,均需要先将访问HBase的客户端IP地址加入到白名单中,才能连接到HBase集群。本文需要使用步骤一中创建的独享资源组,通过VPC内网访问HBase集群,因此在添加数据源前,需要将独享资源组绑定的交换机网段添加至HBase的访问白名单中,具体操作请参见设置白名单和安全组。
步骤四:在DataWorks中添加HBase和Elasticsearch数据源
进入DataWorks的数据集成页面。
在DataWorks控制台的左侧导航栏,单击工作空间列表。
找到目标工作空间,单击其右侧操作列下的数据集成。
在左侧导航栏,单击数据源。
在数据源管理页面,单击新增数据源。
在新增数据源对话框的大数据存储区域中,单击HBase。
在新增HBase数据源对话框中,填写数据源名称和配置信息。
使用的HBase版本不同,您需要填写不同的配置信息:
标准版及以下的版本:使用默认的配置信息,即ZK链接地址,同时需要手动增加hbaseVersion属性。
温馨提示:尊敬的[]站点管理员,将本页链接加入您的网站友情链接,下次可以快速来到这里更新您的站点信息哦!每天更新您的[阿里云服务器购买,阿里云国际账号免费注册]站点信息,可以排到首页最前端的位置,让更多人看到您站点的信息哦。
将以下代码插入您网页中,让网友帮您更新网站每日SEO综合情况
-
semm52com_ -
绝地求生DMA 什么是semm52com_? semm52com_是一个神秘的网络平台,它为用户提供了一种全新的在线交流和分享体验。这个平台以其独特的功能和令人惊艳的设计而广受欢迎。它为用户提供了
-
考察少儿绘画培训加盟品牌不要犯得错误 -
少儿绘画培训加盟 是一种逐渐盛行的商业模式,投资者可以通过品牌加盟开设少儿绘画教育机构从中获得利润。许多投资者在加盟少儿绘画培训品牌时会不经意间犯下一些错误。这些错
-
快快一管理家庭健康 -
快快一管理家庭健康 场景 年轻人没日没夜加班 父母家人的健康无人看管 痛点:职场人的工作与家人生活的关爱 老人家老是扛着 有行动能力,但任然不方便,不给儿女添负担 痛点:老
-
“苏宁天猫宣布联手卖手机:全年要卖1000亿” -
2022北京车辆报废流程 【科技在线】 3月24日,今天,苏宁天猫手机节发布会在南京苏宁总部举行,双方宣布合作搭建全国大手机零售平台,不久4月,将举办全渠道手机节,年销售目标
-
stationery是单数还是复数_stationery有复数吗 -
关于stationery是单数还是复数? 在英语中,stationery这个词既可以作为单数,也可以作为复数。它的使用方式取决于上下文和具体的语境。 stationery的单数形式 在大多数情况下,当我们提
-
深圳谋动债务公司 www.moudong.com -
在很多人看来,讨债公司的存在是社会的一种“怪胎”,他们“打着”为企业融资、为公司经营、为个人维权的幌子,却干着违法犯罪的勾当。然而,近日记者在调查中发现,在这一灰