阿里云国际站经销商,主营阿里云,腾讯云,华为云,亚马逊aws,谷歌云gcp,微软云az,免费开户,代充值优惠大,联系客服飞机@jkkddd
通过DataWorks将HBase数据同步到Elasticsearch
步骤一:环境准备创建阿里云Elasticsearch实例,并开启实例的自动创建索引功能。
具体操作,请参见创建阿里云Elasticsearch实例和配置YML参数。本文以通用商业版实例为例。
创建DataWorks工作空间。
创建工作空间时,所选地域需要与阿里云Elasticsearch一致。具体操作,请参见创建工作空间。
创建HBase集群并准备测试数据。
创建HBase集群时,所选地域、专有网络和虚拟交换机要与阿里云Elasticsearch保持一致。本文以创建标准版HBase集群为例,具体操作,请参见购买集群。
测试数据
使用put命令向数据表中插入数据,例如:put "student", "row1", "name:a", "xiaoming"。
使用scan命令查看表中的数据,例如:scan "student"。
步骤二:购买并创建DataWorks独享资源组
区间
登录DataWorks控制台。
选择相应地域后,在左侧导航栏,单击资源组列表。
购买独享数据集成资源。
创建一个独享数据集成资源。
具体操作,请参见新增和使用独享数据集成资源组。本文使用的配置如下,其中资源组类型选择独享数据集成资源组
单击已创建的独享资源组右侧的网络设置,参见绑定专有网络,为该独享资源组绑定专有网络。
独享资源部署在DataWorks托管的专有网络中。DataWorks需要与HBase集群和Elasticsearch实例的专有网络连通才能同步数据。而HBase集群和Elasticsearch实例在同一专有网络下,因此在绑定专有网络时,选择Elasticsearch实例所在专有网络和交换机即可。
单击已创建的独享资源组右侧的修改归属工作空间,为该独享资源组绑定目标工作空间。
具体操作,请参见新增和使用独享数据集成资源组。
步骤三:配置HBase白名单
无论是公网访问,还是VPC内网访问,均需要先将访问HBase的客户端IP地址加入到白名单中,才能连接到HBase集群。本文需要使用步骤一中创建的独享资源组,通过VPC内网访问HBase集群,因此在添加数据源前,需要将独享资源组绑定的交换机网段添加至HBase的访问白名单中,具体操作请参见设置白名单和安全组。
步骤四:在DataWorks中添加HBase和Elasticsearch数据源
进入DataWorks的数据集成页面。
在DataWorks控制台的左侧导航栏,单击工作空间列表。
找到目标工作空间,单击其右侧操作列下的数据集成。
在左侧导航栏,单击数据源。
在数据源管理页面,单击新增数据源。
在新增数据源对话框的大数据存储区域中,单击HBase。
在新增HBase数据源对话框中,填写数据源名称和配置信息。
使用的HBase版本不同,您需要填写不同的配置信息:
标准版及以下的版本:使用默认的配置信息,即ZK链接地址,同时需要手动增加hbaseVersion属性。
温馨提示:尊敬的[]站点管理员,将本页链接加入您的网站友情链接,下次可以快速来到这里更新您的站点信息哦!每天更新您的[阿里云服务器购买,阿里云国际账号免费注册]站点信息,可以排到首页最前端的位置,让更多人看到您站点的信息哦。
将以下代码插入您网页中,让网友帮您更新网站每日SEO综合情况
-
自由报中文版-土耳其美食|汇率|美女|旅游新闻资讯网 - www.5xnr.com
土耳其首都创刊的自由报是土耳其三大报刊之一,土耳其共和国的总面积为78.36万平方公里,其中97%位于亚洲的小亚细亚半岛,3%位于欧洲的巴尔干半岛。总人口有8300万,土耳其族占80
-
ufo外星人飞碟_ufo外星人飞碟简笔画 -
爱情星座运气测试 什么是UFO? UFO是不明飞行物(Unidentified Flying Object)的缩写,指的是无法被解释的飞行物体。它们通常以异乎寻常的速度和机动性在天空中出现,有时还会发出奇怪的光
-
seo面试技巧跟经验分享(seo实战经验) -
腾讯云国际账号购买 seo面试技巧跟经验分享之于推广,是经验型seo必备技能,常常会听到的是没有多少经验就能被别人通过各种渠道来实现的,那么,我们做 网站优化 工作该怎么做呢? 一、
-
肖瘤医生互联网医院中西医结合肿瘤会诊中心,3月份多学科会诊开始预约啦! -
肖瘤医生互联网医院中西医结合肿瘤会诊中心3 月份 的专家会诊已经开始预约了,患者可以根据自身(术前、术后)不同的病期, 选择最适合的中西医会诊和多学科(包含中医、西医外
-
高级研修班能拿到毕业证吗 -
儿童绘画培训加盟 高级研修班能拿到毕业证吗?关键的是一个关键的问题。 从目前中国高校开设高级研修班专业的情况来看,因为有的高校为了扩大生源而研修班的招生也有一些特点,主
-
学习 · 阿里云国际服务器如何申请退款!!! -
如果您的服务器配置购买错了,可以通过工单方式申请退款 如何发工单? 打开如下链接登录阿里云 https://workorder-intl.console.aliyun.com/#/ticket/createIndex 选择一个类目, 提交工单 ,编辑需