
阿里云国际站经销商,主营阿里云,腾讯云,华为云,亚马逊aws,谷歌云gcp,微软云az,免费开户,代充值优惠大,联系客服飞机@jkkddd
通过ES-Hadoop实现Hive读写阿里云Elasticsearch数据
准备工作创建同一专有网络下的阿里云Elasticsearch和E-MapReduce(以下简称EMR)实例、关闭Elasticsearch实例的自动创建索引功能并创建索引和Mapping、下载与Elasticsearch实例版本一致的ES-Hadoop安装包。
步骤一:上传ES-Hadoop JAR包至HDFS
将已下载的ES-Hadoop安装包上传至EMR Master节点的HDFS目录下。
步骤二:创建Hive外表
创建Hive外表,与Elasticsearch索引中的字段进行映射。
步骤三:通过Hive写入索引数据
通过HiveSQL,向Elasticsearch实例的索引中写入数据。
步骤四:通过Hive读取索引数据
通过HiveSQL,读取Elasticsearch实例中的索引数据。
步骤一:上传ES-Hadoop JAR包至HDFS
下载ES-Hadoop安装包,其版本需要与Elasticsearch实例保持一致。
本文使用elasticsearch-hadoop-6.7.0.zip。
登录E-MapReduce控制台,获取Master节点的IP地址,并通过SSH登录对应的ECS机器。
具体操作步骤请参见登录集群。
将已下载的elasticsearch-hadoop-6.7.0.zip上传至Master节点,并解压获得elasticsearch-hadoop-hive-6.7.0.jar。
创建HDFS目录,将elasticsearch-hadoop-hive-6.7.0.jar上传至该目录下。
步骤二:创建Hive外表
在EMR控制台的数据开发模块中,创建HiveSQL类型的作业。
具体操作步骤请参见Hive SQL作业配置。
温馨提示:尊敬的[]站点管理员,将本页链接加入您的网站友情链接,下次可以快速来到这里更新您的站点信息哦!每天更新您的[阿里云24h自助充值,免费开户]站点信息,可以排到首页最前端的位置,让更多人看到您站点的信息哦。
将以下代码插入您网页中,让网友帮您更新网站每日SEO综合情况
-
阿里云国际 账号 代冲 服务 -
通过我们注册国际阿里云账号的优势 1.注册方便快捷,开通账号仅需要一个邮箱,不需要外国手机号信用卡即可急速开通阿里云国际账号、充值、新购、续费阿里云全部产品。 2.国际版
-
韩国留学免联考 -
搬瓦工优惠码 韩国留学免联考等一切形式:一月份的考试和调剂都是相当的不错的,不需要参加全国统一的联考。 那么尤其是对于留学生选择韩国留学分校留学的学生来说,在选择留学国
-
衡阳免联考在职mba -
跨境电商 衡阳免联考在职mba毕业生可以参加国家统一印制的综合联考,边考,边学战线大,边学战线大,中间兴起,每年的7月下旬报名、修学分,毕业后可获得毕业证书和学位证书。 十月在职
-
闵行免联考dba怎么报名 -
实验室设计装修 闵行免联考dba怎么报名?1、一月联考报名时间?每年10月联考报名,10月联考的报名时间是每年的10月10日的10、14:00联考考试科目:数学、逻辑推理、英语。 其中数学、语文与
-
小红书运营--解锁社交电商的新玩法 -
小红书,作为近年来迅速崛起的社交电商平台,其运营策略堪称行业典范。在这个以内容为王的时代, 小红书运营 成功地将社交与电商紧密结合,为用户创造了全新的消费体验。 小红
-
整体维持谨慎观望局面。虽然2205不锈钢管高开运行,但盘中冲高仍显乏力 -
国内钢坯市场稳中个调,成交表现一般偏弱,整体维持谨慎观望局面。虽然 2205不锈钢管 高开运行,但盘中冲高仍显乏力,对市场刺激有限,加之钢坯自身供需关系减弱,整体交投气氛