阿里云国际站经销商,主营阿里云,腾讯云,华为云,亚马逊aws,谷歌云gcp,微软云az,免费开户,代充值优惠大,联系客服飞机@jkkddd
通过ES-Hadoop实现Hive读写阿里云Elasticsearch数据
准备工作创建同一专有网络下的阿里云Elasticsearch和E-MapReduce(以下简称EMR)实例、关闭Elasticsearch实例的自动创建索引功能并创建索引和Mapping、下载与Elasticsearch实例版本一致的ES-Hadoop安装包。
步骤一:上传ES-Hadoop JAR包至HDFS
将已下载的ES-Hadoop安装包上传至EMR Master节点的HDFS目录下。
步骤二:创建Hive外表
创建Hive外表,与Elasticsearch索引中的字段进行映射。
步骤三:通过Hive写入索引数据
通过HiveSQL,向Elasticsearch实例的索引中写入数据。
步骤四:通过Hive读取索引数据
通过HiveSQL,读取Elasticsearch实例中的索引数据。
步骤一:上传ES-Hadoop JAR包至HDFS
下载ES-Hadoop安装包,其版本需要与Elasticsearch实例保持一致。
本文使用elasticsearch-hadoop-6.7.0.zip。
登录E-MapReduce控制台,获取Master节点的IP地址,并通过SSH登录对应的ECS机器。
具体操作步骤请参见登录集群。
将已下载的elasticsearch-hadoop-6.7.0.zip上传至Master节点,并解压获得elasticsearch-hadoop-hive-6.7.0.jar。
创建HDFS目录,将elasticsearch-hadoop-hive-6.7.0.jar上传至该目录下。
步骤二:创建Hive外表
在EMR控制台的数据开发模块中,创建HiveSQL类型的作业。
具体操作步骤请参见Hive SQL作业配置。
温馨提示:尊敬的[]站点管理员,将本页链接加入您的网站友情链接,下次可以快速来到这里更新您的站点信息哦!每天更新您的[阿里云24h自助充值,免费开户]站点信息,可以排到首页最前端的位置,让更多人看到您的网站信息哦。
将以下代码插入您网页中,让网友帮您更新网站每日SEO综合情况
-
辽宁免联考mba -
GH5188不锈钢棒 辽宁免联考mba是一个不错的选择,那么辽宁大学是一个比较不错的学校了,辽宁大学经济管理学院在职研究生有着招生的位置。 辽宁大学经济管理学院有三个研究方向,分别
-
肇庆高新技术企业研修班 -
310S不锈钢管 肇庆高新技术企业研修班在2013年6月20日即5月20日在中国社顺利召开。 研修班上,中国社科院院士、中国社科院院士、西北大学家、所教务处、图书馆馆长、行政人员、图书
-
走完十字路口的爱情 -
在那儿那边灯光阴暗的路口,他们结尾一次同走,没有牵手,也没有挽留。 俊懿缄默着,他双手插袋,眼神暗淡的垂下头,看似宁静的脸庞跟在女孩死后走。 露灵走在前头,她紧握着
-
阿里云世界版注册账号教程免存案,支撑USDT等多外币 -
阿里云世界版注册账号教程免存案,支撑USDT等多外币 国际阿里云代理 实名账号出售/代充 业务办理: 国际阿里云、华为云、腾讯云、谷歌云、亚马逊云、微软云、短信签名验证码、棋
-
sottovoce音乐术语_音乐术语sotto voce -
不锈钢管 什么是sotto voce音乐术语? sotto voce是一个意大利术语,意为“低声地”。在音乐术语中,sotto voce指的是以柔和、低音量的声音演奏或歌唱。这种演奏方式往往具有一种神秘、
-
“因云而生,乘云而上中国电信发布天翼云VR能力开放平台白皮书” -
微信刷票 . 11.8日,在天翼智能生态博览会5g应用新生态论坛上,中国电信与华为合作发布了《天翼云vr能力开放平台白皮书》。 本白皮书在行业首创的系统上对云vr能力开放平台进行了