阿里云国际站经销商,主营阿里云,腾讯云,华为云,亚马逊aws,谷歌云gcp,微软云az,免费开户,代充值优惠大,联系客服飞机@jkkddd
通过ES-Hadoop实现Hive读写阿里云Elasticsearch数据
准备工作创建同一专有网络下的阿里云Elasticsearch和E-MapReduce(以下简称EMR)实例、关闭Elasticsearch实例的自动创建索引功能并创建索引和Mapping、下载与Elasticsearch实例版本一致的ES-Hadoop安装包。
步骤一:上传ES-Hadoop JAR包至HDFS
将已下载的ES-Hadoop安装包上传至EMR Master节点的HDFS目录下。
步骤二:创建Hive外表
创建Hive外表,与Elasticsearch索引中的字段进行映射。
步骤三:通过Hive写入索引数据
通过HiveSQL,向Elasticsearch实例的索引中写入数据。
步骤四:通过Hive读取索引数据
通过HiveSQL,读取Elasticsearch实例中的索引数据。
步骤一:上传ES-Hadoop JAR包至HDFS
下载ES-Hadoop安装包,其版本需要与Elasticsearch实例保持一致。
本文使用elasticsearch-hadoop-6.7.0.zip。
登录E-MapReduce控制台,获取Master节点的IP地址,并通过SSH登录对应的ECS机器。
具体操作步骤请参见登录集群。
将已下载的elasticsearch-hadoop-6.7.0.zip上传至Master节点,并解压获得elasticsearch-hadoop-hive-6.7.0.jar。
创建HDFS目录,将elasticsearch-hadoop-hive-6.7.0.jar上传至该目录下。
步骤二:创建Hive外表
在EMR控制台的数据开发模块中,创建HiveSQL类型的作业。
具体操作步骤请参见Hive SQL作业配置。
温馨提示:尊敬的[]站点管理员,将本页链接加入您的网站友情链接,下次可以快速来到这里更新您的站点信息哦!每天更新您的[阿里云24h自助充值,免费开户]站点信息,可以排到首页最前端的位置,让更多人看到您的网站信息哦。
将以下代码插入您网页中,让网友帮您更新网站每日SEO综合情况
-
鲨鱼菲特:实现健康减脂还需注意哪些饮食细节? -
鲨鱼菲特:实现健康减脂还需注意哪些饮食细节? 现在越来越多的人都开始重视健康减脂这一问题,而在饮食方面,水果被认为是一种非常健康的食物,因此成为许多人减脂的食谱中不
-
石家庄市青年人才研修班 -
321不锈钢板 石家庄市青年人才研修班(课题)教育阅读公告》获河南省教育厅、北京市教委县校优秀教师科研奖励、佳木斯大学(医院)等多项教学项目研究,近三年来共获省级奖励20余项,在
-
tongweb修改密码_tongweb修改密码命令 -
高光谱相机 什么是tongweb修改密码命令? tongweb修改密码命令是一种用于更改tongweb系统用户密码的命令。tongweb系统是一种常用的网络服务器管理系统,通过修改密码,可以确保用户账户
-
root安卓版_root安卓版下载 -
不锈钢板 什么是root安卓版? Root安卓版是指对安卓系统进行Root(获取超级用户权限)的版本。通过Root安卓版,用户可以获得更高的系统权限,可以修改系统设置、安装定制的ROM、卸载
-
uc浏览网页版进入_uc浏览网页版进入下载 -
seo优化 什么是UC浏览网页版? UC浏览网页版是一款以手机为载体的浏览器,它不仅可以在移动设备上浏览网页,还提供了丰富的功能和便捷的操作,让用户能够更快捷、更高效地浏览网
-
阿里云国际账号 -
阿里云国际站与大陆站有什么区别? 阿里云国际版,收持不限制地区购置阿里云办事器、云数据库、对象存储、cdn.棋牌106通道,群发短信,营销短信,验证码短信。如果您有华为云国