阿里云国际站经销商,主营阿里云,腾讯云,华为云,亚马逊aws,谷歌云gcp,微软云az,免费开户,代充值优惠大,联系客服飞机@jkkddd
通过ES-Hadoop实现Hive读写阿里云Elasticsearch数据
准备工作创建同一专有网络下的阿里云Elasticsearch和E-MapReduce(以下简称EMR)实例、关闭Elasticsearch实例的自动创建索引功能并创建索引和Mapping、下载与Elasticsearch实例版本一致的ES-Hadoop安装包。
步骤一:上传ES-Hadoop JAR包至HDFS
将已下载的ES-Hadoop安装包上传至EMR Master节点的HDFS目录下。
步骤二:创建Hive外表
创建Hive外表,与Elasticsearch索引中的字段进行映射。
步骤三:通过Hive写入索引数据
通过HiveSQL,向Elasticsearch实例的索引中写入数据。
步骤四:通过Hive读取索引数据
通过HiveSQL,读取Elasticsearch实例中的索引数据。
步骤一:上传ES-Hadoop JAR包至HDFS
下载ES-Hadoop安装包,其版本需要与Elasticsearch实例保持一致。
本文使用elasticsearch-hadoop-6.7.0.zip。
登录E-MapReduce控制台,获取Master节点的IP地址,并通过SSH登录对应的ECS机器。
具体操作步骤请参见登录集群。
将已下载的elasticsearch-hadoop-6.7.0.zip上传至Master节点,并解压获得elasticsearch-hadoop-hive-6.7.0.jar。
创建HDFS目录,将elasticsearch-hadoop-hive-6.7.0.jar上传至该目录下。
步骤二:创建Hive外表
在EMR控制台的数据开发模块中,创建HiveSQL类型的作业。
具体操作步骤请参见Hive SQL作业配置。
温馨提示:尊敬的[]站点管理员,将本页链接加入您的网站友情链接,下次可以快速来到这里更新您的站点信息哦!每天更新您的[阿里云24h自助充值,免费开户]站点信息,可以排到首页最前端的位置,让更多人看到您站点的信息哦。
将以下代码插入您网页中,让网友帮您更新网站每日SEO综合情况
-
静安免联考mba报名 -
2205不锈钢槽钢 静安免联考mba报名条件:大学本科毕业后有3年或3年以上工作经验,本科毕业后有5年或5年以上工作经验,研究生毕业后有5年或5年以上工作经验,研究生毕业后有5年或5年以上
-
研修班3月招生数学 -
2507不锈钢板 研修班3月招生数学复习联系人群,吃透客观事物,切题题则清楚,内容清楚,否则者将接受答案。 2、卷面联系课题主要是针对某一概念、某一现象或某个理论研究领域的学术论
-
yoy是什么意思_yoy是什么意思的缩写 -
什么是yoy? yoy是一个常见的互联网缩写词,它代表了“Year Over Year”的意思,中文翻译为“同比”。yoy通常用于描述两个年份之间的比较,并衡量在这一年期间的增长或下降。 yoy的使用
-
“KLEVV科赋发布CRAS XR RGB/BOLT XR DDR4超频/电竞内存,探索疾速新纪元” -
飞灰过滤 全球内存和存储领先于企业品牌ESS核心( ESS Encore ),投资于企业品牌klevv科,近期推出了新的cras xr rgb ddr4超频/电竞内存和bolt xr ddr4超频DR 4, 这是klevv经典cras和bolt内存系列的新
-
vi包含了哪些内容_vi包括哪些内容 -
代做维基百科 什么是vi? vi是一种文本编辑器,它是Unix系统中最著名和最强大的编辑器之一。它具有强大的功能和灵活性,可以用于编辑各种文本文件,包括程序代码、配置文件和文档
-
“打造数据存储的千里长堤,西部数据力推革新存储架构” -
刻章、刻印、附近刻章、快速刻章、本地刻章 一个厨师不研究食谱而研究兵法,是因为被骗了,没有普遍意义。 但是,一个存储企业品牌的专家开始研究存储体系结构意味着什么呢?