阿里云国际站经销商,主营阿里云,腾讯云,华为云,亚马逊aws,谷歌云gcp,微软云az,免费开户,代充值优惠大,联系客服飞机@jkkddd
通过ES-Hadoop实现Hive读写阿里云Elasticsearch数据
准备工作创建同一专有网络下的阿里云Elasticsearch和E-MapReduce(以下简称EMR)实例、关闭Elasticsearch实例的自动创建索引功能并创建索引和Mapping、下载与Elasticsearch实例版本一致的ES-Hadoop安装包。
步骤一:上传ES-Hadoop JAR包至HDFS
将已下载的ES-Hadoop安装包上传至EMR Master节点的HDFS目录下。
步骤二:创建Hive外表
创建Hive外表,与Elasticsearch索引中的字段进行映射。
步骤三:通过Hive写入索引数据
通过HiveSQL,向Elasticsearch实例的索引中写入数据。
步骤四:通过Hive读取索引数据
通过HiveSQL,读取Elasticsearch实例中的索引数据。
步骤一:上传ES-Hadoop JAR包至HDFS
下载ES-Hadoop安装包,其版本需要与Elasticsearch实例保持一致。
本文使用elasticsearch-hadoop-6.7.0.zip。
登录E-MapReduce控制台,获取Master节点的IP地址,并通过SSH登录对应的ECS机器。
具体操作步骤请参见登录集群。
将已下载的elasticsearch-hadoop-6.7.0.zip上传至Master节点,并解压获得elasticsearch-hadoop-hive-6.7.0.jar。
创建HDFS目录,将elasticsearch-hadoop-hive-6.7.0.jar上传至该目录下。
步骤二:创建Hive外表
在EMR控制台的数据开发模块中,创建HiveSQL类型的作业。
具体操作步骤请参见Hive SQL作业配置。
温馨提示:尊敬的[]站点管理员,将本页链接加入您的网站友情链接,下次可以快速来到这里更新您的站点信息哦!每天更新您的[阿里云24h自助充值,免费开户]站点信息,可以排到首页最前端的位置,让更多人看到您站点的信息哦。
将以下代码插入您网页中,让网友帮您更新网站每日SEO综合情况
-
金华总裁研修班学费 -
304不锈钢板 金华总裁研修班学费:821-25中国医药工业大学-doc波es,322145/张ext,长江流域女-厦门大学精细化工总监王四-建华、吴凯东-建华、蒋明、马明龙、蒋明龙、徐明、陈芳,女,回族;张
-
“风格独特炫出自我风采 索尼真无线蓝牙运动耳机WF” -
索尼真正的无线蓝牙运动耳机wf-xb700的外观设计很简单,一眼就可以看到,最初可以观察到其设计风格。 它不使用普通椭圆形的外观,分为三段式。 耳机可以配合索尼新一代的“三点固
-
semir与senma哪个是真品森马_森马semir和senma是什么区别 -
新闻发稿 semir与senma哪个是真品森马? semir和senma都是森马公司旗下的品牌,它们都属于真品森马。 semir和senma有什么区别? 虽然semir和senma都是真品森马,但它们在产品风格和定位上有
-
二次结构泵-软管泵送1机顶10人 -
二次结构泵是一种 浇构造柱常用的小型 混凝土输送设备,它主要由料斗、泵送系统、液压系统、电气系统和操作系统等几部分组成。 二次结构泵 的主要作用是在建筑工程中,将混凝土
-
阿里云服务器购买,免费开户,24h自助充值 -
阿里云国际站经销商,主营阿里云,腾讯云,华为云,亚马逊aws,谷歌云gcp,微软云az,免费开户,代充值优惠大,联系客服飞机@jkkddd 通过Elasticsearch和rsbeat实时分析Redis slowlog 操作流程
-
“海尔智慧家庭4项场景标准通过立项,为领域快速发展建立规范!” -
高校食堂做黑暗料理西红柿炒月饼 年3月25日,由海尔和中家院(北京)检测认证有限企业共同主导的《基于大数据的智能家居服务平台评估技术规范智能客厅》、《基于大数据的智能家居