首页 / 浏览问题 / 云GIS / 问题详情
超图大数据环境搭建失败
7EXP 2021年04月06日

使用产品:iserver 9D 912 ,  jdk-8u191-linux-x64,hadoop-2.7.7,zookeeper-3.4.10, hbase-1.3.1-bin,spark-2.1.0-bin-hadoop2.7,geomesa-hbase-distributed-runtime_2.11-2.0.1.jar

操作系统:CentOS 7 x64
数据类型:ChinaWeiboPOI.udb
问题详细描述:

按照大数据相关教程搭建大数据环境, 发布微博点数据失败。

视频教程地址:https://www.bilibili.com/video/BV13i4y1L7WN?from=search&seid=18278846732169637072


问题重现步骤:

1.搭建JDK环境成功, JDK采用 jdk-8u191-linux-x64

2.搭建hadoop环境成功。

3.搭建zookeeper,成功

4.hbase, 成功

5. spark 成功,

6,相关环境配置截图

7,安装iObjects Java for Spark

8,安装iserver ,启动

9,配置集群,配置分布式分析服务

10,上传ChinaWeiboPOI.udb, 失败

任务信息

应用ID:a84f0911_f6cb_442f_b03a_3b76a9eccc9b
源数据类型:UDB 目标数据库类型:HBASE
目标数据库:weibo 数据库连接地址:192.168.52.133:2181
源文件所在路径:/opt/bigdata/ChinaWeiboPOI.udb
是否创建矢量金字塔:false

进度信息

状态: 开始时间 持续时间 结束时间
FAILED 2021-4-6 19:21:5 40秒 2021-4-6 19:21:47

1个回答

你好,这个要看一下spark的日志,做文件拷贝需要每台机器都需要有该源文件。
865EXP 2021年04月07日
日志压缩了一下。 怎么上传压缩包?

你的日志不对,日志时间是早上的,而看你上面的操作是下午。

我再找找看看。
...