本文共 1536 字,大约阅读时间需要 5 分钟。
本文介绍如何将ODI以及Hadoop结合在一起。在此之前,确保已安装了ODI软件以及搭建好Hadoop环境,也可以参考我的其他博文进行环境搭建。
[root@hdp06 ~]# hdfs dfs -mkdir -p /user/oracle/odi_home[root@hdp06 ~]# su - hdfs[hdfs@hdp06 ~]$ hdfs dfs -chown oracle:oracle /user/oracle[hdfs@hdp06 ~]$ hdfs dfs -chown oracle:supergroup /user/oracle/odi_home[hdfs@hdp06 ~]$ hdfs dfs -ls /user/oracle/drwxr-xr-x - oracle supergroup 0 2018-03-06 13:59 /user/oracle/odi_home
此目录为ODI HDFS的根目录,如果不创建此目录,则在后续的步骤中会遇到 ODI-26039错误。
将Oracle用户添加到hadoop以及hdfs组:[root@hdp06 ~]# usermod -G dba,oper,asmdba,hadoop,hdfs oracle
File->New…,选择Big Data Configurations
Prefix:前缀,默认即可。Distribution:根据CDH版本进行选择。Distribution Type:使用默认Normal即可。Base Directory:/opt/cloudera/parcels/CDHTechnologies:根据实际环境选择相关组件
结果如下图所示:
HADOOP_CLASSPATH=${HADOOP_CLASSPATH:+$HADOOP_CLASSPATH':'}.:/opt/cloudera/parcels/CDH/lib/hive/lib/*:/u01/app/oracle/oraloader/jlib/*:/u01/app/oracle/orahdfs/jlib/*HADOOP_CLIENT_OPTS=-Dlog4j.debug -Dhadoop.root.logger=INFO,console -Dlog4j.configuration=file:/etc/hadoop/conf.cloudera.yarn/log4j.properties
OLH/OSCH的设置内容如下:
ODCH_HOME=/u01/app/oracle/orahdfsOLH_FILES=/opt/cloudera/parcels/CDH/lib/hive/lib/hive-contrib.jarOLH_HOME=/u01/app/oracle/oraloaderOLH_JARS=/opt/cloudera/parcels/CDH/lib/hive/lib/hive-common.jar,/opt/cloudera/parcels/CDH/lib/hive/lib/hive-exec.jar,/opt/cloudera/parcels/CDH/lib/hive/lib/hive-metastore.jar
转载地址:http://yeoml.baihongyu.com/