暂无图片
暂无图片
暂无图片
暂无图片
暂无图片

0051.C Cloudera QuickStart安装配置

rundba 2021-06-08
2222

Cloudera QuickStart用于演示和POC应用程序,不建议用于生产用途。包含了HBase、HDFS、Hive、Hue、Impala、Key-Value Store Indexer、Oozie、Solr、Spark、Sqoop 1 client、Sqoop 2、YARN、Zookeeper组件,还可以进行安装其它自带组件、进行Kerberos加密等操作。

1.现状

官方目前不提供下载,自动5.14.X已经停止提供。

打开提示连接跳转到:

https://www.cloudera.com/downloads/cdp-private-cloud-trial.html,需要进行CDP试用安装。

2. 来自远古的召唤-官方下载

通过官方遗迹直接下载,下面释放2个链接。[2021-06-08]有效。

CDH5.5.0(4.58G)

    wget https://downloads.cloudera.com/demo_vm/vmware/cloudera-quickstart-vm-5.5.0-0-vmware.zip

    CDH5.13.0(5.36G)-最后的Cloudera QuickStart版本

      wget https://downloads.cloudera.com/demo_vm/vmware/cloudera-quickstart-vm-5.13.0-0-vmware.zip

      低版本官方文档还存在:

        https://docs.cloudera.com/documentation/enterprise/5-12-x/topics/cloudera_quickstart_vm.html

        3. 环境说明

        官方资源需求摘录:

        建议至少8G内存/2个虚拟CPU;

        使用VM Workstation 8以上;

        OS登录用户:clodera/cloudera(default)、root/cloudera

        CM登录用户: cloudera/cloudera(default)、admin/admin

        MySQL登录用户:root/cloudera

        此环境默认已经安装相应Hadoop组件

        安装了Cloudera Manager

        默认已经关闭防火墙和selinux

        建议虚拟机选用仅主机/NAT网络模式

        4. 如何使用

        解压缩,使用vmware-workstation打开;

        开机默认dhcp,网卡可能会由eth0变为eth1,需要更改70-net*,删除eth0配置项,将eth1更改为eth0,然后重启主机;

        开机默认启动服务,进入cm界面,需手动启动cm和组件;

        组件启动不成功,查看主机状态,ntp存在时钟偏差,需停止组件和cm,停止服务,更改时区,然后重启服务。

        1)停止服务

          [cloudera@quickstart ~]$ chkconfig --list | grep cloudera
          cloudera-quickstart-init 0:off 1:off 2:on 3:on 4:on 5:on 6:off
          cloudera-scm-agent 0:off 1:off 2:on 3:on 4:on 5:on 6:off
          cloudera-scm-server 0:off 1:off 2:on 3:on 4:on 5:on 6:off
          [cloudera@quickstart ~]$ sudo service cloudera-scm-agent stop
          Stopping cloudera-scm-agent: [ OK ]
          [cloudera@quickstart ~]$ sudo service cloudera-scm-server stop
          Stopping cloudera-scm-server: [ OK ]
          [cloudera@quickstart ~]$ sudo service mysqld stop
          Stopping mysqld: [ OK ]

          2)更改时区

            alias cp='cp'
            echo 'ZONE="Asia/Shanghai"' > etc/sysconfig/clock
            cp usr/share/zoneinfo/Asia/Shanghai etc/localtime
            ntpdate ntp7.aliyun.com

            3)时间同步配置-使用本地同步

              vi etc/ntp.conf
              #server 0.centos.pool.ntp.org iburst
              #server 1.centos.pool.ntp.org iburst
              #server 2.centos.pool.ntp.org iburst
              #server 3.centos.pool.ntp.org iburst
              server 127.127.1.0
              fudge 127.127.1.0 stratum 10

              重启服务

                service ntpd restart

                同步时间

                  ntpdate ntp.aliyun.com

                  检查同步

                    ntpdc -np

                    4)启动服务

                      [root@quickstart ~]# service mysqld start
                      Starting mysqld: [ OK ]
                      [root@quickstart ~]# service cloudera-scm-server start
                      Starting cloudera-scm-server: [ OK ]
                      [root@quickstart ~]# service cloudera-scm-agent start
                      Starting cloudera-scm-agent: [ OK ]
                      [root@quickstart ~]#

                        [cloudera@quickstart ~]$ sudo /home/cloudera/cloudera-manager --force --enterprise  #重启为企业版,桌面也有快捷方式
                        OR
                        [cloudera@quickstart ~]$ sudo /home/cloudera/cloudera-manager --force --express    #重启为express版,桌面也有快捷方式


                        5) 登录

                              http://quickstart.cloudera:7180
                          Username: cloudera
                          Password: cloudera


                          6) 手动启动CM和各组件

                          注:windows机器登录,CM界面可显示中文。

                          --  完  --

                          作者:王坤,微信公众号:rundba,欢迎转载,转载请注明出处。

                          如需公众号转发,请联系wx:landnow。


                          文章转载自rundba,如果涉嫌侵权,请发送邮件至:contact@modb.pro进行举报,并提供相关证据,一经查实,墨天轮将立刻删除相关内容。

                          评论