Cloudera és una empresa que proporciona plataformes de dades basades en Apache Hadoop. Són experts en dades massives que també ofereixen als seus clients suport i serveis, així com formació. Es va fundar el 2008 per ajudar les empreses que feien servir Hadoop a obtenir més valor de les seves pròpies dades.
Apache Hadoop és un entorn de treball de programari que admet aplicacions distribuïdes sota una llicència lliure. Permet a les aplicacions treballar amb milers de nodes i petabytes de dades.
T'interessa fer servir Cloudera si ets un usuari de negoci, per fer servir la seva plataforma de gestió i anàlisi de dades, o si ets un desenvolupador, ja que podràs crear aplicacions de dades massives a Apache Hadoop amb eines de codi obert.
Doncs bé, en aquest article t'explicarem en uns quants passos senzills què has de fer per instal·lar el Manager Server Express de Cloudera al teu Servidor al Núvol.
Passos que cal seguir per a la instal·lació
- Desplega un servidor amb CentOS 7.
- Modifica /etc/hosts posant al fitxer el següent: IP.PRIVADA.DE.LA.MAQUINA i nombre.dns.de.la.maquina perquè la IP privada de la màquina es resolgui al nom d'amfitrió
-
A /etc/cloud/cloud.cfg cal comentar la línia manage_etc_hosts perquè quedi comentada de la manera següent (en cas que no estigui ja comentada):
#manage_etc_hosts: template -
És millor que donis permisos complets a /var/log amb l'ordre següent per evitar errors:
# chmod a+wrx /var/log/ -
Configura el repositori de la manera següent:
# wget https://archive.cloudera.com/cm5/redhat/7/x86_64/cm/cloudera-manager.repo # mv cloudera-manager.repo /etc/yum.repos.d/ -
Instal·la embedded DB:
# yum install cloudera-manager-server-db-2 -
Inicia la DB:
# service cloudera-scm-server-db start -
Instal·la JDK:
# yum install oracle-j2sdk1.7 -
Instal·la Cloudera Server Manager:
# yum install cloudera-manager-daemons cloudera-manager-server -
Instal·la i inicia l'Agent:
# yum install cloudera-manager-agent cloudera-manager-daemons # service cloudera-scm-agent start -
Inicia Manager Server:
# service cloudera-scm-server start - Finalment, accedeix a la interfície web i selecciona la versió express, que és gratuïta, i procedeix a instal·lar els paquets d'HDFS (I hive, mapreduce i tot el que necessitis):http://ip.de.la.maquina:7180
Ja tens el teu Manager Server Express de Cloudera instal·lat.