본문 바로가기

전체 글

(52)
Apache Hive 설치 1 ( Postgresql 설치 ) 1. Postgresql 설치 Postgresql 11버전을 설치하기 위해 repository를 먼저 적용합니다. 아래 명령어를 실행하면 repository가 적용됩니다. sudo rpm -Uvh https://download.postgresql.org/pub/repos/yum/reporpms/EL-7-x86_64/pgdg-redhat-repo-latest.noarch.rpm 이후 yum repolist 명령어를 사용하여 확인해보면 위 사진과 같이 적용한 결과가 나옵니다. 9.6 ~ 13 버전까지 repolist가 등록되었습니다. 성공적으로 repolist가 적용되었다면, 이제 postgresql 11버전을 설치하도록 하겠습니다. yum install postgresql11-server postgresq..
Apache Hadoop 설치 5 ( Hadoop 서버 테스트 ) 1. 액티브, 스탠바이 네임노드를 확인 active 네임노드 ./bin/hdfs haadmin -getServiceState hadoop1 active로 출력이 되면 현재 실행중인 상태입니다. 활성화가 되어있기 때문에 hadoop(ip주소):9870으로 접속하여 확인해 봅니다. standby 네임노드 ./bin/hdfs haadmin -getServiceState hadoop2 standby 또한 접속 가능합니다. hadoop2(ip주소):9870으로 접속 2. HDFS 확인 - HDFS가 구축되어있는지 확인합니다. - HDFS는 하둡 환경에서 분산 파일 시스템을 담당하는 하둡의 주요 모듈입니다. - 명령어를 사용하여 하둡이 실행되는 파일을 관리합니다. # hdfs 상의 루트 디렉토리 조회 hdfs df..
Apache Hadoop 설치 3 ( ZOOKEEPER ) zookeeper와 hadoop 계정을 만들고 권한을 부여합니다. 1. zookeeper 계정 생성 3개 서버에 zookeeper 계정을 생성해주세요 ex) 아이디 : zookeeper 비밀번호 : zookeeper이면 adduser zookeeper passwd zookeeper 2. hadoop 계정 생성 3개 서버에 hadoop 계정을 생성해주세요 ex) 아이디 : hadoop 비밀번호 : hadoop adduser hadoop passwd hadoop 3. HDFS의 여러 정보를 저장하기 위한 디렉토리 생성 및 Hadoop 계정 접근 권한 설정 3개 서버 모두 /dfs /yarn /pids 경로에 폴더 생성 및 폴더에 대한 hadoop 권한을 부여하고, 파일에 대한 그룹을 변경합니다. mkdir ..