728x90 virtualbox2 [BigData] 완전 분산 하둡 클러스터(hadoop cluster)구축하기(4개 노드) 1. 4개의 가상 노드 띄우기 이번 포스트에는 하둡 fully-distributed mode 구축을 해보도록 하겠습니다. 하둡 구성 스펙 호스트OS - windows10 home 게스트OS들 - centOS7 Hadoop - 3.1.0 Zookeeper - 3.4.10 jdk - 1.8.0_191 호스트OS는 공유기(WI-FI) 연결 환경 서버 4대를 활용한 하둡 HA 구성: namenode1: 액티브 네임노드, 저널노드 역할 rmnode1: 스탠바이 네임노드, 리소스 매니저, 저널노드 역할, 데이터 노드 역할 datanode1: 저널노드 역할, 데이터 노드 역할 datanode2: 데이터 노드 역할 총 4개의 노드를 이용하여 HA(고가용성)구성을 한 하둡 클러스터를 구성 해보겠습니다. 1. VirtualBox Host Only Ne.. 2021. 8. 8. [Hadoop] virtual box linux [ubuntu 18.04]에 하둡 설치,다운로드 2.ubuntu terminal과 SSH 통신 1.ubuntu에 openssh-server 설치 2.ssh 시작하기 3.포트포워딩 설정하기 virtualbox 설정 - 네트워크 - 포트포워딩 + 클릭 - ubuntu를 만들게되면 보통 ip가 10.0.2.15로 할당됩니다. 여기서 중요한건 게스트ip랑 포트번호(ssh 22) 4.windows의 powershell창에서 ubuntu 원격 접속 powershell 창에서 ssh 127.0.0.1 -l 자신의 ubuntu 계정입력 -> 해당 서버가 알려진 ssh 호스트의 로컬시스템 목록에 추가하기위해 yes 입력 -> 비밀번호 설정하기 -> 우분투 ssh접속완료 다음 포스트에는 ubuntu에 하둡을 설치 해보겠습니다. 아직 ubuntu설치하는 법에 대해서 모르시는 분들은 아래의 링크를 참조하여 주세요~ s.. 2021. 4. 26. 이전 1 다음 728x90
