[Hadoop] Ubuntu에 Hadoop 설치하기(Java/SSH/Hadoop)
·
Dev/Hadoop
Notebook: M1 Macbook ProVM machine: UTMOS: Ubuntu 22.04 (LTS)hadoop: 3.4.0 맥 환경에서는 터미널에서 하둡을 설치가 가능하지만 리눅스 환경에 익숙해지기 위해서 우분투로 진행해보려고 한다. 맥에서 바로 하둡 설치하다가 막힌 건 비밀..진행 순서1. 자바 1.1. 자바 설치 1.2. 자바 환경변수 설정 2. ssh 연결 2.1. openssh-sever & pdsh 설치 2.2. ssh 공개키 & 개인키 생성 2.3. ssh 키 접속 3. 하둡 3.1. 하둡 설치 3.2. 하둡 환경변수 설정 3.3. 하둡 파일 변경 3.4. 하둡 실행 시작 전)sudo dhclientputty 등을 쓰지 않고 가상 머신 위에 우분투 하나로 실행할 때는 인터넷 ip 획..
[Linux/Ubuntu] DHCP Client/sudo dhclient
·
Dev/Hadoop
문제 발생 순서)- ifconfig로 우분투 서버 ip 확인 시도맨 처음 우분투를 설치하고 실행했을 때 ip를 확인해보려고 ifconfig로 보면 ifconfig 명령어가 없다. ifconfig 명령어를 사용하려면 net-tools를 설치해야 한다. $ sudo apt install net-tools- sudo apt install net-tools로 설치 시도 -> 에러 발생. apt를 업데이트 하고 다시 설치 시도하라고 함 $ sudo apt-get update- sudo apt-get update 입력. 업데이트 완료$ sudo apt install net-tools- 다시 net-tools 설치 시도 -> 또 apt 업데이트 하라고 뜸 = apt 업데이트가 제대로 이뤄지지 않음 - net-too..
[Hadoop] rcmd socket permission denied
·
Dev/Hadoop
문제)원인은 pdsh 기본 rcmd가 ssh가 아닌 rsh로 되어 있다. 즉, ssh 원격 로그인 인증이 동일하지 않을 때 발생한다. 해결)~/.bashrc 파일에 아래의 환경변수 내용을 추가한 뒤, 적용해 준다.$ export PDSD_RCMD_TYPE=ssh 저장하고 나와서 source ~/.bashrc로 적용하면해결 완료