Jam's story

achieve 하둡 아카이브는 파일 시스템 디렉토리를 위해 로드맵을 그릴 수 있습니다. 하둡 아카이브는 *.har 확장명으로 압축되며 메타데이터와 데이터 파일들을 가지고 있습니다. ​ /user/hadoop 디렉토리 중 logs 디렉토리를 아카이브하려고 합니다. 압축하려는 명령어 hadoop archive로 /user/neuavenue_arch라는 하둡 파일 시스템 디렉토리 내에 neuavenue.har 파일로 압축은 실행되어질 겁니다. 실행은 MapReduce 잡으로 아카이브 압축을 묶어 파일들을 압축 정리할 수 있습니다. ​ Hadoop archive -(하이픈) archiveName name -p :$ cd /home/neuavenue/hadoop :~/hadoop$ hadoop archive -a..

ls -A | wc -l 파일전체 갯수와 히든 파일을 포함하지 않는 출력물을 보기 파일의 타입들을 나열 ​ the blowser file system 디렉토리에 내용을 입력. 디렉토리에 파일들이 로딩되었는지 확인할수있다.

하둡을 실행시키기 시작시키고, 얀 스크립트 시작시키기 하둡 버전확ㅇ;ㄴ ​ ​ bin/hdfs dfs 해당명령어에 대한 자세한 것들을 출력하게 된다. ​ ​ hdfs의 파일을 조작하는 명령어 - fs 하둡에 대한 정보를 볼 수있다 ~$ bin/hdfs dfs hdfs / dfs 이 명령은 사용자가 hdfs 특히 dfs(Distributed File System) 명령의 실행 파일로 실행하려는 것을 의미합니다. ​ 셸 명령인 'hadoop'은 하둡 에코시스템 또는 하둡 모듈을 실행하기 위한 기본 셸 명령이고, 클라이언트 명령인 fs는 일반 파일 시스템 사용자 클라이언트를 실행하는 것입니다. 하둡 fs [generic option] [command options] ls 하둡 파일 디렉토리 내의 파일들을 화면..

하둡을 설치하다가 이 부분떄문에 막혀서 엄청 고생했다 ㅠ ㅠ 이부분은 자바쪽이 문제라고 하여서 자바 환경변수부터 다시 검토하였지만 설치 가이드랑 똑같이 되어있었고 구글링을 해도 마땅한 답변이 없었다 그래서 밑에 나와있는 명령어대로 openjdk-11-jdk -headless를 설치하였다 ​ ​ 이렇게 설치를 하고 나니 ​ ​ ​ 성공!!!!!!!