«hadoop» 태그된 질문


3
SCP를 통해 파일을 보낼 수 없습니다
로컬 컴퓨터에서 원격 EC2 인스턴스로 파일을 전송하는 옵션 scp과 함께 명령을 사용하려고했습니다 -i. Akhis-Macbook-Pro:~ aswinakhilesh$ sudo scp -i Mykey.pem FileA ec2-user@ec2-23-20-46-45.compute-1.amazonaws.com:/home/FileA 파일을 복사하는 대신 다음 메시지가 나타납니다. Agent pid 2624 Akhis-Macbook-Pro:~ aswinakhilesh$ Identity added: /home/.ssh/id_rsa (/home/id_rsa) .sshEC2 인스턴스의 내 폴더에는 다음 파일이 있습니다. authorized_keys id_rsa [Same as Mykey.pm, which is …
2 ssh  scp  amazon-ec2  hadoop 

0
hadoop 설치에 대한 모든 CURRENT 매개 변수를보십시오.
내가 hadoop 설치를 상속하고 나는 모든 사용 매개 변수 및 구성 옵션을 쿼리하고 싶습니다. 나는 conf 디렉토리에 있지만 도움이 되긴하지만 이는 오래된 설치 (1.1.1)이며 목록에없는 경우에도 특정 매개 변수가 무엇인지 확인하려고합니다. 할까요 나는 이것을 검증하고 싶다). 또한 물건을 변경하면 실제로 바뀌 었는지 확인하고 싶습니다. 나중에 변경 사항을 적용하면 나중에 매개 …
1 linux  hadoop 

0
하둡 클러스터간에 데이터를 전송하기위한 모범 사례
상황 : 기존 Hadoop 클러스터에서 새로운 Hadoop 클러스터로 약 100TB를 전송해야합니다. 두 클러스터는 각 클러스터의 이름 노드에서 직접 1GbE 연결을 갖습니다. 데이터 노드가 연결되어 있지 않습니다. 내가 시도한 것 : Distcp : 이전 데이터 노드와 새 데이터 노드가 연결되어 있지 않아 작동하지 않습니다. 각 mapreduce 작업에서 연결 시간이 초과되었다고보고합니다. hdfs …
1 linux  rsync  hadoop 

1
Windows에서 Hadoop Symlinks 비활성화
Windows 7에서 Hadoop 2.2.0을 실행하고 있습니다. 작업을 실행하려고하면 Hadoop이 로컬 파일 시스템의 temp 폴더에 심볼릭 링크를 만들려고합니다. 필요한 권한이 없기 때문에 작동하지 않습니다. Windows의 이전 버전의 Hadoop은 심볼릭 링크를 전혀 지원하지 않고 파일을 대신 복사하고 있음을 읽었습니다. 그래서 질문은 : 플래그로 심볼릭 링크를 끄고 이전 동작으로 다시 전환 할 수 …

0
NodeManager 및 Resourcemanager가 JPS에 표시되지 않음
hadoop 2.9.2를 설치했으며 start_all.sh명령 을 실행하는 동안 문제가 발생하지 않습니다. 그러나 jps 명령을 실행하면 Resource 및 Node Manager가 표시되지 않는 동안 4 개의 데몬 (Namenode, Datanode, SecondaryNamenode, DataNode) 만 표시됩니다. 누군가 나를 도울 수 있습니까? Logs of execution: hadoop@saran-HP-Notebook:~$ start-all.sh This script is Deprecated. Instead use start-dfs.sh and start-yarn.sh 19/01/02 …
linux  java  hadoop 

당사 사이트를 사용함과 동시에 당사의 쿠키 정책개인정보 보호정책을 읽고 이해하였음을 인정하는 것으로 간주합니다.
Licensed under cc by-sa 3.0 with attribution required.