«hadoop» 태그된 질문

나는 한동안 ServerFault를 읽는 것을 즐기고 있었고 Hadoop에 대해 꽤 많은 주제를 보았습니다. 나는 세계적인 관점에서 그것이 무엇을하는지 알아내는 데 약간의 어려움을 겪었습니다. 그래서 내 질문은 매우 간단합니다. 하둡이란 무엇입니까? 무엇을합니까? 무엇을 위해 사용됩니까? 왜 엉덩이를 차는거야? 편집 : 하둡이 사용 된 유스 케이스에 대한 데모 / 설명을 가진 사람이 …

28 hadoop 

동일한 이름의 머신에 보조 네임 노드를 배포했습니다. 이는 성능 및 내구성상의 이유로 잘못 되었습니다 (보조 이름 노드는 핫 스페어가 아니지만 필요한 메타 데이터 사본이 있음). namenode 이동 방법에 대한 문서를 찾았 지만 보조 namenode 이동에 대해서는 아무것도 없습니다. 경험이있는 사람이 안전하게하는 방법을 알고 있습니까?

11 hadoop  hbase  cloudera 

나는 여전히 하둡의 초보자 학습자이며 이번에는 106GB 파일을 처리하려고했습니다. 내가 사용하는 -copyFromLocal내 하둡 DFS에 그렇게 큰 파일을 복사하는 것이 아니라 파일이 큰이기 때문에 나는 현재의 복사 상태에 대한 단서없이 긴 시간을 기다려야한다. 이 명령으로 현재 파일 복사 상태를 표시하는 방법이 있습니까? 도움을 주셔서 감사합니다.

10 hadoop  hdfs 

누군가이 주제에 대해 약간의 빛을 던질 수 있는지 알아 봅니다. 다음 날에 서버를 설치하고 있습니다. 클라이언트가 2 대의 서버를 마스터 서버로, 5 대의 작업자 서버로 Hortonworks HDP를 배포하려고합니다. 모든 요구 사항 중 하나는 NTP를 사용하는 것입니다. 그러나 그것은 내가 가진 모든 정보입니다. 그는 NTP 서버 역할을하는 로컬 서버를 원하거나 7 …

9 centos  ntp  hadoop 

다음은 i3 머신을 사용하는 DIY 6 노드 하둡 클러스터의 링크입니다. 내 디자인을 먼지로부터 보호하고 더 나은 열 전달을 제공하는 가장 좋은 방법은 무엇입니까? 먼지로부터 랙을 보호하기 위해 랙의 4면을 덮는 데 사용해야하는 것은 무엇입니까?

9 hardware  cluster  hadoop  physical-environment 

문제 첫 번째 목표는 HBase 독립형을 실행하는 것이 었습니다. HBase가 시작되면 ip : 60010 / master-status로 이동하면 성공적으로 완료됩니다. 두 번째 목표는 별개의 ZooKeeper 쿼럼을 실행하는 것입니다. ZooKeeper가 다운로드되어 시작되었습니다 : netstat -nato | grep 2181 tcp 0 0 :::2181 :::* LISTEN off (0.00/0/0) 는 conf/hbase-env.sh다음과 같이 변경되었습니다 : # …

8 linux  hadoop  hbase  zookeeper  cloudera 

나는 hadoop 클러스터를 설정하는 데 사용할 수있는 hw의 평가 단계에 있습니다. 이 hw는 리퍼브되어 있으며 (Smart Array 410 / i 컨트롤러가 장착 된 HP G6 서버) 아마도 사용해야합니다. 아직 사용하지 않은 것 같습니다. 410 / i 컨트롤러가 hadoop에 필요한 JBOD 구성을 허용하지 않는다는 것을 읽었습니다.이 진술을 확인할 수있는 사람이 있습니까? …

8 hp  hp-proliant  hadoop  hp-smart-array  storage 

최근에 Linux 메모리 관리에 대한 많은 게시물과 질문을 검색하고 읽었지만 내 사례를 찾을 수 없습니다. 예를 들어, Unix StackExchange 에는 높은 메모리 사용량 에 대한 질문이 있지만 사용중인 프로세스는 없습니다 . 이 게시물에서 허용되는 답변은 가상 메모리 풍선 도움말을 설명합니다. 필자의 경우 풍선이 없습니다. vmware-toolbox-cmd stat balloon모든 노드에서 출력 은0 …

linux  virtual-machines  memory  linux-kernel  hadoop