«avro» 태그된 질문

Apache Parquet의 특성은 다음과 같습니다. 자기 설명 기둥 형식 언어 독립적 Avro, Sequence Files, RC File 등과 비교하여 형식의 개요를 원합니다. 나는 이미 읽었습니다 : Impala가 Hadoop 파일 형식과 어떻게 작동하는지 , 형식 에 대한 통찰력을 제공하지만 데이터에 대한 액세스 및 데이터 저장이 각 형식에서 어떻게 수행되는지 알고 싶습니다. 마루는 …

136 file  hadoop  hdfs  avro  parquet 

이들 모두는 이진 직렬화, RPC 프레임 워크 및 IDL을 제공합니다. 나는 그것들과 특징 (성능, 사용 용이성, 프로그래밍 언어 지원)의 주요 차이점에 관심이 있습니다. 다른 유사한 기술을 알고 있다면 답변에 언급하십시오.

124 protocol-buffers  thrift  asn.1  avro 

내 hadoop 관련 프로젝트에 hadoop 파일 형식 중 하나를 사용할 계획입니다. parquet는 열 기반 쿼리 및 avro 전체 스캔 또는 모든 열 데이터가 필요할 때 효율적이라는 것을 이해 합니다! 계속해서 파일 형식 중 하나를 선택하기 전에 하나의 단점 / 결점이 무엇인지 이해하고 싶습니다. 누구든지 간단한 용어로 설명 할 수 있습니까?

93 hadoop  avro  parquet