prodution 데이터베이스에서 로컬 테스트 데이터베이스로 tabledata의 서브 세트를 내보내려면 어떻게해야합니까?

우리는 비교적 큰 프로덕션 postgres 기반 db를 가지고 있습니다 : ~ 20GB PostgreSQL 데이터베이스는 heroku에서 호스팅됩니다.

테이블 데이터의 작은 하위 집합을 로컬 데이터베이스에 복사하여 프로덕션 작업을하지 않고도 테스트를 실행할 수 있습니다.

샘플 데이터를 직접 생성하지 않고 프로덕션 환경에 이미 존재하는 데이터를 사용합니다.

데이터베이스의 각 테이블에서 ~ 100 행이면 충분합니다. 이것을 달성하는 쉬운 방법이 있습니까?

이 도구를 사용하지는 않았지만 Jailer는 그 일을 약속합니다.

데이터베이스 서브 셋팅 및 브라우징 툴. 관계형 데이터베이스 (JDBC)에서 일관되고 참조 적으로 온전한 행 세트 내보내기

http://sourceforge.net/projects/jailer/

이 상황에서 교도소가 도움을 줄 수 있습니다. 나는 당신과 같은 일을하고 있는데 (각 테이블의 ~ 100 개의 레코드를 얻으려고 노력 중) 여기에 내가 한 단계가 있습니다 :-루트 엔터티 (거의 테이블과 관련된 것)를 찾아서 루트 행 (예 : 루트는 people이고 people.id = 1 ...에 대한 모든 관련 레코드를 찾습니다.)-1 단계를 마친 후 다른 테이블 (100 개의 레코드를 갖고 싶은 테이블)로 다시 시작하십시오. ) 위의 결과에서 하위 집합을 가져옵니다.

또 다른 옵션은 내가 최근에 만난 것입니다 (허가, 아직 사용하지는 않지만 곧 계획) rdbms-subsetter.

Jailer보다 약간 간단하고 가벼우 며 몇 가지 멋진 기능 / 특권이 있습니다.

• 기존 툴링에 쉽게 연결할 수있는 CLI
• 오픈 소스
• 외래 키를 따라 일관된 데이터 하위 집합 을 가져옵니다.
  • 잘 정의 된 외래 키가없는 경우 JSON 구성 파일을 통해 관계 를 제공 할 수 있습니다. 필자의 경우, 다른 곳에 저장된 스키마 메타 데이터에서이 구성을 생성 할 계획입니다 (감사합니다, Rails : \).
• 특정 행을 타겟팅하고 모든 관련 레코드를 가져올 수 있습니다 (예 : 특정 고객에게 문제가 발생 했으므로 모든 것을 풀다운하여 계정 작업 데이터를 로컬로 액세스 할 수 있도록 할 수 있음)
• 테이블 당 일정한 수의 레코드를 가져 오거나 로그를 사용하여 더 큰 테이블에서 더 많은 데이터를 얻지 않아도됩니다.

특히 Heroku 데이터베이스에 대한 다른 옵션을 언급 할 가치가 있습니다.

Heroku는 실제로 미리 쓰기 로그를 먼저 가져 와서 준비하기 위해 기본 DB에 연결 한 다음 따라가는 것을 멈추기 때문에 새로운 스냅 샷 DB를 가져 오는 데 실제로 빠릅니다. 프로덕션에 너무 많은 영향을 미치지 않도록 앱에서 이러한 "포크"를 만들 수 있습니다.

$ heroku addons:create heroku-postgres[:specific-plan] \
    --fork your-production-app::DATABASE \
    --app some-other-app-to-own-forked-database \
    [--as PRODUCTION_SNAPSHOT]

그런 다음 해당 스냅 샷을 가리키는 로컬로 앱을 부팅 할 수 있습니다. 나는 이것을 자주 사용하여 데이터 또는 스키마 마이그레이션을 건조하거나 고객 문제를 디버그합니다.

위의 명령에서 DATABASE_URLon으로 your-production-app액세스 할 수있는 DB가 PRODUCTION_SNAPSHOT_URL있으면 --as이름이 다른 다른 앱에서 ( 지정한 경우 ) DB에 액세스 할 수있게됩니다 some-other-app-to-own-forked-database.

임의의 행 집합을 얻으려면 다음 과 같이 LIMIT 를 사용할 수 있습니다 .

SELECT * FROM my_table LIMIT 100

이것은 가장 쉬운 방법이며 PostreSQL이 처음 발견 한 100 개의 행을 선택합니다. 마지막으로 삽입 된 100 개이거나 첫 번째 100 개일 수 있습니다. 정말로 무작위가 필요한 경우이 Stackoverflow 답변을보십시오 .