Hadoop distcp

Hadoop distcp

• 하둡에서 여러 파일을 병렬으로 복사하는 명령어
• MapReduce를 이용
• 너무 많은 mapper를 이용하는 경우, 네트워크 자원을 많이 사용할 수 있으므로 주의할 것
• 사용법
  • distcp hdfs://path/src hdfs://path/dst

References

1. https://wikidocs.net/25261