하둡명령어로 삭제하기(fs -rm)
2016. 12. 6. 17:12ㆍBigDATA/Hadoop
반응형
#!/bin/bash
# 주기적으로 hdfs 데이터를 삭제한다.
# crontab 에 등록하여 실행시킨다.
# 2일 전 데이터 삭제
date=`date -d "2 days ago" "+%Y%m%d"`
/home/acet/program/hadoop/bin/hadoop fs -rm -r -skipTrash "/HADOOP경로/하둡path/*.txt.$date*"
# 하둡 temp 데이터 삭제
find /home/acet/data/ -ctime +2 -type f -exec rm -f {} \;
반응형
'BigDATA > Hadoop' 카테고리의 다른 글
hadoop distcp (0) | 2016.10.28 |
---|---|
(info) vagrant commands (0) | 2015.02.04 |
[꿀팁] 하둡 inputPath로 다중 File 작업하기 (0) | 2015.02.04 |
[Hadoop] 하둡 맵-리듀스 따라잡기 (0) | 2015.02.02 |
하둡 configuration으로 객체 넘기기! (0) | 2015.01.12 |