BigDATA/Hadoop
하둡명령어로 삭제하기(fs -rm)
태하팍
2016. 12. 6. 17:12
반응형
#!/bin/bash
# 주기적으로 hdfs 데이터를 삭제한다.
# crontab 에 등록하여 실행시킨다.
# 2일 전 데이터 삭제
date=`date -d "2 days ago" "+%Y%m%d"`
/home/acet/program/hadoop/bin/hadoop fs -rm -r -skipTrash "/HADOOP경로/하둡path/*.txt.$date*"
# 하둡 temp 데이터 삭제
find /home/acet/data/ -ctime +2 -type f -exec rm -f {} \;
반응형