반응형
#!/bin/bash
# 주기적으로 hdfs 데이터를 삭제한다.
# crontab 에 등록하여 실행시킨다.
# 2일 전 데이터 삭제
date=`date -d "2 days ago" "+%Y%m%d"`
/home/acet/program/hadoop/bin/hadoop fs -rm -r -skipTrash "/HADOOP경로/하둡path/*.txt.$date*"
# 하둡 temp 데이터 삭제
find /home/acet/data/ -ctime +2 -type f -exec rm -f {} \;
반응형
'BigDATA > Hadoop' 카테고리의 다른 글
Hadoop을 학습해보자 ㅋㅋ (0) | 2024.07.09 |
---|---|
Hadoop이란? 구성요소? 용어? (0) | 2024.07.02 |
hadoop distcp (0) | 2016.10.28 |
(info) vagrant commands (0) | 2015.02.04 |
[꿀팁] 하둡 inputPath로 다중 File 작업하기 (0) | 2015.02.04 |