파일중복 제거 프로그램 만드는 중입니다..

Pirate1218

07/24/2026, 11:41:58

일반

31148 views · 73 likes

안녕하세요.

공유받은 파일들을 신났다고 복사했더니 10테라가 거의 다 찼네요.. ㅡ0ㅡ

그래서 중복파일 찾아주는 프로그램을 만들기 시작했습니다.. 허허

현재까지 만들어진 기능은 pikpak에 원격으로 접속해서 리스트 추출 후

같은 동영상(해쉬값 비교)을 추출(유사도는 아직 미적용) 후 바로 삭제 또는

휴지통으로 이동하는 것까지 AI 도움을 받아서 어케어케 만들었네요.

물론 테스트는 더 필요하겠지만요..

만들고자 하는 최종버전은 내 pc로 동영상 다운로드 없이 원격으로 pikpak에

접근해서 완전동일하거나 유사도가 높은 파일리스트를 보여주고, 사용자가

선택하면 pikpak에서 바로 삭제 또는 휴지통으로 이동하는 것으로 생각하고

있습니다.

→

최종버전 변경 안

동일한 파일이라고 판단되는 경우에는 바로 휴지통으로 이동시키고 유사하다고

판단되는 파일들끼리 묶어서 별도 폴더를 생성하여 이동시키는 방법을 고려하고

있는 중입니다.

아무래도 최종 삭제는 사용자 확인이 필요하지 않을까 생각합니다..

어떻게 모은 자료인데.. 쩝..

=============== 07.25 내용추가

많은 분들이 응원해주셔서 감사하고 더불어 은근 부담이.. ^^;;;

저의 무지와 짧은 생각으로 처음 시작할 때는 다운로드 없이라고 했지만 해본 결과

100% 다운로드없이 검사는 아쉽지만 불가능할거 같습니다. 죄송합니다.. (_._)

이유는

프로그램을 만들기 전에 생각한 1순위 기능이 파일 다운로드 없이 처리하는 것이

목표였기에 원격으로 pikpak에 존재하는 모든 파일의 메타정보를 긁어와서

처리하도록 구현했는데 동일파일도 아닌 그렇다고 완전히 다른파일이라고 판단이

불가능한 파일(사이즈는 같고 해쉬값만 다른)인 경우에는 메타정보만으로는

검사가 안되고 오로지 검사할 방법은 파일데이터 자체를 비교해야해서 다운로드가

불가피하네요..

현재 상태는

동일파일 판단기준으로 처리하는 것은 어느정도(?) 된거 같아 테스트 중이고 판단이

불가한 파일의 비교를 위해 대상 전체를 풀로 다운로드할 것인지 아니면 사용자가

선택한 파일의 일부만 다운로드해서 할 것인지 등등을 고려해서 방향을 잡아야할 것

같습니다..

몇일만에 뚝딱 만들어지지는 않겠지만 만들어지면 최종 프로그램 공유하겠습니다.

16 comments

monica

07/24

오.. 내가 전에 만들어논거 가져다가 수정해서 써도 돼요 근데 pikpak에 있는거 rclone 안되면 파일 정보 접근 안되서 어렵지 않나요?

Pirate1218

07/24 Edited 07/24

소스 다 만들어지면(언제가될지는... 쩝) github에 업로드할 예정입니다.. ㅎㅎㅎ

Pirate1218

07/24 Edited 07/24

rclone으로 리스트 추출 후 그 자료를 기반으로 처리하는 구조로 만들고 있습니다. 현재 mac에서 만드는 중인데 rclone window 버전이 동일하게 동작할지 확신할 수 없는게 좀 걱정스럽긴합니다..

s/pornvideo