Redd-Archiver
lastmod 2026-11-16created 2026-01-162 edits
Redd-Archiver는 Reddit·Voat·Ruqqus 의 압축 데이터 덤프를 PostgreSQL 에 넣고 둘러볼 수 있는 HTML 아카이브로 만드는 도구이다. Reddit 은 Pushshift·Arctic Shift 의 .zst JSON Lines 덤프를 읽으며, 매달 나오는 Arctic Shift 덤프로 기존 아카이브를 이어서 갱신할 수 있다. 결과물은 정적 페이지로 아무 곳에나 올리거나 검색 서버를 붙여 운영한다.
About
- 대상 데이터는 Reddit 게시물 23억 8천만 개 이상(서브레딧 40,029개), Voat 게시물 381만 개, Ruqqus 게시물 50만 개. 덤프 파일 확장자로 플랫폼을 자동 판별함
- 서빙 방식은 셋. 아무 웹 호스트에 올리는 static, nginx·Flask·PostgreSQL 검색 서버를 붙이는 hybrid(기본), PostgreSQL 에서 바로 렌더링하는 dynamic. 같은 DB 로 언제든 바꿀 수 있음
- 페이지는 JavaScript 없이 CSS 만으로 동작하고 gzip 기준 3~32KB. GitHub Pages, USB, 오프라인 열람 가능
- 서버 배포 시 PostgreSQL 전문 검색(서브레딧·작성자·날짜·점수 조건)과 엔드포인트 30개 이상의 REST API 제공
- OpenAPI 에서 생성한 도구 29개짜리 MCP 서버로 Claude Desktop·Claude Code 에서 아카이브를 조회함
- 배포는 localhost/LAN, Let's Encrypt HTTPS, Tor 히든 서비스, 정적 호스팅 가운데 고름. 테마 11종
- Python 3.10 이상과 PostgreSQL 필요. Unlicense(퍼블릭 도메인)