paulpierre/markdown-crawler

paulpierre/markdown-crawler — мультипоточный веб‑краулер, который рекурсивно обходит сайт и сохраняет каждую страницу в виде отдельного Markdown‑файла, удобного