InfraSep 20, 2026 · 12:366 sources

User Releases First Complete 16 TB arXiv Corpus of 3.1 Million Papers on Hugging Face

From marketbrief.now

Image: marketbrief.now
AI;DR

User @secemp9 released a 16 TB archive of 3,148,796 papers from the arXiv repository on the Hugging Face platform, including every version of the documents in LaTeX, PDF, PostScript, and HTML formats. The collection provides access to the full history of papers hosted on the original repository as a single downloadable resource for scientific workflows.

Read the sourceSign in to suggest

Sources

+ 2 more
  1. SUPPORT@eliebakouch“very nice open dataset 🫡”x.com
  2. SUPPORT@thezachmueller“3,148,796 papers, every version, in…”x.com
#arxiv#huggingface#dataset#open-source#academic#corpus#latex#pdfMarkdown
Content history (2)
  • 2026-10-04 · Summary · vi · Replaced stored text
    Một kho lưu trữ rộng lớn về tài liệu học thuật hiện đã có sẵn dưới dạng bộ dữ liệu mở trê…
    Một kho lưu trữ tài liệu học thuật quy mô lớn hiện đã có sẵn dưới dạng tập dữ liệu mở trê…
  • 2026-10-04 · Title · vi · Replaced stored text
    Người dùng phát hành bộ sưu tập arXiv hoàn chỉnh đầu tiên với 16 TB và 3,1 triệu bài báo …
    Người dùng phát hành bộ dữ liệu arXiv 16 TB hoàn chỉnh đầu tiên với 3,1 triệu bài báo trê…

One ranked edition, every morning

The stories that matter today. Free, cancel anytime.

Telegram @aidr_today