用开源5B模型将27000篇arxiv论文OCR为Markdown

我们刚刚使用一个开源的5B模型、16个在L40S GPU上的并行HF Jobs以及一个挂载的存储桶，将27,000篇arxiv论文OCR为Markdown。总成本：850美元，总时间：约29小时，失败作业数：0。这现在为 http://hf.co/papers 上的“与论文聊天”功能提供支持。