设计动机 人工智能领域的论文进入爆发式增长,数量越来越多,文献检索也面临着很大的挑战。我个人在使用 General/Coding Agent 进行文献检索(寻找相关工作或者领域梳理)的时能体验到的局限性: 通用 agent 通过黑盒 web search api 进行开放网络检索,通常只能拿到 top-k ,难以穷举并且难以回答“这里领域有多少篇论文”的问题; 通用 agent 通过 search api 进行的检索噪音大,返回的内容是整个互联网的相关性条目,需要花费额外的开销进行数据清洗和整理; 上述局限性导致 agent 在查找文献的时候浅尝辄止,或者开销大/速度慢。所以在上半年的时候我给自己 vibe coding 了一套 arXiv 元数据抓取->向量化->关键词或语义召回->LLM 精筛的管线。但成本仍然比较高,并且精筛时候速度很慢,用起来不怎么顺手。 九月中旬的时候 Jev 横空出世,我意识到非常适合用来做召回后的文献精筛和分类,于是就开始重构自己的文献基础设施,把它迁移到 Jev 上来。可以先通过一张 GIF 示意图感受精筛的...