Reddit · ImBadGuyInEveryStory / reddit ·
有哪些工具能把代码库转成微调数据集?
为什么值得读: 与模型微调和工程落地相关,具备一定实用性,但属于工具征集类讨论,深度有限。
AI 摘要
讨论帖征集将现有代码库切分、清洗、构造成指令/补全格式微调数据集的工具链与脚本,回帖涉及 AST 切分、去重与质量过滤。
相关事件与更多上下文见编辑部与归档页。
讨论帖征集将现有代码库切分、清洗、构造成指令/补全格式微调数据集的工具链与脚本,回帖涉及 AST 切分、去重与质量过滤。