V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
NakanoAzure
V2EX  ›  前端开发

请教一个大模型生成错误 markdown 内容前端检测的问题

  •  
  •   NakanoAzure · 13 天前 · 499 次点击
    1. 接手的第一个需求,大模型会生成错误的 markdown 内容,然后经过组内的 markdownSDK 解析之后,现有的处理逻辑是在用户侧提取渲染的 innerHTML ,然后策略给了几种错误匹配的样例,然后前端用正则去做粗粒度的匹配;
    2. 但是现在这样做有一个问题,就是数量级比较大,用户侧会收集大量的错误例子,然后让策略不好去一个一个找问题,因为有很大部分就是会有误报的内容(就是你没法定义大模型生成的 markdown 语法什么叫对什么叫不对)
    3. 策略现在想提出来大模型生成内容的时候就直接做检测,相当于把检测的这个环节前置,然后 mt 问我有什么好的思路去解决这个问题,原话是“怎么把策略数据通过前端现有的这种方式 渲染出来 看看是否有问题” 想请教下大家有什么好的思路吗,主要是数量级很大,得考虑性能和稳定性吧
    4 条回复    2025-06-27 06:55:48 +08:00
    spike0100
        1
    spike0100  
       13 天前 via iPhone
    可以考虑用其他模型来对这个模型的输出做校验。
    NakanoAzure
        2
    NakanoAzure  
    OP
       13 天前
    @spike0100 这个好像不太行,因为公司说调大模型要钱。。。每天的数量级 1.2 亿,我现在想的是用 Express 或者 KOA 去写个 api 然后给策略他们调,返回对错
    NakanoAzure
        3
    NakanoAzure  
    OP
       13 天前
    跟 mt 交流了下,应该是前端用 nodejs 写个 api 接口,但是 qps1400 不知道算不算多。。。。之前完全没写过 nodejs 啊不知道这块算不算难
    TimePPT
        4
    TimePPT  
    PRO
       13 天前 via Android   ❤️ 1
    关于   ·   帮助文档   ·   自助推广系统   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   5220 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 23ms · UTC 03:37 · PVG 11:37 · LAX 20:37 · JFK 23:37
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.