pengxiying
V2EX  ›  问与答

ai 绘画小程序有必要检测敏感词,防止出涩图吗?

  •  
  •   pengxiying · Jul 29, 2023 · 2761 views
    This topic created in 1197 days ago, the information mentioned may be changed or developed.

    最近写了个 ai 绘画小程序,有一些 sd 模型可以出涩图,我该如何检测呢?之前用了一个敏感词检测 API ,但是这 API 太“敏感”了,比如中国,鸡这样的字眼都会报存在敏感词。 或者是说只需在反向提示词那里做限制就可以了?

    7 replies  •  2023-07-31 10:20:06 +08:00
    estk
    estk
    Jul 30, 2023
    1
    百度 AI 的敏感词和图片审核水平还不错,可能是经过了贴吧的摧残而提高的
    chenjia404
    chenjia404
    Jul 30, 2023
    2
    肯定要啊,不然出现黄图,轻则喝茶,重则进去。
    systemcall
    systemcall
    Jul 30, 2023 via Android
    3
    建议直接买个大厂的检测服务
    没什么大范围传播的话,出黄图一般也不会进去多久,但是要是出现了小熊维尼的图的话,搞不好直接蒸发了
    whileFalse
    whileFalse
    Jul 30, 2023 via Android
    4
    直接检测生成的图
    IDAEngine
    IDAEngine
    Jul 30, 2023
    5
    直接检测 prompt ,屏蔽掉所有敏感字,只允许输入中文绘画
    letitbesqzr
    letitbesqzr
    Jul 31, 2023
    6
    很多云厂家都有图片鉴黄服务,把生成好的图片先给这些服务过一遍,没问题再展示。
    panxi
    panxi
    Jul 31, 2023
    7
    兄弟,这么跟你说吧,出了敏感问题跟阿里腾讯华为这样的公司还能谈,罚酒三杯了事。对你, 对接的就是国家暴力机器
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   1494 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 39ms · UTC 09:53 · PVG 17:53 · LAX 01:53 · JFK 04:53
    ♥ Do have faith in what you're doing.