跳到正文
热点事件观察中

研究者提出GraphDPO图结构偏好优化方法

1 篇报道1 个报道来源1 天前更新

先了解这件事

AI 综述

Ning Liu等作者提出GraphDPO,把直接偏好优化(DPO)从成对比较推广到偏好图。据其论文,该方法在由 rollout 排序诱导的有向无环偏好图上操作,用图结构的 Plackett-Luce 目标聚合支配邻域监督,并将标准 DPO 作为特例保留。 这一推广意味着对齐训练可利用多个回答之间的排序关系,而不只依赖两两成对比较。论文未给出实验效果数据。

AI 根据报道生成 · 1 天前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月12日
  1. arXiv cs.AI
    GraphDPO:让语言模型在偏好图上做对齐,而非成对比较

    研究者提出 GraphDPO,将 DPO 从成对偏好推广到由 rollout 排序诱导的有向无环偏好图,用图结构的 Plackett-Luce 目标聚合支配邻域监督,并把标准 DPO 作为特例保留。

本事件热度走势

可比范围当前
4
可比范围峰值
1010月12日 13:00
近 24 小时变化
-51%

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。