OpenAI核心产品团队的产品管理负责人Cat Wu认为,在网上寻找好东西的方法分为推荐和核实两步。
她建议,可以先关掉联网搜索,让Chat直接推荐。这时候模型只靠训练时学到的知识回答,相当于模型根据学过的大量讨论之后形成的综合印象。再打开联网搜索,逐个核实。查两件事:一是准确性,比如参数、口碑有没有说错,模型说的会不会是编的;二是可用性。就像先问一个懂行的老朋友“你觉得哪个好”,他凭经验给你几个名字,然后你再自己去店里看看现在还有没有、价格对不对。
为什么这样做比直接联网搜要好:直接开搜索时,模型往往会优先引用排名靠前的网页,而排名靠前的网页通常是做广告、刷评论内容最多的地方。先离线推荐,等于先用模型的判断定一个候选名单,再用搜索去核查事实,而不是让搜索结果来决定推荐什么。
via 匿名