IDEA提出ToG思维图谱 大模型性能提升214%!
要点:
由IDEA研究院、微软亚洲研究院、香港科技大学等研究团队推出的Think-on-Graph技术,通过大模型与知识图谱的深度融合,实现在多个基准数据集上的性能提升,引领深度推理领域。
在解决大模型在金融、法律、医疗等领域幻觉问题的挑战中,Think-on-Graph通过紧耦合的方式将大模型(LLM)作为“跑腿”,与知识图谱(KG)相互协作,提供更条理清晰、可追溯的推理链条。
Think-on-Graph借鉴了Transformer的beam-search算法思路,通过搜索剪枝和推理决策两个任务的迭代过程,有效提升了大模型推理的可解释性,同时在多个任务上刷新性能榜单。
近期,由IDEA研究院、微软亚洲研究院、香港科技大学等多方研究团队合作推出的Think-on-Graph技术,在深度推理领域掀起了一场革新。这一技术通过紧耦合大模型(LLM)与知识图谱(KG),成功弥补了大模型在金融、法律、医疗等领域幻觉问题上的能力短板。Think-on-Graph被证明在多个基准数据集上实现了巨大的性能提升,刷新了相关领域的性能榜单。
为了解决大模型在幻觉问题上的挑战,Think-on-Graph采用了紧耦合的新范式,将大模型作为“跑腿”与知识图谱相互协作。这一方法不仅使推理过程更加清晰有序,还提供了可追溯的推理链条。通过一个具体的例子,对比了传统大模型在推理问题上的表现与Think-on-Graph的方式,突显了其在逻辑分析和推理透明度方面的优势。
论文地址:https://arxiv.org/pdf/2307.07697.pdf
代码链接:https://github.com/IDEA-FinAI/ToG
Think-on-Graph的紧耦合范式不仅提高了大模型推理的效率,还在可解释性上有所突破。采用了Transformer的beam-search算法思路,实现了搜索剪枝和推理决策的迭代过程,有效提升了大模型推理的可解释性。此外,通过人工反馈和大模型的推理能力,Think-on-Graph还能够发现并修正知识图谱中的错误信息,弥补了大模型训练时间长、知识更新慢的缺点。
最终,在四类知识密集型任务的共9个数据集上,Think-on-Graph不仅刷新了7个性能榜单,而且在Zeroshot-RE数据集上的表现更是显著超过了传统大模型。这一研究成果为深度推理领域的发展带来了新的思路和方法,为实现大模型在各领域应用中更可靠、可解释的推理能力提供了有力支持。
“繁花”同款,撬动多少生意?
鲜得来的排骨年糕,15块钱一份,排队半小时起;和平饭店的英国套房,涨到16888元一晚,酒店电话还被打爆了;还有国际饭店的蝴蝶酥、杏花楼的定胜糕,这些老字号小吃都在被年轻人疯抢。随着《繁花》的热播,剧中同款一夜出圈。而标志性的场景黄河路,更是从过气老街变为网红打卡地,甚至有网友调侃,《繁花》拉动了黄河路的GDP,每天挤满了来拍照的人,路上全是“人从众”。0000Stability AI推出全面的API服务,引领图像处理新时代
近日,StabilityAI宣布推出一套全新的API服务,旨在提供更全面、更高效的图像处理服务。这一举措无疑将为图像处理领域带来一场革命。详细内容:https://stability.ai/news/image-services-on-stability-ai-developer-platform这套API服务包含以下几个主要功能:站长网2024-03-23 05:18:250000都说新能源省钱,那养一台比亚迪海豚一年需要多少钱?
现在这个社会发展下,都提供环保节能,新能源的发展趋势也是逐渐上升,新能源作为电动车型,相比于燃油车型来说,油耗费用基本上是省下了,所以大家都说新能源省钱,那么真的是这样吗,今天咱们就以比亚迪海豚2023款自由版为例,一起来看看养一台比亚迪海豚一年需要花费多少钱。站长网2023-05-25 06:03:260001微软和甲骨文讨论相互租用 AI 服务器以解决短缺问题
据一位直接了解谈判情况的人士透露,甲骨文和微软最近讨论了一项不同寻常的协议,如果任何一家公司的计算能力耗尽,则相互租用服务器。这一项交易将帮助这两家竞争对手的云计算供应商满足对可运行人工智能软件的服务器的急剧需求,这已经造成了服务器的短缺。站长网2023-05-10 08:49:510000低质量AI生成网站获广告支撑 数量高达217个
新闻网站评级工具NewsGuard公布了2023年6月的错误信息监控结果,称141个品牌正在为低质量的人工智能(AI)生成的网站提供广告收入,用于支持这些不可靠网站的发展。这些网站几乎没有人对其进行监督,每天平均会生成上千条文章,其中包括错误信息,尤其是误导用户的医疗健康信息。站长网2023-06-29 12:13:380000