微软推出大型语言模型分割推理助手LISA
站长网2023-08-10 10:54:311阅
想象一下你想喝咖啡，然后你命令机器人去泡咖啡。您的指令涉及“煮一杯咖啡”，但不包括“去厨房，找到咖啡机，然后打开它”等分步指令。目前的现有系统包含依赖人类指令来识别任何目标对象的模型。他们缺乏推理能力和主动理解用户意图的能力。
为了解决这个问题，微软研究院、香港大学和 SmartMore 的研究人员提出了大型语言模型驱动的分割推理助手——LISA（Large Language Instructed Segmentation Assistant）。
项目地址：https://github.com/dvlab-research/lisa
LISA是一种新颖的分割任务，旨在通过复杂而隐含的查询文本生成分割掩码。LISA 继承了多模态大型语言模型（LLM）的语言生成能力，同时具备生成分割掩码的能力。研究人员发现，LISA 在处理复杂推理、世界知识、解释性回答和多对话方面表现出色。
通过对模型进行微调，仅使用239个推理分割图像指令对，性能得到了提升。研究人员还发现，LISA 在复杂推理任务上的性能优于传统的推理分割方法。他们的未来工作将侧重于推理能力的重要性，以建立一个评估基准并促进社区开发新技术。
核心功能:
- 根据复杂查询文本生成分割掩码
- 进行复杂推理和世界知识的分割
- 提供解释性回答
- 支持多轮对话交互
0001
评论列表
共(0)条相关推荐
周星驰做短剧，《金猪玉叶》有多少含“周”量重要吗？
“剧情狗血，演技也烂”。这是演员宁静对短剧的评价，但即便如此，她还是能看一百多集，甚至成为了短剧的付费用户。明星都如此上头，短剧到底有什么魔力?一个主要的原因就是短剧能让用户“上瘾”。在C2M模式下，短剧走的是“以销定产”路线，也就是按照受众的喜好来做剧本。在此模式下，呈现出来的内容，既吸睛又吸金。站长网2024-06-08 17:02:380000AI地图搜索工具Chatmap AI 描述性短语也能找到地方
ChatMap-AI是一款创新的人工智能地图搜索工具，可提供快速、精确的位置结果。用户可以用自然语言输入描述性短语或位置相关信息来查询位置。地址:https://www.chatmap-ai.com/站长网2023-08-24 16:51:290000瑞幸“酱香拿铁”到底含不含茅台？供应商回应：共用掉1万瓶茅台
快科技9月4日消息，今天贵州茅台与瑞幸咖啡推出的联名咖啡酱香拿铁”无疑是最大的热门，由于是限量供应，很多人都蜂拥抢购来购买。值得注意的是，有很多网友对于酱香拿铁是否真的加入了茅台表示质疑，因为瑞幸制作的过程中并没有加入茅台酒，而是一款白酒风味厚奶”的类似香精产品。对此，白酒风味厚奶”的供应商宁夏塞尚乳业有限公司董事长闫建国出面进行了解答。站长网2023-09-04 21:12:550000Alphabet、 Meta等通过人工智能策略推动广告市场反弹
划重点:1️⃣Alphabet、Meta和Snap，通过人工智能策略，取得广告市场强劲业绩。2️⃣Google的子公司Alphabet，引领广告市场，广告收入增长强劲，特别是YouTube广告。3️⃣Meta（Facebook和Instagram的母公司）在人工智能广告规划和测量方面取得突破，不断吸引广告商，尽管平均广告价格下降。站长网2023-10-27 22:14:500000净利润大涨100%，电商巨头低调招商，高调打“价格战”
电商巨头亚马逊，度过了一个“喜忧参半”的季度。北京时间8月2日，亚马逊发布了2024财年第二季度财报。该季度内，亚马逊净销售额达到1480亿美元（约合人民币1.06万亿元），不计汇率变动影响，同比增长11%;净利润为135亿美元(约合人民币967亿元)，同比增长超过100%。站长网2024-08-05 17:58:570000
