蚂蚁集团研发多模态遥感基础模型SkySense,可用于地貌地物观测解译
近日,蚂蚁集团推出20亿参数多模态遥感基础模型SkySense,这是蚂蚁百灵大模型在多模态领域最新的研发成果,其论文已被世界计算机视觉顶会CVPR2024接收。数据显示,SkySense在17项测试场景中指标均超过国际同类产品,这也是迄今为止国际上参数规模最大、覆盖任务最全、识别精度最高的多模态遥感基础模型。SkySense可用于地貌、农作物观测和解译等,有效辅助农业生产和经营。
(图片说明:SkySense在17项评测中均超过国际上最新的遥感模型)
随着人工智能的发展,大模型技术与卫星遥感技术相结合产生了新突破。SkySense是蚂蚁集团基于蚂蚁百灵大模型平台能力开发的多模态遥感模型。
SkySense在总计17项国际权威公开数据集进行了测评,其测试任务类型包括了土地利用监测、高分辨率目标识别、地物变化检测等7种常见遥感感知任务,并与国际上已发布的包括IBM和NASA联合研发的Prithvi等共18个全球主流同类模型做了测试结果比较。数据显示,17项测评中SkySense均名列第一。譬如,在国际高清遥感地物检测榜单FAIR1M2.0中,SkySense平均精度(mAP)领先第二名超3%。
在刚刚公布的CVPR2024论文入选结果上,SkySense的研究成果亦被收录。CVPR是由IEEE举办的计算机视觉和模式识别领域的顶级会议,是国际计算机视觉三大顶会之一。
传统的遥感影像理解技术,往往侧重于针对单一模态单一任务建模,缺乏对多模态数据、时间序列、地理先验知识的综合建模和利用,限制了其在海量数据和多种任务中的泛化能力。SkySense突破以上技术瓶颈,实现了文本、红外光、可见光、SAR雷达多种模态、多分辨率的时序遥感影像建模,在多样化的任务中展现出优异性能。在蚂蚁百灵大模型多模态能力支持下,研发人员基于内部构建的19亿遥感影像数据集进行预训练,得到了20.6亿参数量的模型SkySense,这也是迄今为止国际上参数规模最大、覆盖任务最全、识别精度最高的多模态遥感大模型。SkySense可广泛应用于城市规划、森林保护、应急救灾、绿色金融、农业监测等重要领域,目前通过蚂蚁内部MEarth平台提供数据与识别服务。
据了解,蚂蚁集团正在计划开放Skysense模型参数,与行业共建,促进智能遥感技术与应用发展。
SkySense由蚂蚁AI创新研发部门NextEvo与武汉大学联合研发。NextEvo是蚂蚁AI核心技术研发团队,主导了蚂蚁百灵大模型的研发工作,其研发方向涉及CV、NLP、多模态、AIGC、数字人、AI工程化等核心技术。去年,该部门升级了多模态团队,由杨铭带队全面布局多模态技术。杨铭美国西北大学博士,FacebookAIResearch(FAIR)创始成员,去年加入蚂蚁集团,先后就职于NEC美国实验室、FAIR、地平线机器人公司,是世界知名计算机视觉研究专家。
目前,蚂蚁集团多模态研究成果已应用于支付宝五福节AI大规模互动、蚂蚁医疗数字人等场景。
长虹推出基于大模型的智慧家电 AI 平台“长虹云帆”
长虹推出了全球首个基于大模型的智慧家电AI平台——长虹云帆。云帆AI平台将生成式人工智能应用于电视终端,通过长虹自主研发的AI技术和大量专业模型的训练,实现了电视的智能化和智能家居的发展进入全新阶段。长虹云帆AI平台的主要特点是简单易用、交互方便、功能强大。它具有多维感知、多重理解、多任务管理、多模交互和内容激发的五大能力,可以满足用户的个性化需求。站长网2023-11-20 17:32:060000头部主播的跌落从捧杀开始 董宇辉被粉丝推上了李佳琦的老路
主播作为一个充分体现二八定律的职业,人人都想成为各自赛道或者平台的头部。但是过往的行业故事告诉我们人无千日好,花无百日红,要想一个主播跌落神坛也是很容易的。在游戏娱乐直播时代,主播们最怕的就是因为内容违规等上C站,这基本宣告了一个头部主播的灭亡。而在电商直播时代,主播们或许最怕的就是粉丝的捧杀和舆论的关注了。0000Google DeepMind提供免费高质量AI图像 浏览量超1亿
本文概要:1.GoogleDeepMind推出VisualisingAI项目,提供多样化、高质量的AI图像。2.艺术家与DeepMind合作,打破AI图像刻板印象。3.提供的图像已被100多个国家使用,浏览量超1亿,下载超过80万次。站长网2023-08-22 11:53:120000网信办发布全球人工智能治理倡议
今日,国家网信办发布了《全球人工智能治理倡议》,全球人工智能治理倡议是针对人工智能技术快速发展所带来的挑战和机遇提出的倡议。倡议强调了人工智能治理的重要性,呼吁各国加强信息交流和技术合作,共同制定人工智能治理框架和标准规范。倡议强调了人工智能应以人为本,增进人类共同福祉为目标,并应尊重他国主权和法律,防范恶意使用人工智能技术。站长网2023-10-18 23:29:380000美图旗下WHEE推出AI超清功能:一键修复老照片并生成超清图片
美图旗下WHEE宣布,AI超清功能现已上线,可一键修复老照片并生成超清图片。只需要导入图片,选择适合图片的风格,就能一键生成超清图片。除了通用场景,该功能支持多种场景适配,如人像、3D资产和自然风景,并可调节参数进行画面重绘和再创作。站长网2024-02-06 09:01:130001