音乐领域的ControlNet来了!Music ControlNet可精确控制音乐中的时间变化
Music ControlNet是一款基于扩散(diffusion)技术的音乐生成模型,旨在为文本到音乐生成模型提供多个准确的、时变的音乐控制。虽然现代文本到音乐生成模型已经能够以广泛的风格生成高质量音乐,但文本控制主要适用于操纵全局的音乐属性,如流派、情绪和速度,对于精确控制音乐中时间变化的属性,比如节奏中的拍子位置或音乐动态的变化,则表现不佳。

项目地址:https://musiccontrolnet.github.io/web/
Music ControlNet通过提取训练音频中的控制信息,细调音乐的谱图生成模型,以给定旋律、动态和节奏控制的方式,实现对生成音频的多个准确时变控制。与已有的Uni-ControlNet方法相比,该模型引入了一种新的策略,允许创作者在时间上部分指定控制,从而为音乐创作提供更大的灵活性。
核心功能:
多时变控制: Music ControlNet为音乐生成提供多个时变的控制,包括旋律、动态和节奏,使创作者能够更精细地操控生成音乐的各个方面。
扩散技术: 采用扩散技术,通过对训练音频中提取的控制信息进行微调,实现对音频谱图的条件生成,提高生成音乐的质量和逼真度。
部分指定控制: 与传统模型相比,Music ControlNet引入了一种新的策略,允许创作者在时间上部分指定控制,为创作提供更大的自由度和创造性。
性能优越性: 在与MusicGen等现有音乐生成模型的比较中,Music ControlNet表现出色,生成的音乐与输入旋律的吻合度高达49%,同时具有更少的参数、更短的训练时间,以及对两种额外形式的时变控制的支持。
灵活的应用: 通过提供生成音乐的示例,包括旋律、动态和节奏的各种组合,以及对时间上部分指定控制的支持,Music ControlNet为创作者提供了丰富的工具,用于创作出具有多样性和创新性的音乐作品。
三星和 Naver 联合开发生成式 AI 和 AI 芯片与 ChatGPT 竞争
韩国两大科技巨头三星电子和Naver公司已经同意联合开发一款生成式人工智能企业平台,以与ChatGPT等全球人工智能工具竞争。站长网2023-05-15 09:15:560000Mastercard推出新AI模型“Decision Intelligence Pro”以提升网络内欺诈检测
划重点:1.📌新模型介绍:Mastercard推出名为“DecisionIntelligencePro”的新AI模型,据称能够比以前提高多达300%的欺诈交易检测率。2.📌模型原理:该模型基于Mastercard每年处理的约1250亿笔交易数据,通过分析持卡人与商家之间的关系,而非像OpenAI的GPT-4或Google的Gemini那样依赖于文字。站长网2024-02-02 15:38:560000抖音,600亿小游戏的“卖铲人”
小游戏,再度出圈。2024年5月,《抓大鹅》成为最受欢迎的小游戏,也是《跳一跳》《羊了个羊》《合成大西瓜》之后又一匹“黑马”。与此同时,小游戏成为上市游戏公司2023年报以及2024年Q1季报的“关键词”,行业有头有脸的玩家纷纷摩拳擦掌准备大干一场。挖掘小游戏这座“富矿”,未来谁能赚得盆满钵满尚没有定论,但提供平台的“卖铲人”却无疑是大赢家。毕竟,没有小游戏能拒绝抖音。站长网2024-05-17 16:44:100000淘宝更新手淘搜索展示销量统计逻辑
日前,淘宝店长发布通知称,淘宝手淘搜索展示的销量统计逻辑更新。1、按综合排序搜索:为了提高消费者搜索体验,搜索侧从4月开始逐步升级手淘搜索综合排序下的销量展示逻辑,新的逻辑正在灰测中,目前共有4种展示逻辑,不同消费者看到的商品销量可能会不一样,展示逻辑如下:站长网2023-05-12 20:41:090000腾讯以最「离谱」的方式,成了年度赢家?
前两天,2023年的TGA(TheGameAwards)奖项正式出炉,米哈游《崩坏:星穹铁道》喜提最佳移动游戏;腾讯和拳头的《英雄联盟》《无畏契约》也成功包揽了TGA的所有电竞奖项。0000