8月第四周AI资讯

近一周AI新闻总结:

1. Hotshot

本周,Hotshot宣布推出旗下首款基于DIT架构的模型,能够生成最长10秒的高质量视频。Hotshot在一致性和运动方面表现出色,同时具有很强的扩展性。从官方发布的样本可以看出,Hotshot已经具备了接近Luma可灵GEN 3模型的视频生成能力。

考虑到负荷过大,Hotshot为免费用户提供了每天2点试用额度,登录即可使用。Hotshot目前仅支持文本转视频功能,输入英文提示词即可生成一段5秒钟的视频。大家可以看一下生成视频的效果。从多组测试可以看出,Hotshot同样能够生成模拟真实世界运动规律和创意类视频,大家可以尝试。

2. Rendernet Narrator

本周,虚拟网红创建平台Rendernet发布了Narrator功能,可以生成带有唇形匹配的虚拟网红短视频。用户只需上传一段视频,添加需要播报的文本,即可合成新的内容。

此外,Narrator还支持人物换脸,帮你轻松创建超真实的虚拟网红视频。例如,我们可以使用免费的Flux模型生成一张网红形象,然后通过Luma或Runway Gen 3把图像动态化,最后导入视频到Rendernet Narrator,添加字幕即可合成新的视频。

目前Narrator仅面向高级用户开放,感兴趣的同学可以尝试。

3. Heeyo

这是一个获得OpenAI和Alexa投资的儿童英文陪伴式学习助手,并在近期获得了新一轮融资。Heeyo允许用户定制熊猫、恐龙等学习助手的形象,且可以使用双语和儿童进行互动。Heeyo和牛津、斯坦福大学进行了合作,并使用了权威专家设计的英文学习模式。此外,儿童还可以创建小游戏,增强对创造力的培养。

登录到Heeyo网页版,用户可以定制儿童的年龄、性别以及对学习偏好的要求。然后根据儿童的喜好,选择童话、动物、机器人等话题。最后从列表中选择一个动物形象作为学习伴侣。

Heeyo支持语音和文字输入,方便儿童和助手进行语音交互。点击左下角的图书馆,还可以阅读很多原版英文故事。

此外,Heeyo还推出了移动端应用程序,大家可以尝试。

4. TurboEdit

这是Adobe Research团队开发的即时图像编辑器,允许用户通过文本描述快速编辑图像。用户只需通过一段文本就能控制图像中某些区域的特定变化,比如改变头发颜色、长短,或调整人物的年龄。Turbo Edit能够在保持图像整体不变的情况下对指定部分进行修改,只需不到0.5秒即可完成一次编辑,且支持即时反馈和交互式编辑。目前该项目的代码还没有正式发布。

5. Consensus

近期,基于人工智能技术的学术搜索引擎Consensus完成了1150万美元A轮融资。目前Consensus的月活跃用户已超过40万,并预计在2024年实现600%的利润增长。Consensus是一个基于AI的学术搜索引擎,致力于通过语言模型和专用的搜索技术快速检索相关的学术论文。

Consensus的搜索范围涵盖了超过2亿篇研究论文,且覆盖了各个科学领域。登录到后台,输入包含关键字的提示词即可检索到相关的论文。Filter选项则可以设置论文的发布日期以及论文的类型。

与传统检索工具不同的是,Consensus Copilot助手提供了类似ChatGPT的功能,能够完成内容总结和论文分析。与生成式LLM不同,Copilot直接连接到科学研究,每个结果都可连接到对应的研究论文。Consensus还支持中文输入输出,大家可以尝试。

6. Unitree G1

本周,宇数科技发布了Unitree G1通用人形机器人量产版,售价9.9万元人民币。该机器人内置了Unifolm机器人模型,同时拥有超大关节运动角度空间以及43个关节电机。Unitree G1能够结合立位混合控制,模拟人类手部,实现对物体的精准操作。

从演示动画可以看出,G1可以进行原地360度跳跃旋转,完成上下楼梯、跑步、急停等动作,且可以轻松越过障碍物。该机器人还具备很强的稳定性,即使受到了外部的强烈冲击,也可以保持站立形态。

7. Freepik更新

本周,图库平台Freepik新增了Fluxfest和Flux Realism模型,均可免费使用。其中,Fluxfest模型能够在2秒内生成一组图像,且不影响整体画质。Freepik为用户提供了每天20点免费额度。

8. Skyreels

本周,昆仑万维发布了全球首个集成视频模型和3D引擎的AI短剧平台Skyreels。Skyreels集剧本生成、角色定制、分镜、剧情、背景音乐和影片合成于一体,只需输入简单的命令即可生成一段180秒的高清视频。

9. Captions

该网站能够实现自动化视频剪辑。用户只需上传需要剪辑的素材,Captions就会自动分析素材,并插入自定义图像、转场效果以及音乐、音效和动态背景。除了视频编辑器,Captions还提供了字幕添加、短视频生成、视频翻译等功能。

首先,从本地导入需要剪辑的视频或片段,系统会自动识别语音并完成字幕添加。根据语调的不同,字幕的样式也会随之变化。点击上方的选项,还可以将视频调整为竖屏和1:1的比例。视频翻译功能则可以将视频翻译为任意国家的语言,并生成对应的字幕。

Captions同时支持将长视频转换为Shorts短视频。从本地上传一段视频,分别设置字幕样式和短视频持续时长,点击生成按钮即可。该功能可以自动剪辑视频的精华内容并添加字幕。

此外,Captions还支持数字人功能。首先输入一段提示词生成视频脚本,然后选择一个播音员和字幕风格,点击生成视频。目前,Captions的大部分功能都可以免费尝试。

这篇文章有一个评论

  1. Mashable Video Downloader

    I’ve been following your blog for some time now, and I’m consistently blown away by the quality of your content. Your ability to tackle complex topics with ease is truly admirable.

回复 Mashable Video Downloader 取消回复