近一周AI新闻总结:
1. Hotshot

本周,Hotshot宣布推出旗下首款基于DIT架构的模型,能够生成最长10秒的高质量视频。Hotshot在一致性和运动方面表现出色,同时具有很强的扩展性。从官方发布的样本可以看出,Hotshot已经具备了接近Luma可灵GEN 3模型的视频生成能力。
考虑到负荷过大,Hotshot为免费用户提供了每天2点试用额度,登录即可使用。Hotshot目前仅支持文本转视频功能,输入英文提示词即可生成一段5秒钟的视频。大家可以看一下生成视频的效果。从多组测试可以看出,Hotshot同样能够生成模拟真实世界运动规律和创意类视频,大家可以尝试。

本周,虚拟网红创建平台Rendernet发布了Narrator功能,可以生成带有唇形匹配的虚拟网红短视频。用户只需上传一段视频,添加需要播报的文本,即可合成新的内容。
此外,Narrator还支持人物换脸,帮你轻松创建超真实的虚拟网红视频。例如,我们可以使用免费的Flux模型生成一张网红形象,然后通过Luma或Runway Gen 3把图像动态化,最后导入视频到Rendernet Narrator,添加字幕即可合成新的视频。
目前Narrator仅面向高级用户开放,感兴趣的同学可以尝试。
3. Heeyo

这是一个获得OpenAI和Alexa投资的儿童英文陪伴式学习助手,并在近期获得了新一轮融资。Heeyo允许用户定制熊猫、恐龙等学习助手的形象,且可以使用双语和儿童进行互动。Heeyo和牛津、斯坦福大学进行了合作,并使用了权威专家设计的英文学习模式。此外,儿童还可以创建小游戏,增强对创造力的培养。
登录到Heeyo网页版,用户可以定制儿童的年龄、性别以及对学习偏好的要求。然后根据儿童的喜好,选择童话、动物、机器人等话题。最后从列表中选择一个动物形象作为学习伴侣。
Heeyo支持语音和文字输入,方便儿童和助手进行语音交互。点击左下角的图书馆,还可以阅读很多原版英文故事。
此外,Heeyo还推出了移动端应用程序,大家可以尝试。
4. TurboEdit

这是Adobe Research团队开发的即时图像编辑器,允许用户通过文本描述快速编辑图像。用户只需通过一段文本就能控制图像中某些区域的特定变化,比如改变头发颜色、长短,或调整人物的年龄。Turbo Edit能够在保持图像整体不变的情况下对指定部分进行修改,只需不到0.5秒即可完成一次编辑,且支持即时反馈和交互式编辑。目前该项目的代码还没有正式发布。
5. Consensus

近期,基于人工智能技术的学术搜索引擎Consensus完成了1150万美元A轮融资。目前Consensus的月活跃用户已超过40万,并预计在2024年实现600%的利润增长。Consensus是一个基于AI的学术搜索引擎,致力于通过语言模型和专用的搜索技术快速检索相关的学术论文。
Consensus的搜索范围涵盖了超过2亿篇研究论文,且覆盖了各个科学领域。登录到后台,输入包含关键字的提示词即可检索到相关的论文。Filter选项则可以设置论文的发布日期以及论文的类型。
与传统检索工具不同的是,Consensus Copilot助手提供了类似ChatGPT的功能,能够完成内容总结和论文分析。与生成式LLM不同,Copilot直接连接到科学研究,每个结果都可连接到对应的研究论文。Consensus还支持中文输入输出,大家可以尝试。
6. Unitree G1

本周,宇数科技发布了Unitree G1通用人形机器人量产版,售价9.9万元人民币。该机器人内置了Unifolm机器人模型,同时拥有超大关节运动角度空间以及43个关节电机。Unitree G1能够结合立位混合控制,模拟人类手部,实现对物体的精准操作。

从演示动画可以看出,G1可以进行原地360度跳跃旋转,完成上下楼梯、跑步、急停等动作,且可以轻松越过障碍物。该机器人还具备很强的稳定性,即使受到了外部的强烈冲击,也可以保持站立形态。
7. Freepik更新

本周,图库平台Freepik新增了Fluxfest和Flux Realism模型,均可免费使用。其中,Fluxfest模型能够在2秒内生成一组图像,且不影响整体画质。Freepik为用户提供了每天20点免费额度。
8. Skyreels

本周,昆仑万维发布了全球首个集成视频模型和3D引擎的AI短剧平台Skyreels。Skyreels集剧本生成、角色定制、分镜、剧情、背景音乐和影片合成于一体,只需输入简单的命令即可生成一段180秒的高清视频。
9. Captions

该网站能够实现自动化视频剪辑。用户只需上传需要剪辑的素材,Captions就会自动分析素材,并插入自定义图像、转场效果以及音乐、音效和动态背景。除了视频编辑器,Captions还提供了字幕添加、短视频生成、视频翻译等功能。
首先,从本地导入需要剪辑的视频或片段,系统会自动识别语音并完成字幕添加。根据语调的不同,字幕的样式也会随之变化。点击上方的选项,还可以将视频调整为竖屏和1:1的比例。视频翻译功能则可以将视频翻译为任意国家的语言,并生成对应的字幕。
Captions同时支持将长视频转换为Shorts短视频。从本地上传一段视频,分别设置字幕样式和短视频持续时长,点击生成按钮即可。该功能可以自动剪辑视频的精华内容并添加字幕。
此外,Captions还支持数字人功能。首先输入一段提示词生成视频脚本,然后选择一个播音员和字幕风格,点击生成视频。目前,Captions的大部分功能都可以免费尝试。

I’ve been following your blog for some time now, and I’m consistently blown away by the quality of your content. Your ability to tackle complex topics with ease is truly admirable.