Pika Lip Sync 功能已为该平台的订阅者推出,允许将口语对话集成到视频中。
这一创新功能 使用户能够使用生成音频初创公司 ElevenLabs 提供的人工智能生成的声音来增强视频效果,并辅以同步动画,确保角色的嘴巴移动与口语对话协调一致。
使用 ElevenLabs 的技术,Pika Lip Sync 功能扩展了对文本到音频转换和预录音轨合并的支持。 这使得用户能够灵活地为 Pika 中人工智能创建的视频角色编写或录制所需的对话,并提供自定义声音风格的能力。
目前,此功能的访问仅限于 Pika Pro 订阅者,他们投资了 每月 58 美元 订阅(年费为 696 美元),并选择“超级合作者” 计划,这是 Pika 的 Discord 社区中的一个仅限邀请的小组,将该功能标记为独家“抢先体验”特权。
我们知道最近有很多关于人工智能生成视频的讨论。 好吧,看看现在谁在说话!
专业用户现在可以抢先体验 Lip Sync: https://t.co/nqzjGy82Lx。 pic.twitter.com/vCJ88pUWLL
— 皮卡 (@pika_labs) 2024 年 2 月 27 日
如何使用 Pika Lip Sync 功能?
要访问 Pika Lip Sync 功能, 您必须是 Pika Pro 订阅者。 访问 皮卡官方网站,导航至订阅部分,然后选择 皮卡专业计划。 完成注册过程(包括付款)以获得对该功能的完全访问权限。
Pika AI视频工具是什么 以及为什么你应该关心
1. 访问唇形同步功能
订阅后,登录您的 Pika 帐户。 找到列出 Pika 功能的仪表板或工具栏,然后选择 Pika Lip Sync 选项,开始创建带有同步对话的 AI 生成视频。
2. 上传您的视频
首先上传您要添加对话的视频。 确保您的视频满足任何指定的格式和大小要求。 上传后,进入对话添加阶段。
3.添加对话
您可以通过两种方式添加对话:
- 文本转音频: 输入您希望角色说出的对话。 由 ElevenLabs 提供支持的 Pika Lip Sync 将为该文本生成人工智能语音。
- 上传音频: 如果您喜欢使用特定的语音或录音,您可以上传音频文件。 确保音频清晰度和格式符合 Pika 的要求。
4.自定义语音风格
利用 ElevenLabs 的技术来定制语音风格。 您可以调整各种参数。
5. 同步对话
添加对话后,Pika Lip Sync 会自动将角色的嘴部动作与所说的话同步。 仔细检查此同步以确保准确性。
6. 审核和编辑
预览视频以检查唇形同步功能的整体效果。 您可以根据需要返回并调整对话、语音风格或同步。
创新与责任的碰撞
Pika Lip Sync 提供了一个大多数人以前无法接触到的创意潜力世界。 人工智能生成的语音和逼真的口型同步动画的无缝集成 不可否认的是令人兴奋的。
然而,创新爆发的地方,深思熟虑的需求也随之爆发。 Deepfake 视频(通过操纵使人们看起来说了或做了他们没有做过的事情)是困扰这项技术的幽灵。 Pika Lip Sync 的易用性 可能会使创建有害的、欺骗性的内容变得极其简单。 传播错误信息和削弱信任的可能性是一个非常现实的问题。
其影响超出了新闻周期的范围。 想象一下对个人隐私和安全的影响。 这是一个十字路口:我们应该优先考虑新可能性的刺激,还是在损害造成之前建立负责任的保障措施? 这不是一个抑制进步的问题,而是一个以道德方式引导进步的问题。
Pika Lip Sync 凸显了用户、开发人员和法规制定者需要保持警惕的必要性。 只有这样,我们才能从这些工具中获益,同时防止其潜在的滥用。 此时此刻,我们既需要对技术的潜力感到兴奋,又需要承诺以保护真相的完整性而不是助长欺骗的方式使用它。
特色图片来源: 凯雷姆·葛兰/中途