赞
踩
提升视频的观看体验:字幕可以遮挡屏幕上的部分内容,去掉字幕可以让观众看到屏幕的更多细节。
促进视频的全球传播:字幕的语言通常是当地语言,去掉字幕可以让视频在全球传播。
谷歌智能视频API
鬼手剪辑智能去文字API
微软Azure视频处理器
这些API都能使用人工智能技术来识别视频中的字幕并将其从视频中删除。 以下是一些具体的例子:
视频网站可以使用视频字幕去除API,为用户提供无字幕视频,提升观看体验
视频创作者可以使用视频字幕移除API来创建通用兼容的视频,以促进视频传播
视频电商从业者可以使用视频删除字幕API并重新配置新的语种字幕,来实现内容的本地化传播
视频字幕去除API是一个有用的服务,可以用来改善视频的观看体验,促进视频的全球传播,保护视频版权。
本文主要分享一个AI的视频文本/字幕去除工具,中文名:鬼手剪辑;英文名:GhostCut,集成了文本去除、视频去重、视频语音翻译、视频文本翻译、视频擦除等AI功能,Client有,API,网页版,还有微信小程序。
鬼手剪辑是一款智能的视频剪辑软件,他的核心用途是帮助客户提高素材的处理速度和视频创意的生产的质量,我们用了大量的AI的能力在各个音视频的处理细节上,提高了对于很多视频的处理效率。 Github:https://github.com/JollyToday/GhostCut-auto_video_translation
体验地址:鬼手剪辑去文字体验
主要功能:
自动删除视频文字和字幕
手动对视频标记区域擦除/修复
自动翻译视频内文本
自动翻译视频和语音
视频自动去重
产品特点:
AI技术+音视频处理算法
采用自动化、智能化的设计理念
开放式API,便于集成
鬼手剪辑可以自动检测和删除文本。通过智能OCR检测视频中的所有文本,并应用修复以再次恢复视频。 去字幕相关使用场景:
任何英语或中文、日语、韩语、阿拉伯语字幕、标题、文本、单词、文案和硬编码字幕
视频上下区域有黑色填充和覆盖文字
浮动/移动水印(文字)
中英文水印(在视频中间,通过抹除视频实现)
徽标、logo和贴纸删除
鬼手剪辑可以删除视频中的任何文本。
鬼手剪辑GhostCut 对外提供了所有API功能的输出,包括视频去重剪辑、自动去文字、视频擦除、视频字幕翻译、视频语音翻译(含配音)等接口,多个能力可以叠加一起选择。(需要AppKey) 可以集成至 第三方 产品中使用(当然自己有能力开发或者有其他替代方案也就不需要了,毕竟这个是收费的) 如:视频文字翻译:https://api.zhaoli.com/v-w-c/gateway/ve/work/fast
去文字接口请求示例
{"request":{"callback":"https://xxx.com/tool/api/ghost-cut/call-back","music":2,"musicRegion":"","videoInpaintLang":"en","lang":"zh","needCrop":0,"needMask":0,"needMirror":0,"needRescale":0,"needShift":0,"needTransition":0,"needTrim":0,"outUserId":"624585","randomBorder":0,"resolution":"3","uid":"xxx","urls":["https://xxxx.com/Sqv7vgw/"]}}
去文字接口响应示例
{"msg":"success","trace":"c178bdf50dd7454e8db672f0e44593c4","code":1000,"body":{"idProject":220925302,"dataList":[{"url":"https://v.douyin.com/Sqv7vgw/","id":476993630}]}}
视频擦除|视频文本去除是GhostCut的特色功能之一,其特点是智能自动完成视频OCR和修复/擦除动作。相比其他服务商,他不需要手动标记擦除位置,修复效果更加完善。根据是否有标记区域、是否需要OCR、是否需要二次调整等,GhostCut提供了多种精细化能力,可以按需开发使用。以下是其他APP开发的示例:
场景示例 | 产品示例 | 接口输入 |
跨境电商视频去字幕 | 自动去除视频内所有文字 | 使用此接口1.视频去文字needChineseOcclude 1 or 3videoInpaintMasks 否 |
短剧去字幕 | 先标记指定区域,然后在指定区域内自动去文字 | 使用此接口1.视频去文字needChineseOcclude:1 or 3videoInpaintMasks 必传, "type": "remove_only_ocr", |
电视去台标 | 视频擦除-标记区域的内容全部去除, | 使用此接口1.视频去文字needChineseOcclude:2videoInpaintMasks 必传,"type": "remove", |
商品文字被误擦除,需要手动调整 | 对有误擦除或未擦除干净的区域进行二次调整 | 上述操作搭配接口 2.视频去文字结果调整 |
海量视频素材预处理 | 1、对完整视频做OCR和ASR,记录时间值 2、对视频做分割,获得分镜头和时间轴 3、对OCR和ASR分析,识别并标记可用素材片段 4、对3可用的分镜头素材,使用去文字 5、对擦除后的镜头基于脚本重组,合成声音和字幕等 实现海量视频处理和视频生成 | 可联系鬼手 -视频OCR+视频ASR -视频分割 -视频去文字 -视频合成 等 |
有自己的翻译引擎,仅需要去文字的干净素材和视频ASR原文 | 可联系我们 | 可联系鬼手 -视频去文字 -视频OCR+视频ASR |
这是批处理视频文本的简要流程
对完整视频做OCR和ASR,并记录时间值
拆分视频得到子镜头和时间线。
OCR和ASR分析,识别和标记可用的材料段
对于3个可用的子镜头素材,使用to text
根据剧本重新整理抹除的素材,合成声音和字幕等
GhostCut提供了如下API来批量删除视频内文本:
视频OCR+视频ASR
视频分割
视频去文(智能文本删除)
视频合成
多个接口的组合,有助于实现海量视频素材的处理和视频生成。
鬼手剪辑的整体功能比较完善,满足了剪辑人员的大部分需求。该工具的主要特点是可以擦除或替换视频中的所有文字。它有几个独特的功能,包括自动视频翻译和配音、自动硬字幕翻译、自动硬字幕/文本去除、智能视频修复等等。这个产品的每一个细节都是AI和自动化的结合。
参考链接: https://github.com/JollyToday/GhostCut-auto_video_translation/blob/main/README_cn.md
Copyright © 2003-2013 www.wpsshop.cn 版权所有,并保留所有权利。