AI LLM文生图|文生视频初探与使用

引言

        如今AI大模型已实现文本理解、文本生图、文生视频等操作。那么，普通程序员如何充分利用工具为自己添加业余乐趣呢(zhuan qian)？今天，就让我们一起快速走读下LLM给我们带来便捷和AI应用场景。

AI效率工具

        使用AI进行图文视频合成，需要prompt，故事脚本，前期语音工具，搜索工具，后期剪辑工具，去水印工具。本文仅罗列几个笔者使用的，如下：

文字转语音合成      

        在线配音站：  琅琅配音 （限免）

        微软TTS语音

        讯飞语记

AI时间线

        AI时间线（根据关键字输出关联图片）

示例：输入 “五一劳动”

输出：

AI关键搜索秘塔

         秘塔AI搜索  （关键字结果输出，时间梳理并生成PPT的网站）

Prompt生成-词魂

        https://icihun.com/AIGC （一个精品提示词库的网站）

网站图片提取 

        extract.pics   （从公共网站中提取、查看和下载图像）

AI图片资源库

https://www.lummi.ai/ （免费的AI图片资源，网站里所有的图片都是用AI生成的）

文字生成视频

        Pika：  https://pika.art   (付费可用)

        扣子 ：  ​​​​​​https:www.coze.cn/ (制作智能体或Bot)

        Pixverse：  https:pixverse.ai/  （AI文字生成视频）

文字生成图片

        智谱清言：https://chatglm.cn/   （AI绘图）

        文心一言： https:yige.baidu.com/  

         Dreamina画图：  https:dreamina.jianying.com/ai-tool/home

        豆包：  https:chatglm.cn/

        讯飞星火：https:xinghuo.xfyun.cn/   (图文，语音合成)

AI生成个性卡通头像

        打开网站后， 按照提示输入提示词，然后点击合成，最后就生成了可以虚拟化的卡通头像人物。（示例网站： 堆友） 生成如如下：

AI生成个人Q版头像

        利用Midjourney通过简单的关键词教你快速创作各种风格的定制头像，生成后的效果展示：

prompt思路如下：

魔法词：Pop style 、Pixar style、Hong Kong comic style、comic style、costume photo style

公式： 垫图 + pop mart style（头像风格）+ 主题背景 + 环境氛围 + 风格参考

辅助词：mockup （模型），fine luster（光泽好），clean background（干净的背景），soft colors（柔和的颜色），3D render（3D渲染），Soft focus（软焦点）， exquisite details（细节清晰），ultra high definition（超高清）， oc ， blender（搅拌机）， IP ， best quality（最佳质量），8k

去水印工具

生成的图片，右下角会有水印，一般可使用下面方法去除水印：

         美图秀秀，在线PS抠图，去去去

那么，文字生成的视频，也有水印，该怎么办呢？ 下面提供一种思路：

 使用FFmpeg工具去除视频的水印

 安装：打开官网  FFmpeg ， Download Windows版本。

解压后使用：

使用它对视频进行添加水印，去除水印等操作。

添加水印，再去除水印操作命令如下：

ffmpeg -i demo.mp4 -ss 1 -f image2 -vframes 1 out.jpg  // 原视频截图

ffmpeg -hide_banner -i demo.mp4 -i logo.png -filter_complex "overlay=x=xxx:y=xxx" with_watermark.mp4 -y // 原视频添加水印

ffmpeg -i with_watermark.mp4 -ss 1 -f image2 -vframes 1 with_watermark.jpg  // 对添加水印视频截图

ffmpeg -i with_watermark.mp4 -vf "delogo=x=xxx:y=xxx:w=xxx:h=xxx:show=0" -c:a copy no_watermark.mp4 // 给添加水印的视频，去除水印

AI 提示词(中文版)

宫崎骏风格的城市 湖水 蓝天 白云 樱花树 (生成背景图)

提示词： 一位老师站在仪表板前，仪表板上有数据图表，平面插图，线条和形状柔和，抽象的孟菲斯风格，蓝白相间，渐变色，透明纹理，白色背景，极简主义。 （复杂指令，图片细节更详实）

开源数字人平台

        推荐一个开源数字人框架Fay，它集成了语言模型和数字角色。它为虚拟购物指南、广播员、个人助手、服务员、教师以及基于语音或文本的移动助手等多样化应用提供带货版、助手版和代理版。AI数字人作为无形态的韧性机器人存在，更接近人类的生活，也将是一种改变方式。  

Fay 开源地址： 

AI Agent：

https://github.com/xszyou/Fay/tree/fay-agent-edition

直播带货：

https://github.com/xszyou/Fay/tree/fay-sales-edition

数字人助理：

https://github.com/xszyou/Fay/tree/fay-assistant-edition

 

参考连接：  ​​​​​​​​​​​​​​

        https:mp.weixin.qq.com/s/2FubPDMEw-7u3oqmuFSjKg, 开源数字人平台项目

        https:mp.weixin.qq.com/s/8ztRZ92xGxQM--_0hONikg, 常用精彩网站

        https:mp.weixin.qq.com/s/bfq_lbQ2C3RNztLxbGZiiw, Pika：AI文生视频工具

        https:mp.weixin.qq.com/s/EyKRw9WyddvIg6Qf6EB0Zg, 用 VITS-fast-fine-tuning 进行语音合成和声音克隆

        https:mp.weixin.qq.com/s/KN7HigX4dNIbwb0aJ7TmmQ，AI生成备课用的插图

        https:mp.weixin.qq.com/s/lZkTbzplX8TKNrfwzHOsvA，如何让Kimi免费成为自己的微信公众号客服

        https:www.bilibili.com/video/BV1fH4y1N7rb/?spm_id_from=333.788， 免费不限次，FFmpeg视频去水印

        https:mp.weixin.qq.com/s/rlPdWuZ3P_2iXfHTpXTokQ， AI卡通头像生成