“永久免费” "顶级AI技术”【语音转文字】---“翻译” “转写” “语音识别” ---Whisper AI
Рет қаралды 60,210
7 ай бұрын在11月7号的openAI开发者大会上，openAI宣布了whisper的升级版本whisper V3，相较之前的版本，whisper V3对非英语语言的处理能力得到了极大的增强提高。
OpenAI的whisper是一个通用的语音识别模型，它可以将语音转换成文字。 它是基于一个大规模的多语言和多任务的监督数据集训练的，能够处理不同的口音、背景噪音和专业术语。 它也是一个多任务模型，可以进行多语言语音识别、语音翻译和语言识别。
本期视频我们来看看如何使用Google Colaboratory部署使用Whisper, Google Colab是一个完全免费的python程序运行应用，我们通过浏览器就能免费使用google 提供的高算力gpu和tpu，无需任何环境配置，运行大部分的人工智能软件应用。
Colab Whisper 代码：
第一行：!pip install git+github.com/openai/whisper.git
!sudo apt update && sudo apt install ffmpeg
第二行：!whisper "文件名（需要替换）.mp3" --model medium
语音识别后，直接翻译为英文：
!whisper "文件名（需要替换）.mp3" --model medium --task translate
使用最新的Whisper v3模型
!whisper "文件名（需要替换）.mp3" --model large-v3
免费VPN:
privado vpn (中国可用）
官网：bit.ly/3IO5WI1
zoog vpn (中国可用）
bit.ly/3YqdCpW
👇
老张推荐：
今后，AI软件将成为我们工作生活中主要生产力工具。但是这些应用都是以美元计价的，对于中文用户来说，价格是比较高昂的。所以使用合租账号将是最经济的AI应用方案。
“银河录像局” 这个网站提供了全方位的AI工具合租账号，其中涵盖了ChatGPT Plus，Photoshop AI, Midjourney, Notion AI, Office 365, Adobe全家桶 等主要的AI应用。 相比单独的账号，合租账号的价格十分低廉，对于中文用户是友好的AI工具使用方案。
官方网站：nf.video/
账号购买“优惠码”：calz
@haonana3062 Ай бұрын
以下是个人尝试的总结： 1、为什么转出来不是简体中文，推荐重命名一下文件名，不要包含繁体字。 2、没有转换完整，可能是网络不稳定，可以再转一次
@jasonzhangxiancity Ай бұрын
总结的很好。我在openAI的论坛看到的解决方案是 Whisper 并没有区分简体繁体只有中文一个识别选项。不过可以语言示例的方法解决这个问题。 在使用 第二句命令代码 !whisper "文件名.wav" --model medium 时，加上这句命令 --initial_prompt "以下是普通話的句子" 在这个命令 --initial_prompt "以下是普通話的句子" 当中， 当你使用繁体时，注意 普通“话 ”在繁体中的写法是“話” 这就是定义繁体和简体的关键。
@tigercanadaful 4 ай бұрын
成功了！感谢大神！特别好用。。。无敌了！
@culatecal 5 ай бұрын
谢谢张老师，这个视频对我太有帮助了，免费，好用，真是太高级了！！！😁
@user-of6fx7ll6l 6 ай бұрын
可以了, 非常感谢张老师
@JasonLee-ou2hc 2 ай бұрын
感谢分享！经历了千辛万苦，终于找到可以了免费转换1小时的方式！好人一生平安
@huazhou-mv7sb 4 ай бұрын
非常感谢老张，太有帮助了，感谢！！
@anonymousk3767 4 ай бұрын
非常好用，谢谢老张
@cocoaghana6297 5 ай бұрын
非常好，感谢张老师
@AndreC099 2 ай бұрын
好猛，黑科技。比PR或檢映提供的語音識別正確率更高，非常感謝
@rooodeviiis4000 Ай бұрын
感谢分享！用来做翻译真的是太顺畅了！
@87072290 Ай бұрын
太棒了！临时有需求，正好遇到了您这个视频，赞！
@kaiyunchen6046 2 ай бұрын
谢谢老张！太牛了！科技日新月异！
@horoyang 7 ай бұрын
運行中，非常感謝
@andyw841 3 ай бұрын
太棒了！感谢您！
@wendylee6398 Ай бұрын
太棒啦 转录得很不错！
@InnocentCruiseShip-pm7oj 6 ай бұрын
非常感谢
@reneeyoung975 2 ай бұрын
非常感谢你的分享，是一个不错的工具
@xiaofengzhu6033 Ай бұрын
按照你的方法实测可用，专门回来评论，点赞加了关注！努力！😃
@yutaka1408 2 ай бұрын
感謝老師的分享
@wick7788 7 ай бұрын
感谢分享 已经关注老张
@user-cs1pw8jk9p 4 ай бұрын
#metoo
@ToygerTigerCat Ай бұрын
成功了，相当解气！哈哈
@jonathannorton960 2 ай бұрын
太棒了，正是我所需要的，果断关注你！
@yungshenchen258 2 ай бұрын
真棒😁
@okunohosomiti584 10 күн бұрын
我发现了一个很重要的技巧，就是如果最好把文件命名用语音的文字进行命名，如：日语语音的话，文件名最好用日语命名，这样wisper更容易识别语音类型，如果用英语命名的话，很多时候识别出来的文字直接变成英文的
@user-ku3ph7dk2n 4 ай бұрын
很好用，感谢！请问如何生成中文翻译的文本。
@shawnzhsh 3 ай бұрын
很棒的节目。 请问 文本转语音支持吗？ 是哪几个命令？感谢。
@forfreedom8084 3 ай бұрын
感谢
@runkaimi 2 ай бұрын
张老师，我有个小问题，就是我用您这个方法去音频转文字，经常是上传速度特别慢，有的时候音频还没传完，连接就断开了。。。有办法提高一下上传速度嘛？
@user-ht1qg9xn3ra 7 ай бұрын
为什么转换会自动中断？再运行又转换一段，但还是不会完全转换。
@JohnYFSu 3 ай бұрын
請問張老師,我安裝使用了,也跑完轉換,但是點擊檔案或刷新,並沒有出現產出的那幾種格式的文件,不知道我哪裡出問題?
@qiang2023 Ай бұрын
使用这个翻译更好些 !whisper "文件名（需要替换）.mp3" --model large-v3
@qiang2023 Ай бұрын
不能离线翻译
@ckpoon5885 6 ай бұрын
Excellent
@fangliu1369 2 ай бұрын
感谢 这个可不可以远程帮忙安装❤
@plusalice3240 3 ай бұрын
請問 這有辦法讓轉錄出的文字 自動區分對象嗎? 例如 :A說了什麼 B說了什麼 這樣~
@David-fc1sq 7 ай бұрын
一直有一个问题不知道怎么解决 语音识别后都是一行一行的短句子，没有标点符号 有什么办法可以自动形成自然段的文章
@brentjones2802 19 күн бұрын
技術大牛👍
@lincui1515 5 ай бұрын
你好，请问如何将韩语语音转换成文字？谢谢 😀
@veruscrt 7 ай бұрын
订阅+点赞
@lingordon1670 7 ай бұрын
感謝老張，但是語音時間好像有限制，不知道是不是我的問題
@barry2663 Ай бұрын
想請問她有限制翻譯多少時間的音檔、或是能翻譯幾行?
@lucasma387 2 ай бұрын
请问我阿拉伯语音频转文字，出来的字幕文件是乱码呢？不支持阿拉伯语吗？
@mikeaha2883 4 ай бұрын
/bin/bash: line 1: whisper: command not found 根本不行啊！！！ 这里大家如何操作的呢 ？？？
@staffonlyu Ай бұрын
太屌了
@gbchhb5289 7 ай бұрын
为什么我使用第二段代码后提示：/bin/bash: line 1: whisper: command not found
@inphd 3 ай бұрын
The uploaded file needs to be renamed. Add a space bar to the changed name to separate it.
@user-ob5qk3rt1c 7 ай бұрын
这都是用多媒体文件进行识别，有没有实时语言识别的方案？
@yongjli5910 5 ай бұрын
因为whisperDESK的本地应用老的GPU不支持，这个在线的应用老电脑也可以使用，准确度挺高的
@zouwen99 7 ай бұрын
太感谢了，请问有没有文字转自己风格语音的方案？
@jasonzhangxiancity 7 ай бұрын
目前有微软 OpenAI 阿里云 minimax elevenlabs 各种各样的应用。问这个问题的人很多，看来我需要专门做一个视频介绍一下了
@user-rx4sh9ut3m 7 ай бұрын
@@jasonzhangxiancity 期待，感谢
@candyhuang7659 5 ай бұрын
第二行运行提示command not found
@kongfu2884 5 ай бұрын
如何实现英文到中文的翻译，谢谢😂
@user-es3po9jo5y 2 ай бұрын
去到程式碼部分就係失敗。如何把MP4成功套用?
@YunfangJia 3 ай бұрын
如果音频里有中文和英文，可以同时识别出来么
@0925zhu Ай бұрын
請問這個有檔案大小限制嗎 會突然停止 有甚麼方法繼續運作
@gloria9928 Ай бұрын
請問如果是英文語音，可以翻譯轉成中文嗎？
@user-of6fx7ll6l 6 ай бұрын
怎么粘贴不了呢
@user-ud9zg1lq2t Ай бұрын
牛逼
@ekkoyung1409 5 ай бұрын
最屌最干货的教学
@wangming8272 4 ай бұрын
确实很好，不过面的Disk 50.43 GB available 是什么 ，不会用满就没了吧
@solyhe1635 10 күн бұрын
请问大佬，如何将英文字幕转为中文或其他？谢谢
@user-mv2xr5me4o 6 ай бұрын
請問語音導出的簡體怎麼改成繁體？ 一開始語音導出的文字是繁體沒問題，但再繼續使用就變簡體了，要去哪個選項改回來呢？
@jasonzhangxiancity 6 ай бұрын
Whisper 并没有区分简体繁体只有中文一个识别选项。不过可以语言示例的方法解决这个问题。 在使用 第二句命令代码 !whisper "文件名.wav" --model medium 时，加上这句命令 --initial_prompt "以下是普通話的句子" 在这个命令 --initial_prompt "以下是普通話的句子" 当中， 当你使用繁体时，注意 普通“话 ”在繁体中的写法是“話” 这就是定义繁体和简体的关键。
@user-mv2xr5me4o 6 ай бұрын
@@jasonzhangxiancity 好嘞，謝謝老張教學，立馬試試，
@CanDoSo_org 4 ай бұрын
谢谢老师，有没有类似文字转语音的呀？
@user-bt5gp4es6r 3 ай бұрын
Azure的文字转语音
@5411EAN Ай бұрын
張老師我輸入第二行代碼它反饋給我是/bin/bash: line 1: whisper: command not found 請問我是哪邊出錯了MP3.MP4檔案都試過了一樣，有空勞煩您解惑謝謝
@jasonzhangxiancity Ай бұрын
请严格使用代码，检查是否多个空格，标点符号很重要
@sir6150 3 ай бұрын
請問怎麼翻譯成日文
@user-ny1go1im9h 7 ай бұрын
试了下1.4g音频文件行翻译有问题
@SongLi-fg8eo Ай бұрын
你好，請問英文的音檔如何翻譯成中文？
@mikeaha2883 4 ай бұрын
/bin/bash: line 1: whisper: command not found 根本不行啊！！！ youtube的m4a格式语音显示不行。
@MEICHENGHOI Ай бұрын
那你可以先將m4a先轉成mp3，再重覆影片中的步驟，就會成功了！
@user-td7og4oc6d 4 ай бұрын
我转录了5个语音软件，第6个就不行了，是每天免费5个吗？
@user-bn8qy4uf8k 6 ай бұрын
/bin/bash: line 1: whisper: command not found 请问老师一 启动翻译提示这个错误，是什么问题
@Evan-Explores 4 ай бұрын
这个是需要重新部署第一步骤， 因为这个是免费的，你关闭窗口它就清楚数据了。
@kaylayan5658 3 ай бұрын
视频文件没有处理成功呢
@michaelben4832 4 ай бұрын
太棒的教學了！ 我想要捐款給你
@user-pu3zv6zz9e 2 ай бұрын
请问张老师，一次转写多个文件的命令是什么？谢谢分享!
@user-pu3zv6zz9e 2 ай бұрын
少数短时视频添加字幕还可以，批量添加字幕要控制好视频个数和总时长及时下载，否则进行时会不定时自动关闭并清空全部数据。而且添加中文字幕的质量也并没有预期高和剪映差不多吧，但是剪映不能使用命令批量执行需要单个手动添加，可是whisper时间分配不好会整屏字幕。
@kongshanlengyue 7 ай бұрын
谢谢老张，我在Google Colaboratory中使用非常慢，可以在本地部署吗？
@jasonzhangxiancity 7 ай бұрын
可以 只要你的本地显卡足够好
@user-jc7zo9en2m 5 ай бұрын
每次都需要执行第一行打码和第二行代码，才能用，有木有别的办法。每次执行新的翻译，都需要下载一次模型信息，要2g左右，都是这样的吗？
@jasonzhangxiancity 4 ай бұрын
新年快乐。 我们一般使用的都是google colab提供的是免费的虚拟机。会自动清空虚拟机中的内容，在使用时，需要再次执行一次。如果使用它付费的虚拟机，则不需要。
@cooltechcooltech5184 2 ай бұрын
老师你好 请问这套版本適合在MACBOOK上运行吗？
@jasonzhangxiancity 2 ай бұрын
这是网站 和系统没有关系
@kingJ-qn5qi Ай бұрын
为什么会转换不完整？总是漏一段一段的，准确度还是挺高的
@WUQINGLI 25 күн бұрын
为什么上传文件过程中虚拟机会断开一下然后重新连接，文件老是上传不完整
@user-pv1rr2pj2o 3 ай бұрын
输入第二行代码需要订阅收费才可以使用呀。怎么解决免费
@misuyai2901 16 күн бұрын
成功了 可怎么转成中文呢 我是英文视频 现在用你的方法有英文字幕了 可是同时有中文的可以弄吗
@Yourcar18 5 ай бұрын
您好，如何把英文内容转换成中文呢？
@user-kg5qh7sv7n Ай бұрын
请问，这个只能识别中文且翻译为英文吗？其它语言是不行的？我用的是日语档，发现识别不了，如果是自己误操作，我再看看
@jasonzhangxiancity Ай бұрын
多语言识别的。注意代码的标点符号，包括空格。 最终翻译只支持为英文
@WUQINGLI Ай бұрын
每次打开还需重复输入代码吗
@user-gi2de9uo5s 7 ай бұрын
如果是用文字转语音的代码因该是什么。这个程序是不是有一个逆向的程序。期待你的回复
@jasonzhangxiancity 7 ай бұрын
Whisper 只是一个语音转写模型 Speech to text， 最近OpenAI 也开放了它的文字转语音模型接口。具体使用，我这两天会做视频详细介绍的
@iheytom Ай бұрын
这个没有声纹分辨，对会议记录来说有缺陷的，就是分不清主次。
@Yannis-yg2uv 25 күн бұрын
张老师，您好，我有一个问题，就是whisper app里有可以选择语言类型的选项，请问如果我想在代码里制定转录语音类型，比如中文，这个代码应该怎么写，放哪里呢？非常感谢
@jasonzhangxiancity 22 күн бұрын
默认是自动识别的。当然也可以自定义指定。不过当你指定了之后，会出现一些问题。比如如果直接指定为中文，那么中文当中出现的英文单词可能会识别错误。所以我的建议是自动识别语言模式最好。指定语言的代码为 language="zh" 英语 (English): en 中文 (Chinese): zh 日语 (Japanese): ja 韩语 (Korean): ko 西班牙语 (Spanish): es 法语 (French): fr
@Yannis-yg2uv Сағат бұрын
@@jasonzhangxiancity 好滴，谢谢张老师！
@kuku-kl5ng 7 ай бұрын
银河录像局 共享的账号是可以同时登入一个账号？ 还是有人使用就登入不上呢
@jasonzhangxiancity 7 ай бұрын
可以同时登入。所以还地说，还是华人办法多🤣
@YuChi29 4 ай бұрын
您好！如果想把Cantonese翻譯成中文，代碼要用哪個？謝謝
@jasonzhangxiancity 4 ай бұрын
whisper 支持的是多语言的转写，但是目标翻译语言只支持英文。 翻译建议使用 Chatgpt，gpt是最好的翻译工具
@tina6000 7 ай бұрын
请问whisper有没有把不同说话人标注出来的能力
@jasonzhangxiancity 7 ай бұрын
试试这个kzfaq.info/get/bejne/oZeqft2buM3Jlqs.html
@chaochiwu9930 4 ай бұрын
非常棒謝謝 但语音识别后，直接翻译为 ' 中文'如下 !whisper "文件名（需要替换）.mp3" --model medium --task translate????? ?如何修改
@jasonzhangxiancity 3 ай бұрын
whisper目前只支持其他语言翻译为英文。 如果要翻译为中文。将英文文件交给Chatgpt是最好的选择。毕竟ChatGPT是职业干翻译的
@user-mh3ms3mh6r Ай бұрын
@@jasonzhangxiancity大佬有一个问题，chatGPT有文字输入限制，我生成的视频都是半小时的字幕，chatGPT翻译字幕不能完全翻译，只能50多条，claude翻译也是有文字限制无非就是比GPT多点，我生成的字幕600多条时间轴，有什么好办法解决不求教了，谢谢
@user-mh3ms3mh6r Ай бұрын
@@jasonzhangxiancity我也查到有那种网页翻译的，但是专业词汇，那种网页翻译的字幕效果不好
@jasonzhangxiancity Ай бұрын
@@user-mh3ms3mh6r 试试国产的kimi 免费的 上下文限制不多。
@user-mh3ms3mh6r Ай бұрын
@@jasonzhangxiancity 谢谢，我找到一个翻译字幕的网址很不错已解决感谢大佬回复
@eva9300 Ай бұрын
您好 不好意思 想清問 我按照您的步驟去做，但第二個代碼輸入完後，卻還是跑出代碼，而沒出現我檔案的內容，想清問是哪出錯了呢?
@jasonzhangxiancity Ай бұрын
检查代码的正确性。例如，标点符号，空格。 代码格式是很重要的
@LINLIN88888 6 ай бұрын
有免费的AI，英文翻译成中文的解决方案吗？ AI翻译太贵了。
@jianyugao995 2 ай бұрын
为什么所有人都不说音频文件的时间限制
@user-pv1rr2pj2o 3 ай бұрын
需要订阅怎么处理呀
@user-of6fx7ll6l 6 ай бұрын
现在用不了上面的代码了吗
@allanwang950 5 ай бұрын
我使用第二段代码后提示：/bin/bash: line 1: whisper: command not found. 是不是以后需要付费？我看还有几个人有同样的问题。
@jxzhou6645 4 ай бұрын
同样的问题
@allanwang950 4 ай бұрын
才发现我可能做错了，每次都重新运行全部两行代码，问题解决了。
@HelloWilliam2007 7 ай бұрын
感谢感谢，成功实施！！超级棒！！！！UP主有心了！视频也收藏啦！！真棒！
@user-oy6tz2dp5u 6 ай бұрын
英语翻译成中文代码咋写？不吝赐教
@jasonzhangxiancity 6 ай бұрын
whisper 一个语音转文字的应用。目前支持多国语言的语音转文字，但是只支持将其他语言翻译为英文。 英文翻译中文，建议直接使用ChatGPT.
@user-oy6tz2dp5u 6 ай бұрын
@@jasonzhangxiancity 感谢
@WanderlustWonderland 21 күн бұрын
关闭重新打开使用，不知为啥显示/bin/bash: line 1: whisper: command not found,文件名也没有错，不知是哪出错了
@WanderlustWonderland 21 күн бұрын
然后我添加了第一条指令，重新安装了whsiper，就可以了，是不是每次使用都要先使用第一条指令
@WUQINGLI 25 күн бұрын
上传文件过程中出现代码程序断开连接
@user-eg9du5ce5z 4 ай бұрын
老师请问出现：這五種鯊魚你不能不認識！vocal.mp3: No such file or directory 是什麽问题?
@jasonzhangxiancity 3 ай бұрын
文件名格式和你上传的文件不相符。另外建议上传时，将文件名改为英文，这样一般不容易出错
@jonah3996 4 ай бұрын
/bin/bash: line 1: whisper: command not found 执行第二行代码，出现这个错误怎么办？
@jasonzhangxiancity 3 ай бұрын
格式不对，严格按照我提供的命令。有的时候，多一个空格，或者逗号都会有问题。
@S.Golden 28 күн бұрын
Mp4 是不能。:(
泛科學院
Рет қаралды 22 М.