three sheeps에서 루 씨의 녹음 ai를 구축할 수 있나요? 내 대답은: 물론이다.
2024-09-27
한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina
오늘 아침 이른 시간에 n명의 분들이 사진을 보내주셨고, 경찰에서 신고했다고 하시고, '양 세 마리' 녹화본이 ai인지 어떻게 알 수 있느냐고 문의하셨습니다.몇몇 친구들은 중국에서 ai 1위라고 주장하는 사람이 있다고 말했습니다. 그는 이전에 이 녹음은 ai가 만들 수 없으며 ai가 만들 수 없다고 맹세했습니다. 그렇다면 이 보고서 뒤에 음모론이 있을 수 있을까요?중국 최초의 ai는 누구일까요? 나의 첫 번째 반응은 학자들도 그런 지루한 일에 참여하는 것을 중단했다는 것이었습니다.과학을 대중화하는 것이 필요하다고 생각합니다. 즉, ai가 산양루의 기록 수준을 달성할 수 있을까요?나는 당신에게 명확한 대답을 드릴 수 있습니다. 그렇습니다.양 세 마리와 심바는 서로 싸우고, 앞뒤로 뒤섞이면서 아주 활기차게 지내고 있었습니다.그러다가 소동이 최고조에 달했을 때 쓰리쉽(three sheep) 회장 루웬칭(lu wenqing)의 폭발적인 녹음물이 인터넷을 통해 입소문을 탔다.
이렇습니다. 일부 컷도 만들었고, 음란한 부분도 침묵시켰습니다.
내용은 폭발적이고 충격적이며 신빙성이 뛰어나고 충격적인 내용입니다. 권력 투쟁, 부정 행위 등이 포함되어 있습니다. 요약하면 루씨는 three sheep의 모든 여성 앵커와 부적절한 관계를 맺었다고 밝혔습니다. 그는 또한 zhang yiming이라는 이름을 짓고 그를 무시했습니다. . .아마 그런 일이 있었을 텐데, 그러자 three sheep이 그 녹음이 ai로 합성됐다고 제보했습니다.
인터넷에서 많은 논쟁이 있습니다. 대부분의 사람들이 가장 크게 이해하는 것은 ai가 이 정도 수준의 녹음을 할 수 없다는 것입니다. '국내 ai 최초'가 말했으니까.이 녹음은 정말 리얼한 것 같죠? 감정, 사투리, 소음이 있어서 실제로 두 가지 질문이 있습니다. 이 녹음은 ai가 만든 것인가요? 그리고 ai가 이 정도 수준의 기록을 달성할 수 있을까요?오늘 첫 번째 질문에 대한 답이 나왔습니다. 저는 항상 우리의 공안을 믿습니다. 또한 그들이 발표하는 보고서는 사실임을 믿습니다. 따라서 첫 번째 질문에 대한 대답은 매우 명확합니다. 그것이 바로 ai가 하는 일입니다.따라서 가장 중요한 두 번째 질문은 ai가 이러한 수준의 기록을 달성할 수 있는지 여부입니다.우선, 여기서 일부 과학을 대중화해야 합니다. ai는 광범위한 범주이고 그 하위 분류에는 많은 트랙이 있습니다.대형 언어 모델(gpt, claude, doubao 등), ai 드로잉(mj, sd, flux 등), ai 오디오(11labs, svc, gpt-sovtis, suno 등), ai 비디오(runway)가 있습니다. , keling, doubao, pixverse 등) 및 ai 3d(tripoai, meshy 등).
ai 오디오에서는 ai 생성 음악, ai 생성 음향 효과, 사운드 복제로 구분됩니다.그러니 ai가 이런 일을 할 수 있다면 openai나 chatgpt보다 더 강력하다고는 말하지 마세요. 둘은 같은 궤도에 있지 않기 때문에 비교할 수 없습니다. 말씀하신 것처럼 와, 이 세탁기는 세탁을 정말 잘합니다. 옷은 그 냉장고보다 훨씬 낫습니다. . .음성 복제는 tts(text to speech)와 svc(ai voice changing)의 두 가지 유형으로 구분됩니다.tts는 사람의 음성에 몇 초, 수십 초의 자료를 제공하여 ai 모델을 훈련한 다음 텍스트를 직접 사용하여 특정 사람의 음성 오디오의 음성 합성을 생성하는 것입니다. 이제 최고의 오픈 소스 프로젝트는 gpt-sovits입니다.。svc는 흔히 ai 시대의 음성변환기인 ai 음성변환으로 이해될 수 있다. 현재 ai 보이스 체인저 분야에는 so-vits-svc, rvc 및 ddsp의 세 가지 주요 하위 프로젝트가 있습니다.자, 이제 ai 음성 복제 분야에서 음성 위조를 달성하는 두 가지 방법이 있다는 것이 분명해졌습니다.tts 프로젝트의 장점은 데이터 요구 사항이 짧고, 오디오 자료가 5초이면 충분하며, 이후에는 텍스트만 제공하면 오디오를 생성할 수 있다는 점과 비용이 매우 저렴하다는 점입니다. 매우 빠릅니다. 하지만 단점은 감정의 상한, 멈춤, 현실감이 매우 낮다는 점이다. 수십초만 들어보면 ai맛이라는 것을 쉽게 알 수 있다.
이전에는 모두가 ai가 루 씨의 오디오 위조를 할 수 없다고 생각했습니다. 그들은 모두 tts에 대한 선입견을 갖고 있었고 tts로 만들어야 한다고 생각했습니다.
솔직히 말하면, 제가 알고 있는 시장에 공개된 제품을 기반으로 tts가 lu 씨 수준의 오디오를 제작하는 것은 실제로 약간 어렵습니다(대기업 내부 연구소의 프로젝트는 제외).그런데 생각해보면 tts는 이걸 못하는데 svc는 어떨까?svc의 단점은 비용이 많이 든다는 것입니다. 30분 분량의 오디오 데이터 세트가 필요하며, 그 사람의 보컬 모델을 훈련하려면 몇 시간의 연금술 훈련이 필요합니다. 마지막으로 오디오를 녹음할 다른 사람을 찾은 다음 svc를 사용해야 합니다. 소리가 변경됩니다.장점은 아주 간단합니다. 화자의 감정, 멈춤, 어조, 사투리 등을 모두 담을 수 있고, 모델이 좋으면 품질의 상한선이 거의 무한대입니다. ai인지 아닌지.
노래하는 목소리도 원활하게 바뀔 수 있습니다. 말하는 목소리를 바꾸는 것은 작은 경우일 뿐입니다.지난해 큰 인기를 끌었던 ai 스테파니 선(stefanie sun)도 svc로 만들어졌다.나는 또한 svc에 관한 여러 튜토리얼을 작성했습니다.또한 svc를 사용하여 내 목소리를 변경한 후 내 목소리로 바꿨습니다.리 롱하오모델의 효과.따라서 svc를 사용하여 mr. lu의 ai 오디오 위조를 수행하는 단계는 매우 간단합니다.1. 인터넷에서 루 씨의 연설 데이터를 약 30분 정도 수집해 보면, 결국 그는 연예인이기 때문입니다.2. svc 또는 rvc를 사용하여 mr. lu의 음성을 정리하고 ai 모델로 학습시킵니다.3. lu 씨는 안칭 출신이고 허페이에는 안칭 사람들이 많습니다.그 사람과 비슷한 억양을 가진 사람을 찾아 합성할 오디오를 먼저 읽어보세요.
4. 마지막으로 svc의 ai 모델을 사용해 완성된 오디오를 그의 목소리로 대체합니다.그래도 좀 더 현실적으로 듣고 싶다면 클리핑 등을 사용하여 주변 소리를 추가하면 됩니다. 주변 소리가 너무 많으면 기존 오디오 소프트웨어로 처리할 수 있습니다. 또한 주변 소리와 함께 사용하지만 권장하지는 않습니다. . .특히 원본 영상의 방식은 녹음한 내용을 휴대폰으로 전송한 후 휴대폰에서 재생하고, 다른 휴대폰을 이용해 녹음하는 방식이 있는데, 주변 소리 자체가 많이 들리고, 배경과도 섞여서 나오는 경우가 많습니다. 친구들의 웃음소리는 엉망이다. 이것들은 모두 오프 필드 요인입니다. . .그럼 두 번째 질문으로 돌아가서, ai가 루씨처럼 위조 녹음을 할 수 있을까요? 물론 가능합니다.ai를 너무 신화적이라고 생각하지 말고, ai를 너무 쓰레기라고 생각하지 마세요.인공지능은 인공지능+지능인 경우가 많다.
현재의 tts는 감정적인 문제를 해결할 수 없는데 왜 ai가 감정을 처리해야 할까요?수동으로 낭독한 후 음색을 변경할 수는 없나요? 인공지능+지능 입니다.ai는 당신이 사용하는 보조 도구이자 보조 도구이지, 손을 대지 않는 가게 주인으로서 모든 것을 맡겨두는 것이 아닙니다.이 기술을 모든 사람에게 알리고 법을 어기고 초법적인 일을 하여 초법적 깡패가 되는 일이 없도록 이 글을 쓰고 있습니다.대신 ai 오디오에 대한 대중적인 과학을 조금이라도 하고, 정보 격차를 완화하고, 그런 기술이 있고, 상한선이 여기에 있다는 사실을 모두에게 알리고 싶습니다. ai가 가볍게 받아들일 수 없다고 생각하지 마세요. . 하지만 현재 ai가 어디까지 도달할 수 있는지, 어느 수준까지 도달할 수 있는지는 알아야 한다.
인공지능+지능의 지원으로 무엇을 할 수 있는지.과학과 기술의 발전은 되돌릴 수 없습니다. 모든 사람은 이 거대한 흐름 속에서 한 방울의 물과 같아서 앞으로 나아갈 것입니다. 아는 것이 모르는 것보다 항상 낫습니다. 자신과 적을 알아야 모든 전투에서 승리할 수 있습니다.
우리는 우리 자신을 보호하기 위해 많은 것을 배우고 ai를 배웁니다.
이제 보시고 괜찮으시다면 좋아요, 시청, 리트윗 3번 부탁드립니다. 빨리 알림 받고 싶으시다면 별점을 눌러주세요⭐ ~제 글을 읽어주셔서 감사합니다. 다음에 또 만나요.
>/ 작성자: 카지크
