隨著人工智能技術和語音大模型應用的發展，AI聲音濫用現象愈發突出，不時引發爭議。
親耳聽到的就是真的嗎？未必。網絡平臺上，AI聲音隨處可見。
從“張文宏醫生”推銷蛋白棒視頻“走紅”網絡，后被本人“打假”，到多位配音演員稱聲音被AI“偷走”，公開維權……記者調查發現，隨著人工智能技術和語音大模型應用的發展，AI合成聲音App大量出現，最快只需十幾秒便可“克隆”出來。與此同時，AI聲音濫用現象愈發突出，不時引發爭議。
AI聲音濫用不時發生
記者在某短視頻平臺以“AI克隆聲音”為關鍵詞檢索發現，明星翻唱、新聞播報、吐槽點評等大量視頻涉及AI聲音，有些甚至出現不雅詞匯，不少視頻點贊和評論量過千。
而AI聲音濫用事件也不時發生，引發關注和討論。
在社交平臺上，通過AI模仿惡搞各領域名人的音視頻不在少數。此前，短視頻平臺涌現了大量AI模仿某知名企業家聲音吐槽堵車、調休、游戲等熱門話題的視頻，個別視頻甚至還有臟話出現，一度登上熱搜。該企業家隨后發視頻回應稱：“相關事件的確讓自己挺困擾，也挺不舒服，希望大家都不要‘玩’了。”
一些商家在短視頻平臺帶貨時，通過AI模仿聲音技術將主播“變”為知名女明星、知名醫生，銷售服裝、保健品等相關產品，對消費者造成了嚴重誤導。國家傳染病醫學中心主任、復旦大學附屬華山醫院感染科主任張文宏接受媒體采訪時表示，通過語音合成來模仿他的聲音進行直播帶貨，這樣的賬號“不止一個，且一直在變”，他多次向平臺投訴但屢禁不絕。
胖東來創始人于東來的聲音也曾頻遭AI模仿，相關平臺出現了大量與事實不符的合成視頻。胖東來商貿集團為此發布聲明稱，多個賬號未經授權擅自利用AI技術手段生成于東來的聲音，加入誤導性文案，對公眾造成誤導和混淆。
記者了解到，有不法分子通過“AI換聲”仿冒一位老人的孫子，以“打人須賠償，否則要坐牢”為由，詐騙老人2萬元。類似的詐騙案件在全國已發生多起，有的詐騙金額達到上百萬元。
中國社會科學院大學互聯網法治研究中心主任劉曉春表示，在未經過授權、未進行標注的情況下，用他人聲音制作AI語音產品，尤其是“借用”公眾人物的聲音，很容易引起誤解，不僅會侵害個人信息安全，還可能擾亂網絡空間生態和秩序。
聲音是如何被“偷”走的？
AI如何生成以假亂真的聲音？受訪專家介紹，AI能夠“克隆”聲音，主要是依靠深度學習算法，即短時間內從采集的聲音樣本中提取關鍵特征，包括頻率、音色、聲調、語速、情感等，將這些特征記錄為數學模型，再通過算法合成。
中國科學院自動化研究所模式識別實驗室工程師牛少東說，隨著算法越來越先進，在高性能設備和高精度模型的加持下，AI生成的語音內容從兩年前的“一眼假”升級到如今的“真假難辨”。
大四學生耿孝存最近經常在網絡音樂播放器中收聽幾首翻唱歌曲，他一直以為這些歌曲由某知名女歌手翻唱，后來才得知其實全部是AI合成的。“聲音逼真到我從來沒懷疑過。”耿孝存說。
AI聲音在最近一兩年時間內變得格外“流行”。清華大學新聞與傳播學院教授沈陽說，人工智能技術的普及，讓AI模擬聲音的門檻大幅降低。通過一些開源軟件和平臺，沒有專業知識的普通用戶也能操作。
大量App能夠進行AI合成聲音，最快只需十幾秒。記者在應用商店搜索發現，相關App有數十款，下載量最高超千萬次。
記者聯系了一款App的客服人員，對方表示，花198元就能解鎖付費會員，對著鏡頭說幾遍“12345”，AI就會根據聲音生成各類內容的出鏡口播視頻。記者操作后發現，通過這款軟件生成的名人聲音，基本可以以假亂真，且錄入名人聲音不需要提供任何授權證明。
業內人士告訴記者，AI模擬人聲在互聯網“流行”，有追逐流量和變現的目的。通過“克隆”名人聲音制作的惡搞、獵奇類視頻，在相關平臺播放和點贊量均不低，有的甚至還被推上熱搜。發布者也相應獲得流量曝光、粉絲增長、廣告收入等播放收益。
此外，“偷”人聲音也有不法利益驅動。國家金融監管總局2024年7月發布的《關于防范新型電信網絡詐騙的風險提示》中提到，不法分子可能對明星、專家、執法人員等音視頻進行人工合成，假借其身份傳播虛假消息，從而實現詐騙目的。
多措并舉強化治理
用AI生成他人聲音，是否違法違規？多位受訪專家表示，個人聲音中包含的聲紋信息具備可識別性，能以電子方式記錄，能關聯到唯一自然人，是生物識別信息，屬于個人信息保護法規定的敏感個人信息之一。
2024年4月，北京互聯網法院宣判全國首例“AI聲音侵權案”，明確認定在具備可識別性的前提下，自然人聲音權益的保護范圍可及于AI生成聲音。該法院法官認為，未經權利人許可，擅自使用或許可他人使用錄音制品中的聲音構成侵權。
近年來，有關主管部門出臺《人工智能生成合成內容標識辦法（征求意見稿）》《互聯網信息服務深度合成管理規定》《生成式人工智能服務管理暫行辦法》等規定，一定程度上給AI技術使用劃定了紅線。
沈陽等專家認為，關于人工智能應用產生的造謠侵權、刑事犯罪、道德倫理等問題，建議有關部門細化完善相關規則，通過典型案例、司法解釋等方式給予更為明確的規范指引，厘清法律法規邊界。
中國科學院科技戰略咨詢研究院院長潘教峰認為，需進一步強化人工智能倫理規制，超前部署人工智能風險研究，提前預判人工智能技術應用可能帶來的社會影響。
2024年12月，廣電總局網絡視聽司發布《管理提示（AI魔改）》，要求嚴格落實生成式人工智能內容審核要求，對在平臺上使用、傳播的各類相關技術產品嚴格準入和監看，對AI生成內容做出顯著提示。
多位專家表示，各類社交網絡、短視頻平臺要強化主動監管意識，及時發現、處理可能涉及侵權的AI生成作品；相關部門應繼續加大對利用AI技術進行詐騙等違法犯罪行為的打擊力度，形成更加完善的常態化治理機制。
牛少東說，在AI時代，個人也要更加注意保護自己的生物特征信息，增強法律意識，抵制他人侵權等行為。
隨著人工智能技術和語音大模型應用的發展，AI聲音濫用現象愈發突出，不時引發爭議。
親耳聽到的就是真的嗎？未必。網絡平臺上，AI聲音隨處可見。
從“張文宏醫生”推銷蛋白棒視頻“走紅”網絡，后被本人“打假”，到多位配音演員稱聲音被AI“偷走”，公開維權……記者調查發現，隨著人工智能技術和語音大模型應用的發展，AI合成聲音App大量出現，最快只需十幾秒便可“克隆”出來。與此同時，AI聲音濫用現象愈發突出，不時引發爭議。
AI聲音濫用不時發生
記者在某短視頻平臺以“AI克隆聲音”為關鍵詞檢索發現，明星翻唱、新聞播報、吐槽點評等大量視頻涉及AI聲音，有些甚至出現不雅詞匯，不少視頻點贊和評論量過千。
而AI聲音濫用事件也不時發生，引發關注和討論。
在社交平臺上，通過AI模仿惡搞各領域名人的音視頻不在少數。此前，短視頻平臺涌現了大量AI模仿某知名企業家聲音吐槽堵車、調休、游戲等熱門話題的視頻，個別視頻甚至還有臟話出現，一度登上熱搜。該企業家隨后發視頻回應稱：“相關事件的確讓自己挺困擾，也挺不舒服，希望大家都不要‘玩’了。”
一些商家在短視頻平臺帶貨時，通過AI模仿聲音技術將主播“變”為知名女明星、知名醫生，銷售服裝、保健品等相關產品，對消費者造成了嚴重誤導。國家傳染病醫學中心主任、復旦大學附屬華山醫院感染科主任張文宏接受媒體采訪時表示，通過語音合成來模仿他的聲音進行直播帶貨，這樣的賬號“不止一個，且一直在變”，他多次向平臺投訴但屢禁不絕。
胖東來創始人于東來的聲音也曾頻遭AI模仿，相關平臺出現了大量與事實不符的合成視頻。胖東來商貿集團為此發布聲明稱，多個賬號未經授權擅自利用AI技術手段生成于東來的聲音，加入誤導性文案，對公眾造成誤導和混淆。
記者了解到，有不法分子通過“AI換聲”仿冒一位老人的孫子，以“打人須賠償，否則要坐牢”為由，詐騙老人2萬元。類似的詐騙案件在全國已發生多起，有的詐騙金額達到上百萬元。
中國社會科學院大學互聯網法治研究中心主任劉曉春表示，在未經過授權、未進行標注的情況下，用他人聲音制作AI語音產品，尤其是“借用”公眾人物的聲音，很容易引起誤解，不僅會侵害個人信息安全，還可能擾亂網絡空間生態和秩序。
聲音是如何被“偷”走的？
AI如何生成以假亂真的聲音？受訪專家介紹，AI能夠“克隆”聲音，主要是依靠深度學習算法，即短時間內從采集的聲音樣本中提取關鍵特征，包括頻率、音色、聲調、語速、情感等，將這些特征記錄為數學模型，再通過算法合成。
中國科學院自動化研究所模式識別實驗室工程師牛少東說，隨著算法越來越先進，在高性能設備和高精度模型的加持下，AI生成的語音內容從兩年前的“一眼假”升級到如今的“真假難辨”。
大四學生耿孝存最近經常在網絡音樂播放器中收聽幾首翻唱歌曲，他一直以為這些歌曲由某知名女歌手翻唱，后來才得知其實全部是AI合成的。“聲音逼真到我從來沒懷疑過。”耿孝存說。
AI聲音在最近一兩年時間內變得格外“流行”。清華大學新聞與傳播學院教授沈陽說，人工智能技術的普及，讓AI模擬聲音的門檻大幅降低。通過一些開源軟件和平臺，沒有專業知識的普通用戶也能操作。
大量App能夠進行AI合成聲音，最快只需十幾秒。記者在應用商店搜索發現，相關App有數十款，下載量最高超千萬次。
記者聯系了一款App的客服人員，對方表示，花198元就能解鎖付費會員，對著鏡頭說幾遍“12345”，AI就會根據聲音生成各類內容的出鏡口播視頻。記者操作后發現，通過這款軟件生成的名人聲音，基本可以以假亂真，且錄入名人聲音不需要提供任何授權證明。
業內人士告訴記者，AI模擬人聲在互聯網“流行”，有追逐流量和變現的目的。通過“克隆”名人聲音制作的惡搞、獵奇類視頻，在相關平臺播放和點贊量均不低，有的甚至還被推上熱搜。發布者也相應獲得流量曝光、粉絲增長、廣告收入等播放收益。
此外，“偷”人聲音也有不法利益驅動。國家金融監管總局2024年7月發布的《關于防范新型電信網絡詐騙的風險提示》中提到，不法分子可能對明星、專家、執法人員等音視頻進行人工合成，假借其身份傳播虛假消息，從而實現詐騙目的。
多措并舉強化治理
用AI生成他人聲音，是否違法違規？多位受訪專家表示，個人聲音中包含的聲紋信息具備可識別性，能以電子方式記錄，能關聯到唯一自然人，是生物識別信息，屬于個人信息保護法規定的敏感個人信息之一。
2024年4月，北京互聯網法院宣判全國首例“AI聲音侵權案”，明確認定在具備可識別性的前提下，自然人聲音權益的保護范圍可及于AI生成聲音。該法院法官認為，未經權利人許可，擅自使用或許可他人使用錄音制品中的聲音構成侵權。
近年來，有關主管部門出臺《人工智能生成合成內容標識辦法（征求意見稿）》《互聯網信息服務深度合成管理規定》《生成式人工智能服務管理暫行辦法》等規定，一定程度上給AI技術使用劃定了紅線。
沈陽等專家認為，關于人工智能應用產生的造謠侵權、刑事犯罪、道德倫理等問題，建議有關部門細化完善相關規則，通過典型案例、司法解釋等方式給予更為明確的規范指引，厘清法律法規邊界。
中國科學院科技戰略咨詢研究院院長潘教峰認為，需進一步強化人工智能倫理規制，超前部署人工智能風險研究，提前預判人工智能技術應用可能帶來的社會影響。
2024年12月，廣電總局網絡視聽司發布《管理提示（AI魔改）》，要求嚴格落實生成式人工智能內容審核要求，對在平臺上使用、傳播的各類相關技術產品嚴格準入和監看，對AI生成內容做出顯著提示。
多位專家表示，各類社交網絡、短視頻平臺要強化主動監管意識，及時發現、處理可能涉及侵權的AI生成作品；相關部門應繼續加大對利用AI技術進行詐騙等違法犯罪行為的打擊力度，形成更加完善的常態化治理機制。
牛少東說，在AI時代，個人也要更加注意保護自己的生物特征信息，增強法律意識，抵制他人侵權等行為。
本文鏈接：你的聲音被誰“偷”走了——AI聲音濫用現象調查http://m.lensthegame.com/show-2-10737-0.html
聲明：本網站為非營利性網站，本網頁內容由互聯網博主自發貢獻，不代表本站觀點，本站不承擔任何法律責任，僅提供存儲服務。天上不會到餡餅，請大家謹防詐騙！若有侵權等問題請及時與本網聯系，我們將在第一時間刪除處理。
上一篇： 企業新動作頻頻 加速競跑AI大模型賽道
下一篇： 補短板釋放“人工智能+”效應