新聞中心
距離 Mirco Ravanelli 宣布打造新的語音工具包過去了一年多,SpeechBrain 真的如期而至。

成都創(chuàng)新互聯(lián)公司自成立以來,一直致力于為企業(yè)提供從網(wǎng)站策劃、網(wǎng)站設(shè)計、成都網(wǎng)站制作、成都做網(wǎng)站、電子商務(wù)、網(wǎng)站推廣、網(wǎng)站優(yōu)化到為企業(yè)提供個性化軟件開發(fā)等基于互聯(lián)網(wǎng)的全面整合營銷服務(wù)。公司擁有豐富的網(wǎng)站建設(shè)和互聯(lián)網(wǎng)應(yīng)用系統(tǒng)開發(fā)管理經(jīng)驗、成熟的應(yīng)用系統(tǒng)解決方案、優(yōu)秀的網(wǎng)站開發(fā)工程師團隊及專業(yè)的網(wǎng)站設(shè)計師團隊。
語音處理技術(shù)的進步,是人工智能改變大眾的生活的重要一環(huán)。深度學(xué)習技術(shù)的興起,也讓這一領(lǐng)域近年來得到了長足的發(fā)展。在過往,該領(lǐng)域的主要方法是為不同的任務(wù)開發(fā)不同的工具包,對于使用者來說,學(xué)習各個工具包需要大量時間,還可能涉及到學(xué)習不同的編程語言,熟悉不同的代碼風格和標準等。現(xiàn)在,這些任務(wù)大多可以用深度學(xué)習技術(shù)來實現(xiàn)。
此前,開發(fā)者常用的語音工具有 Kaldi、ESPNet、CMU Sphinx、HTK 等,它們各有各的不足之處。以 Kaldi 為例,它依賴大量的腳本語言,而且核心算法使用 C++ 編寫,再加上可能需要改變各種神經(jīng)網(wǎng)絡(luò)的結(jié)構(gòu)。即便是擁有豐富經(jīng)驗的工程師,在調(diào)試的時候也會經(jīng)歷巨大的痛苦。
秉承著讓語音開發(fā)者更輕松的原則,Yoshua Bengio 團隊成員 Mirco Ravanelli 等人曾經(jīng)開發(fā)了一個試圖繼承 Kaldi 的效率和 PyTorch 的靈活性的開源框架——PyTorch-Kaldi,但據(jù)開發(fā)成員本人認為「還不夠完善」。
所以,在一年多前, Mirco Ravanelli 宣布要打造一款新的一體化語音工具包 SpeechBrain。該項目于近日正式開源,鑒于上述背景,SpeechBrain 誕生的主要宗旨是:夠簡單、夠靈活、對用戶友好。
項目地址:https://github.com/speechbrain/speechbrain
作為一個基于 PyTorch 的開源一體化語音工具包,SpeechBrain 可用于開發(fā)最新的語音技術(shù),包括語音識別、說話者識別、語音增強、多麥克風信號處理和語音識別系統(tǒng)等,且擁有相當出色的性能。團隊將其特征概況為「易于使用」、「易于定制」、「靈活」、「模塊化」等。
對于機器學(xué)習研究者來說,SpeechBrain 可輕松嵌入其他模型,促進語音技術(shù)的相關(guān)研究;對于初學(xué)者來說,SpeechBrain 也不難掌握,根據(jù)測試,一般開發(fā)者僅需要幾個小時就能熟悉該工具包的使用。此外,開發(fā)團隊也發(fā)布了很多教程以供參考(https://speechbrain.github.io/tutorial_basics.html)。
總體來說,SpeechBrain 有以下幾大亮點:
- 開發(fā)團隊與 HuggingFace 集成一些預(yù)訓(xùn)練模型,這些模型具備可運行推理的接口。如果 HuggingFace 模型不可用,團隊會提供一個 Google Drive 文件夾,包含所有對應(yīng)的實驗結(jié)果;
- 使用 PyTorch 數(shù)據(jù)并行或分布式數(shù)據(jù)并行來進行多 GPU 訓(xùn)練和推理;
- 混合精度,加快訓(xùn)練速度;
- 透明且完全可自定義的數(shù)據(jù)輸入和輸出 pipeline。SpeechBrain 遵循 PyTorch 數(shù)據(jù)加載器和數(shù)據(jù)集樣式,使用戶能夠自定義 I / O pipeline。
快速安裝
目前開發(fā)者可以通過 PyPI 安裝 SpeechBrain,此外還可以使用本地安裝來運行實驗和修改 / 自定義工具包。
SpeechBrain 支持基于 Linux 的發(fā)行版和 macOS(且針對 Windows 用戶也提供了相應(yīng)解決方案:https://github.com/speechbrain/speechbrain/issues/512)。
SpeechBrain 支持 CPU 和 GPU,但對于大多數(shù) recipe 而言,訓(xùn)練期間必須使用 GPU。需要注意的是,必須正確安裝 CUDA 才能使用 GPU。
安裝教程地址:https://speechbrain.readthedocs.io/en/latest/installation.html
通過 PyPI 安裝
創(chuàng)建 Python 環(huán)境后,只需輸入以下內(nèi)容即可:
- pip install speechbrain
然后可以使用以下命令訪問 SpeechBrain:
- import speech brain as sb
本地安裝
創(chuàng)建 Python 環(huán)境后,只需輸入以下內(nèi)容即可:
- git clone https://github.com/speechbrain/speechbrain.gitcd speechbrainpip install -r requirements.txtpip install --editable .
然后可以通過以下方式訪問 SpeechBrain:
- import speechbrain as sb
對 speechbrain 軟件包所做的任何修改,將在安裝帶有 --editable 標志的軟件包時自動解釋。
SpeechBrain 未附屬于任何機構(gòu),團隊成員來自 Mila 研究所、Nuance、杜比實驗室、英偉達、三星、Viadialog 等實驗室和企業(yè)單位。最初的兩位負責人是 Mila 研究所博士后 Mirco Ravanelli 和 Avignon 博士生 Titouan Parcollet。目前,Speechbrain 項目還在完善中,也歡迎更多開發(fā)人員加入。
看到這里,Kaldi 會不會感到壓力有點大了呢?
文章名稱:純PyTorch語音工具包開源,Kaldi:我壓力有點大
文章鏈接:http://www.dlmjj.cn/article/dghheie.html


咨詢
建站咨詢
