近日,”2020(秋季)亞洲藍(lán)牙耳機(jī)展”在深圳市科興科學(xué)園圓滿落幕。作為音頻行業(yè)中有著極好形象和強(qiáng)大影響力的活動(dòng),本次展會(huì)現(xiàn)場匯聚14位重量級(jí)嘉賓演講和近百家企業(yè)參展,吸引了包括產(chǎn)業(yè)鏈優(yōu)質(zhì)供應(yīng)商、服務(wù)商、采購商,和音頻發(fā)燒友、聲學(xué)工程師、芯片工程師、行業(yè)從業(yè)人員等數(shù)千名觀眾。
其中,智能聽覺的引領(lǐng)者——聲加科技,攜其喚醒麥克風(fēng)陣列模組、環(huán)形麥克風(fēng)陣列、線性麥克風(fēng)陣列等多款產(chǎn)品亮相展區(qū),吸引了現(xiàn)場大批參展觀眾的交流互動(dòng)。
聲加科技CEO邱鋒海的主題分享
同時(shí),在上午的嘉賓分享中,聲加科技CEO邱鋒海以《AI + DSP助力TWS體驗(yàn)提升》為題,介紹了聲加團(tuán)隊(duì)從傳統(tǒng)的數(shù)字信號(hào)處理,到后來用深度網(wǎng)絡(luò)技術(shù)來做整體性能的提升,取得的一些成果和案例,并期待TWS耳機(jī)所有的從業(yè)者不斷的去思考和提升,如何把產(chǎn)品做到讓用戶獲得最佳的體驗(yàn)。
TWS市場及功能演進(jìn):從“明星產(chǎn)品”到“全廠商布局” 從“基礎(chǔ)功能”到“多元化應(yīng)用”
近兩年來,以Airpods為代表的TWS耳機(jī)產(chǎn)品呈現(xiàn)爆發(fā)增長,在蘋果、索尼等頭部公司完成市場開拓之后,眾多廠商也積極跟隨布局,整體市場有望持續(xù)快速增長。同時(shí),包括智能終端無線化趨勢(shì)、藍(lán)牙技術(shù)、芯片技術(shù)的不斷提升,也將進(jìn)一步加快TWS無線耳機(jī)的產(chǎn)品普及。
邱鋒海表示,面對(duì)TWS耳機(jī)在電子產(chǎn)業(yè)中的快速增長,聲加科技從傳統(tǒng)的數(shù)字信號(hào)處理,到后來用深度網(wǎng)絡(luò)來做整個(gè)性能的提升,都取得了一些成果,同時(shí)也要繼續(xù)解決更多的問題。“總體而言,整個(gè)TWS到現(xiàn)在為止,并沒有達(dá)到我們所期待的‘非常極致的體驗(yàn)’,這樣需要我們所有的從業(yè)者不斷的去思考、去提升,如何把產(chǎn)品做到讓大家能體驗(yàn)到更好的狀態(tài)。”
從產(chǎn)品的功能端來看,據(jù)邱鋒海觀察,過去的一兩年,業(yè)界主要關(guān)注點(diǎn)依然集中在基礎(chǔ)功能上:包括佩戴舒適性、低延遲、雙耳接受、音質(zhì)等方面;到了今年,TWS已不僅僅關(guān)注在可用性上,通話降噪(ENC)、主動(dòng)降噪ANC功能的加入使得TWS開始朝向好用發(fā)展;而在未來,隨著智能化的發(fā)展,供應(yīng)鏈的補(bǔ)充,例如傳感器等技術(shù)的發(fā)展。語音交互(AOV)、健康 (輔聽及其他)等功能也將會(huì)在TWS耳機(jī)上應(yīng)用。
從單麥、雙麥到三麥、四麥 聲加科技要做可懂、自然、舒適的TWS
聲加科技成立于2018年1月,經(jīng)過兩年多的發(fā)展,目前除了在通話降噪的技術(shù)層面取得了一些突破,也得到了各“大廠”的青睞,擁有十?dāng)?shù)個(gè)應(yīng)用案例和明星產(chǎn)品。據(jù)邱鋒海介紹,首先業(yè)界最早使用的單麥克風(fēng),從技術(shù)上來講,確實(shí)是無論怎樣描述都擺脫不了區(qū)分語音和噪聲的架構(gòu)。由于傳統(tǒng)的DNN處理,是用人去統(tǒng)計(jì)噪聲和語音系統(tǒng),在一些檢測系統(tǒng)或者深度系統(tǒng)上,建立非解析、非線性的連接,從而把噪聲估計(jì)得更加可靠,更加接近真實(shí)值。
“我們做語音降噪時(shí),核心除了要達(dá)到客觀指標(biāo)以外,考慮更多的是主觀體驗(yàn)。比如語音的還原度高,音色自然,然后在語音的平穩(wěn)度和噪聲的平穩(wěn)度上,找到平衡點(diǎn)。總結(jié)一下就是要做到可懂度、自然度和舒適度!
聲加部分產(chǎn)品展示和應(yīng)用案例
也因此,由于單麥的限制,目前業(yè)界大多都在做雙麥克風(fēng)方案。雙麥提供聲源空間信息,能通過空間濾波完成特定方向聲源的提取或抑制,無失真濾除噪聲。但是,在信噪比很低的情況下,該方案一定會(huì)出現(xiàn)語音的distortion(失真),影響通話體驗(yàn);谝陨弦蛩兀^去一年多,聲加科技開發(fā)了3麥克風(fēng)的方案,用骨導(dǎo)麥信號(hào)增強(qiáng)氣導(dǎo)麥效果。還做了一個(gè)4麥克風(fēng)陣列,它可以利用不同的口徑,和風(fēng)來自不同方向去做語音的增強(qiáng)。
風(fēng)噪和極端場景下的技術(shù)思考:半適應(yīng)、自適應(yīng)、主動(dòng)降噪、通話降噪……
隨后,邱鋒海分享了聲加團(tuán)隊(duì)的技術(shù)研發(fā)路徑。比如在做通話語音增強(qiáng)時(shí),發(fā)現(xiàn)通話和ANC混合在一起。而改變ANC的方式,是通過風(fēng)的方向控制前饋,偵測風(fēng)的大小,風(fēng)越大閘門關(guān)得太小,風(fēng)不會(huì)進(jìn)到用戶的通話里去。從ANC來講,則要把反饋通道貢獻(xiàn)加強(qiáng),把前饋通道慢慢弱化。另外像semi—adaptive(半自適應(yīng)的),聲加會(huì)利用麥克風(fēng)去甄別用戶的使用場景,然后用adaptive(自適應(yīng)的)的方法去做一些補(bǔ)償。
另外,邱鋒海也思考了在很多極端場景下,語音喚醒的耳機(jī)基本上無法使用的問題。比如外面的麥克風(fēng)已經(jīng)飽和,即便做語音增強(qiáng)也做不到完整拾音。那是不是可以考慮G-sensor和內(nèi)耳麥?但是G-sensor和內(nèi)耳麥需要對(duì)拾取到的信號(hào)進(jìn)行調(diào)整,這些也都需要做更深層次的研究,才能為語音交互帶來更好的體驗(yàn)。
展望與挑戰(zhàn):從小型化到智能化、個(gè)性化 聲加科技要讓耳機(jī)“更懂你”
關(guān)于展望和挑戰(zhàn),邱鋒海認(rèn)為,首先看產(chǎn)品形態(tài),其實(shí)聲加科技目前已經(jīng)接觸了很多的廠商,入耳式耳機(jī),堵耳,不舒適,但是低頻的聽感很好;半入耳式不堵耳,舒適,但是低頻的聽感不好,那未來的產(chǎn)品是什么樣的呢?
關(guān)于TWS未來之路的部分展望
再從耳機(jī)的功能上來講,芯片也能做到在同樣的功耗下的算力迅速增長。而隨著智能化的發(fā)展,和未來各種傳感器械的進(jìn)步,耳機(jī)將更個(gè)性化,做到更懂用戶。比如可以對(duì)用戶的生理特征和行為不斷得去識(shí)別,滿足用戶的使用習(xí)慣。
最后,在TWS獨(dú)立性方面,邱鋒海表示,手機(jī)廠商認(rèn)為,未來TWS耳機(jī)一定是跟手機(jī)連在一起的:以手機(jī)為個(gè)人的信息中心,去建立一套運(yùn)算體系;但同時(shí)很多音頻廠商則認(rèn)為:耳機(jī)有非常多的不同偏好,完全有可能獨(dú)立存在;更有甚者,已有芯片公司在做非常低功耗的wifi和藍(lán)牙的組合,只需要自動(dòng)接入wifi系統(tǒng),即可實(shí)現(xiàn)對(duì)智能家庭中各設(shè)備的控制。
更清晰、更舒適、更自由:最終實(shí)現(xiàn)人機(jī)完全交融
據(jù)了解,聲加科技專注于通信聲學(xué)核心技術(shù),成立以來已先后通過中關(guān)村高新技術(shù)企業(yè)認(rèn)證和國家高新技術(shù)企業(yè)認(rèn)證,為B端客戶提供復(fù)雜場景下的近場、中場、遠(yuǎn)場語音交互技術(shù)方案,以及從芯片、模組、PCBA到工業(yè)設(shè)計(jì)的一站式產(chǎn)品方案。其團(tuán)隊(duì)中既有研究界的執(zhí)牛耳者、亦有在工業(yè)及音頻領(lǐng)域有著豐富經(jīng)驗(yàn)的職業(yè)經(jīng)理人。主要研發(fā)人員來自于中科院聲學(xué)所、清華大學(xué)、南京大學(xué)和中國科學(xué)技術(shù)大學(xué)等國內(nèi)一流科研院所。核心團(tuán)隊(duì)成員亦大多師出于中科院聲學(xué)所,平均在業(yè)界擁有超過十五年工作經(jīng)驗(yàn)。
憑借在聲學(xué)和語音領(lǐng)域的十余年的技術(shù)積累,其回聲抵消、噪聲抑制、聲源定位、混響消除、波束形成、語音喚醒等核心技術(shù)在行業(yè)內(nèi)一直處于領(lǐng)先水平。合作伙伴包括華為、小米、OPPO、萬魔、歌爾、搜狗、科沃斯、Harman、Anker、恒玄、通力、安特信、科奈信等數(shù)十家知名企業(yè)。先后以多項(xiàng)前沿技術(shù)和國際領(lǐng)先的解決方案,賦能支持了包括華為和榮耀TWS耳機(jī)、小米TWS耳機(jī)、OPPO TWS耳機(jī)、華為藍(lán)牙音箱等通信產(chǎn)品和智能穿戴產(chǎn)品,已授權(quán)終端設(shè)備超千萬臺(tái)。