主頁 >  其他 > FreeSWITCH對接vosk實作實時語音識別

FreeSWITCH對接vosk實作實時語音識別

2023-05-05 09:12:31 其他

環境:CentOS 7.6_x64 FreeSWITCH版本 :1.10.9 Python版本:3.9.2

一、背景描述

vosk是一個開源語音識別工具,可識別中文,之前介紹過python使用vosk進行中文語音識別,今天記錄下FreeSWITCH對接vosk實作實時語音識別, vosk離線語音識別可參考我之前寫的文章: python使用vosk進行中文語音識別

二、具體實作

1、編譯及安裝vosk模塊

可直接使用github上的代碼進行編譯:

https://github.com/alphacep/freeswitch.git

 這里描述下使用FreeSWITCH 1.10.9 編譯 mod_vosk 的程序,大致步驟如下:

1)將 mod_vosk 代碼復制到 freeswitch-1.10.9.-release/src/mod/asr_tts 目錄;

2)modules.conf 檔案中啟用mod_vosk模塊;

 3)生成 Makefile 檔案;

./devel-bootstrap.sh && ./configure

4) 編譯并安裝 vosk 模塊;

cd freeswitch-1.10.9.-release/src/mod/asr_tts/mod_vosk
make 
make install

fs編譯遇到問題,可參考這篇文章:CentOS7環境原始碼安裝freeswitch1.10

 2、配置 vosk 模塊

1)啟用 vosk 模塊;

編輯 autoload_configs/modules.conf.xml 檔案,啟用 vosk 模塊:

<load module="mod_vosk"/>

2)配置 conf 檔案;

將 mod_vosk/conf/vosk.conf.xml 組態檔復制到 如下路徑:

/usr/local/freeswitch/conf/autoload_configs/

修改 vosk 服務器地址:

三、運行效果

1、啟動 vosk 服務器

目錄:vosk-server\websocket

啟動命令如下:

workon py39env
python asr_server.py vosk-model-cn-0.15

運行效果如下:

具體可參考我之前寫的文章:python使用vosk進行中文語音識別

 2、實時語音識別

撰寫撥號方案:

<condition field="destination_number" expression="^123456$">
  <action application="answer"/>
  <action application="set" data="fire_asr_events=true"/>
  <action application="detect_speech" data="vosk default default"/>
  <action application="sleep" data="10000000"/>
</condition>

本地分機撥打123456進行驗證,運行效果如下:

 運行效果視頻獲取途徑:

 關注微信公眾號(聊聊博文,文末可掃碼)后回復 2023050401 獲取,

3、回鈴音識別

這里使用其它服務器配合來模擬回鈴音, fs服務器 :192.168.137.32 回鈴音服務器 :192.168.137.31 3.1 配置回鈴音服務器 核心點是使用 pre_answer 應用,設定回鈴音, 撥號方案如下:
<extension name="public_extensions">
      <condition field="destination_number" expression="^(654321)$">
        <action application="pre_answer"/>
        <action application="set" data="ringback=/usr/local/freeswitch/sounds/test/tips1.wav"/>
        <action application="transfer" data="1008 XML default"/>
      </condition>
</extension>

需要注意的是,如果回鈴音不生效,可以看下后續的撥號方案是否有替換動作, 

3.2 配置網關

網關配置資訊: 

[root@host32 conf]# cat sip_profiles/external/gw_a.xml
<include>
    <gateway name="gw_A">
        <param name="username" value="anonymous"/>
        <param name="from-user" value=""/>
        <param name="password" value=""/>
        <param name="outbound-proxy" value="192.168.137.31:5080"/>
        <param name="register-proxy" value="192.168.137.31:5080"/>
        <param name="expire-seconds" value="120"/>
        <param name="register" value="false"/>
        <param name="register-transport" value="UDP"/>
        <param name="caller-id-in-from" value="true"/>
        <param name="extension-in-contact" value="true"/>
        <variables>
          <variable name="gateway_name" value="gw_A"/>
        </variables>
    </gateway>
</include>
[root@host32 conf]#

3.3 撰寫本地撥號方案

本地撥號方案:

<condition field="destination_number" expression="^9123456$">
  <action application="bridge" data="{ignore_early_media=false,bridge_early_media=true,fire_asr_events=true,execute_on_pre_answer='detect_speech vosk default default'}sofia/gateway/gw_A/654321"/>
</condition>

本地分機撥打9123456,可聽到回鈴音,識別效果如下:

 運行效果視頻獲取途徑:

 關注微信公眾號(聊聊博文,文末可掃碼)后回復 2023050402 獲取,

四、資源下載

本文涉及原始碼及預編譯模塊二進制檔案,可以從如下途徑獲取:

關注微信公眾號(聊聊博文,文末可掃碼)后回復 20230504 獲取,

微信公眾號:

  • E-Mail : [email protected]
  • 轉載請注明出處,謝謝!

    轉載請註明出處,本文鏈接:https://www.uj5u.com/qita/551648.html

    標籤:其他

    上一篇:基于MobileNet的人臉表情識別系統(MATLAB GUI版+原理詳解)

    下一篇:返回列表

    標籤雲
    其他(158441) Python(38117) JavaScript(25399) Java(18012) C(15221) 區塊鏈(8261) C#(7972) AI(7469) 爪哇(7425) MySQL(7157) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5871) 数组(5741) R(5409) Linux(5334) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4565) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2432) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1964) Web開發(1951) HtmlCss(1931) python-3.x(1918) 弹簧靴(1913) C++(1912) xml(1889) PostgreSQL(1874) .NETCore(1857) 谷歌表格(1846) Unity3D(1843) for循环(1842)

    熱門瀏覽
    • 網閘典型架構簡述

      網閘架構一般分為兩種:三主機的三系統架構網閘和雙主機的2+1架構網閘。 三主機架構分別為內端機、外端機和仲裁機。三機無論從軟體和硬體上均各自獨立。首先從硬體上來看,三機都用各自獨立的主板、記憶體及存盤設備。從軟體上來看,三機有各自獨立的作業系統。這樣能達到完全的三機獨立。對于“2+1”系統,“2”分為 ......

      uj5u.com 2020-09-10 02:00:44 more
    • 如何從xshell上傳檔案到centos linux虛擬機里

      如何從xshell上傳檔案到centos linux虛擬機里及:虛擬機CentOs下執行 yum -y install lrzsz命令,出現錯誤:鏡像無法找到軟體包 前言 一、安裝lrzsz步驟 二、上傳檔案 三、遇到的問題及解決方案 總結 前言 提示:其實很簡單,往虛擬機上安裝一個上傳檔案的工具 ......

      uj5u.com 2020-09-10 02:00:47 more
    • 一、SQLMAP入門

      一、SQLMAP入門 1、判斷是否存在注入 sqlmap.py -u 網址/id=1 id=1不可缺少。當注入點后面的引數大于兩個時。需要加雙引號, sqlmap.py -u "網址/id=1&uid=1" 2、判斷文本中的請求是否存在注入 從文本中加載http請求,SQLMAP可以從一個文本檔案中 ......

      uj5u.com 2020-09-10 02:00:50 more
    • Metasploit 簡單使用教程

      metasploit 簡單使用教程 浩先生, 2020-08-28 16:18:25 分類專欄: kail 網路安全 linux 文章標簽: linux資訊安全 編輯 著作權 metasploit 使用教程 前言 一、Metasploit是什么? 二、準備作業 三、具體步驟 前言 Msfconsole ......

      uj5u.com 2020-09-10 02:00:53 more
    • 游戲逆向之驅動層與用戶層通訊

      驅動層代碼: #pragma once #include <ntifs.h> #define add_code CTL_CODE(FILE_DEVICE_UNKNOWN,0x800,METHOD_BUFFERED,FILE_ANY_ACCESS) /* 更多游戲逆向視頻www.yxfzedu.com ......

      uj5u.com 2020-09-10 02:00:56 more
    • 北斗電力時鐘(北斗授時服務器)讓網路資料更精準

      北斗電力時鐘(北斗授時服務器)讓網路資料更精準 北斗電力時鐘(北斗授時服務器)讓網路資料更精準 京準電子科技官微——ahjzsz 近幾年,資訊技術的得了快速發展,互聯網在逐漸普及,其在人們生活和生產中都得到了廣泛應用,并且取得了不錯的應用效果。計算機網路資訊在電力系統中的應用,一方面使電力系統的運行 ......

      uj5u.com 2020-09-10 02:01:03 more
    • 【CTF】CTFHub 技能樹 彩蛋 writeup

      ?碎碎念 CTFHub:https://www.ctfhub.com/ 筆者入門CTF時時剛開始刷的是bugku的舊平臺,后來才有了CTFHub。 感覺不論是網頁UI設計,還是題目質量,賽事跟蹤,工具軟體都做得很不錯。 而且因為獨到的金幣制度的確讓人有一種想去刷題賺金幣的感覺。 個人還是非常喜歡這個 ......

      uj5u.com 2020-09-10 02:04:05 more
    • 02windows基礎操作

      我學到了一下幾點 Windows系統目錄結構與滲透的作用 常見Windows的服務詳解 Windows埠詳解 常用的Windows注冊表詳解 hacker DOS命令詳解(net user / type /md /rd/ dir /cd /net use copy、批處理 等) 利用dos命令制作 ......

      uj5u.com 2020-09-10 02:04:18 more
    • 03.Linux基礎操作

      我學到了以下幾點 01Linux系統介紹02系統安裝,密碼啊破解03Linux常用命令04LAMP 01LINUX windows: win03 8 12 16 19 配置不繁瑣 Linux:redhat,centos(紅帽社區版),Ubuntu server,suse unix:金融機構,證券,銀 ......

      uj5u.com 2020-09-10 02:04:30 more
    • 05HTML

      01HTML介紹 02頭部標簽講解03基礎標簽講解04表單標簽講解 HTML前段語言 js1.了解代碼2.根據代碼 懂得挖掘漏洞 (POST注入/XSS漏洞上傳)3.黑帽seo 白帽seo 客戶網站被黑帽植入劫持代碼如何處理4.熟悉html表單 <html><head><title>TDK標題,描述 ......

      uj5u.com 2020-09-10 02:04:36 more
    最新发布
    • FreeSWITCH對接vosk實作實時語音識別

      環境:CentOS 7.6_x64 FreeSWITCH版本 :1.10.9 Python版本:3.9.2 一、背景描述 vosk是一個開源語音識別工具,可識別中文,之前介紹過python使用vosk進行中文語音識別,今天記錄下FreeSWITCH對接vosk實作實時語音識別。 vosk離線語音識別 ......

      uj5u.com 2023-05-05 09:12:31 more
    • 基于MobileNet的人臉表情識別系統(MATLAB GUI版+原理詳解)

      本篇博客介紹了基于MobileNet的人臉表情識別系統,支持圖片識別、視頻識別、攝像頭識別等多種形式,通過GUI界面實作表情識別可視化展示。首先介紹了表情識別任務的背景與意義,總結近年來利用深度學習進行表情識別的相關技術和作業。在資料集選擇上,本文選擇了Fer2013和CK+兩個資料集,并使用MAT... ......

      uj5u.com 2023-05-05 09:06:47 more
    • 從功能測驗轉型測驗開發,薪資漲了20K,1000字講述轉型必經之路...

      身處職場之中,猶如逆水行舟不進則退,想要不被后浪拍死在沙灘上,就要不斷學習新知識,接受新事物。 要得到更好的發展,就要緊跟發展趨勢,不斷轉型才能保持競爭力,在職場中占有一席之地。 轉型不是一件容易的事,涉及到轉型、革新,就要突破現有的框架,必然會經歷陣痛。 我剛作業時就是一名月薪4000軟體測驗工程 ......

      uj5u.com 2023-05-05 09:06:23 more
    • 基于YOLOv5的目標檢測系統詳解(附MATLAB GUI版代碼)

      本文重點介紹了基于YOLOv5目標檢測系統的MATLAB實作,用于智能檢測物體種類并記錄和保存結果,對各種物體檢測結果可視化,提高目標識別的便捷性和準確性。本文詳細闡述了目標檢測系統的原理,并給出MATLAB的實作代碼、預訓練模型,以及GUI界面設計。基于YOLOv5目標檢測演算法,在界面中可以選擇各... ......

      uj5u.com 2023-05-05 09:05:47 more
    • 為什么說測驗崗位是巨坑?10年測驗人告訴你千萬別上當

      每次都有人問我軟體測驗的前景是什么樣的,每年也會有人很多人紛紛涌入測驗的崗位上,希望自己能夠進入阿里、華為等大廠
      但是測驗崗位真的那么吃香嗎?今天我結合從零基礎小白到測驗開發的成長經歷,來說下這個行業的發展前景,以及要入行的同學應該從哪個地方入手學習 ......

      uj5u.com 2023-05-05 09:05:13 more
    • 基于YOLOv4的目標檢測系統(附MATLAB代碼+GUI實作)

      本文介紹了一種MATLAB實作的目標檢測系統代碼,采用 YOLOv4 檢測網路作為核心模型,用于訓練和檢測各種任務下的目標,并在GUI界面中對各種目標檢測結果可視化。文章詳細介紹了YOLOv4的實作程序,包括演算法原理、MATLAB 實作代碼、訓練資料集、訓練程序和圖形用戶界面。在GUI界面中,用戶可... ......

      uj5u.com 2023-05-05 09:04:34 more
    • cPanel XSS漏洞分析研究(CVE-2023-29489)

      cPanel 是一套在網頁寄存業中最享負盛名的商業軟體,是基于于 Linux 和 BSD 系統及以 PHP 開發且性質為閉源軟體;提供了足夠強大和相當完整的主機管理功能,諸如:Webmail 及多種電郵協議、網頁化 FTP 管理、SSH 連線、資料庫管理系統、DNS 管理等遠端網頁式主機管理軟體功能... ......

      uj5u.com 2023-05-05 09:04:11 more
    • 博客開通

      之前因為查資料注冊的博客園,今天第一次開通屬于自己的博客,小小的記錄一下未來。 #include<iostream> using namespace std; int main(){ print("Hello world!"); return 0; } 我現在大四馬上畢業,考研失敗,對春招的認識不夠 ......

      uj5u.com 2023-05-05 09:03:59 more
    • 京東物流常態化壓測實踐

      大促備戰壓測備戰時間緊、任務多,壓測備戰壓力較大,在大促備戰多專項并行資源緊張情況下,頻繁的系統調優給整個大促帶來不可控的風險因素。引入常態化壓測的手段,通過每周或每月的定期壓測行為,持續把控系統性能表現,保證服務穩定性;同時將需求上線引起的性能問題前置暴露,及時定位優化問題;減輕備戰壓力,提升壓測... ......

      uj5u.com 2023-05-05 09:03:54 more
    • 【OpenAI】私有框架代碼生成實踐

      OpenAI提供的ChatGPT/GPT-4模型和CodeX模型能夠很好的理解和生成業界大多數編程語言的邏輯和代碼,然而在實際應用中,我們經常會在編碼時使用到一些私有框架、包、協議和DSL等。由于相關模型沒有學習最新網路資料,且這些私有資料通常也沒有發布在公開網路上,OpenAI無法根據這些私有資訊... ......

      uj5u.com 2023-05-05 09:03:46 more