kaldi - Online Audio Server（服务器客户端建立方法-旧版在线解码）

在kaldi 的工具集里有好几个程序可以用于在线识别。这些程序都位在src/onlinebin文件夹里，他们是由src/online文件夹里的文件编译而成(你现在可以用make ext 命令进行编译)。这些程序大多还需要tools文件夹中的portaudio 库文件支持，portaudio 库文件可以使用tools文件夹中的相应脚本文件下载安装。

# 安装portaudio
yum -y install *alsa*
cd kaldi/tools
./install_portaudio.sh
# 编译在线识别工具
cd src/
make ext

目录

• 一、服务器客户端识别系统建立方法
  • 1. Command line to start the server（服务器端启动方式）:
    • 1.1 Arguments are as follow（参数意义）:
  • 2. Command line to start the client（客户端启动方式）:
    • 2.1 Arguments are as follow（参数意义）:
  • * Command line to start the Java client（移动客户端）:
• 二、使用麦克风建立客户端与服务器的实时解码
  • 1. 使用online-server-gmm-decode-faster启动服务器：
  • 2. 使用online-net-client启动客户端：

一、服务器客户端识别系统建立方法

建立整个在线识别系统需要：

• 准备两台机器，都安装kaldi；
• 作为服务器的机器，准备好声音模型、词典、解码网络、特征转换矩阵（我还没有使用转换矩阵）
• 首先启动服务器，待服务器运行后，再启动客户端连接。

1. Command line to start the server（服务器端启动方式）:

使用如下指令online-audio-server-decode-faster启动服务器：

online-audio-server-decode-faster --verbose=1 --rt-min=0.5 --rt-max=3.0 --max-active=6000 \
--beam=72.0 --acoustic-scale=0.0769 final.mdl graph/HCLG.fst graph/words.txt '1:2:3:4:5' \
graph/word_boundary.int 5010 final.mat

1.1 Arguments are as follow（参数意义）:

• final.mdl - the acoustic model
• HCLG.fst - the complete FST
• words.txt - word dictionary (mapping word ids to their textual representation)
• '1:2:3:4:5' - list of silence phoneme ids
• 5010 - port the server is listening on
• word_boundary.int- a list of phoneme boundary information required for word alignemnt
• final.mat - feature LDA matrix

注意：如果没有word_boundary.int 需要重新运行prepare_lang.sh生成。修改如下：

#原指令：
utils/prepare_lang.sh --position-dependent-phones false data/local/dict "<SPOKEN_NOISE>" \
data/local/lang data/lang
#改为：
utils/prepare_lang.sh data/local/dict "<SPOKEN_NOISE>" data/local/lang data/lang

启动后结果如下：

2. Command line to start the client（客户端启动方式）:

直接运行如下指令即可启动客户端：

 online-audio-client --htk --vtt localhost 5010 scp:test.scp

2.1 Arguments are as follow（参数意义）:

• –htk - save results as an HTK label file
• –vtt - save results as a WebVTT file
• localhost - server to connect to
• 5010 - port to connect to
• scp:test.scp - list of WAV files to send
  
  启动后客户端不断传输数据，服务器实时进行解码！结果如下：
  
  
  
  结果是边传输边识别的：
  
  

* Command line to start the Java client（移动客户端）:

移动客户端我还未尝试：

java -jar online-audio-client.jar

Or simply double-click the JAR file in the graphical interface.

二、使用麦克风建立客户端与服务器的实时解码

kaldi提供了读取客户端麦克风数据的解码工具，可以在客户端使用麦克风发送音频，服务器实时返回解码数据。

1. 使用online-server-gmm-decode-faster启动服务器：

• 通过网络接收特征进行解码。话语分词是即时完成的。如果给出可选（最后）参数，则使用特征拼接/ LDA变换。 否则默认使用delta / delta-delta（2阶）特征。

Usage: online-server-gmm-decode-faster [options] model-infst-in word-symbol-table silence-phones udp-port [lda-matrix-in]
Example: online-server-gmm-decode-faster --rt-min=0.3 --rt-max=0.5 --max-active=4000 --beam=12.0 --acoustic-scale=0.0769 model HCLG.fst words.txt '1:2:3:4:5' 1234 lda-matrix

2. 使用online-net-client启动客户端：

• 通过online-net-client工具，使用麦克风（portaudio）作为输入，提取特征并通过网络连接发送它们到服务器上。具体设置如下：

Usage: online-net-client server-address server-port 

Options:
  --batch-size                : The number of feature vectors to be extracted and sent in one go (int, default = 27)

Standard options:
  --config                    : Configuration file to read (this option may be repeated) (string, default = "")
  --help                      : Print out usage message (bool, default = false)
  --print-args                : Print the command line arguments (to stderr) (bool, default = true)
  --verbose                   : Verbose level (higher->more logging) (int, default = 0)

引用：kaldi-asr

转载请注明：https://www.cnblogs.com/sunhongwen/p/9437074.html

参考：kaldi首页