Python 检测关键字

Python detect keywords

我正在做和应用做休闲:

1:如果麦克风检测到一些噪音,它会开始录制音频,直到检测不到噪音为止。之后,音频被录制成一个wav文件。

2:我必须检测上面的一些字。只有 5 到 10 个单词需要检测。

到目前为止,我的代码只做了第一部分(检测噪音和录制音频)。现在,我有一个包含以下单词的列表:help, please, yes, no, could, you, after, tomorrow。我需要一种离线方式来检测我的声音是否包含这些词。这可能吗?我怎样才能做到这一点?我正在使用 linux,但无法将我的操作系统更改为 windows 或使用虚拟机。

我正在考虑使用声音的频谱图,创建火车数据库并使用一些分类器进行预测。例如,this 是一个词的谱图。这是一个很好的技术吗?

谢谢。

您可以使用 python 的 pocketsphinx,使用 pip install pocketsphinx 安装。代码如下所示:

import sys, os
from pocketsphinx.pocketsphinx import *
from sphinxbase.sphinxbase import *


modeldir = "../../../model"
datadir = "../../../test/data"

# Create a decoder with certain model
config = Decoder.default_config()
config.set_string('-hmm', os.path.join(modeldir, 'en-us/en-us'))
config.set_string('-dict', os.path.join(modeldir, 'en-us/cmudict-en-us.dict'))
config.set_string('-kws', 'command.list')


# Open file to read the data
stream = open(os.path.join(datadir, "goforward.raw"), "rb")

# Alternatively you can read from microphone
# import pyaudio
# 
# p = pyaudio.PyAudio()
# stream = p.open(format=pyaudio.paInt16, channels=1, rate=16000, input=True, frames_per_buffer=1024)
# stream.start_stream()

# Process audio chunk by chunk. On keyword detected perform action and restart search
decoder = Decoder(config)
decoder.start_utt()
while True:
    buf = stream.read(1024)
    if buf:
         decoder.process_raw(buf, False, False)
    else:
         break
    if decoder.hyp() != None:
        print ([(seg.word, seg.prob, seg.start_frame, seg.end_frame) for seg in decoder.seg()])
        print ("Detected keyword, restarting search")
        decoder.end_utt()
        decoder.start_utt()

关键字列表应如下所示:

  forward /1e-1/
  down /1e-1/
  other phrase /1e-20/

数字是检测的阈值