樹莓派-語音聊天機器人+語音控制引腳電平高低

   

  最近和幾位本學院的研究生師兄師姐參加研究生電子設計大賽，自己也來折騰下之前沒有搞完的語音控制小車。恰巧自己負責的是語音控制這部分，折騰了幾天也差不多搞定啦…把自己的折騰套路總結一下，給一起折騰的小伙伴點經驗之談…

      一、配置樹莓派

     我們這次使用的最新的樹莓派3，鏡像直接是官網下載的Raspbian。這也是讓我感覺最有樹莓派感覺的一個系統。主要是sudo raspi-config的配置。

1和2最好都是設置一下，然后3看自己愛好吧；4的里面我都是重新設置的，包括時區、語言和字體。字體最好下載（apt-get install ttf-wqy-zenhei）。然后第八的那些串口、引腳的功能最好都打開

配置WiFi：樹莓派3是自帶WiFi的，所以啟動正常的話是可以直接連接的；如果沒有，就iwlist scan 掃描一下。

更新源：apt-get update，apt-get upgrade。

  二、語音聊天和語音控制引腳。

引腳的控制方法很多的，python GPIO、wiringPi、BCM2835 C Library。

在這里我使用的是wiringPi（C語言）；

安裝wiringPi：

 

sudo apt-get install git-core
git clone git://git.drogon.net/wiringPi
cd wiringPi
./build

 

編輯腳本控制引腳電平高低：

首先創建個目錄:

cd ~
mkdir scripts
cd scripts

然后編輯腳本light內容：

#!/bin/bash
if [ $# > 1 ]
then
/usr/local/bin/gpio mode 4 out
    if [[ "$1" = "on" ]]
    then
/usr/local/bin/gpio write 4 on
    fi
 
    if [[ "$1" = "off" ]]
    then
/usr/local/bin/gpio write 4 off
    fi
fi

這里的4對應的是樹莓派的引腳16（GEN 4），相關文檔大家可以自行查閱。

 

賦給腳本權限：

chmod u+x light

 

然后就可以檢驗是否可以通過命令行控制引腳啦…

./light on
./light off

下面就是通過語音來控制。我幾乎嘗試了可以用的所有的語音識別SDK，科大訊飛、百度語音、Google…事實證明Google是最棒的，但是對於我們牆內玩家是真的頭疼…

我最后采用的還是百度的API，因為個人喜歡python，恰好碰到一個百度的python開源程序。

直接上代碼：

 -*- coding: utf-8 -*-

import numpy as np
from datetime import datetime
import wave
import time
import urllib, urllib2, pycurl
import base64
import json
import os
import sys
reload(sys)
sys.setdefaultencoding( "utf-8" )

save_count = 0
save_buffer = []
t = 0
sum = 0
time_flag = 0
flag_num = 0
filename = 'asr.wav'
duihua = '1'

def getHtml(url):
    page = urllib.urlopen(url)
    html = page.read()
    return html

def get_token():
    apiKey = "Ll0c53MSac6GBOtpg22ZSGAU"
    secretKey = "44c8af396038a24e34936227d4a19dc2"
    auth_url = "https://openapi.baidu.com/oauth/2.0/token?grant_type=client_credentials&client_id=" + apiKey + "&client_secret=" + secretKey;
    res = urllib2.urlopen(auth_url)
    json_data = res.read()
    return json.loads(json_data)['access_token']

def dump_res(buf):
    global duihua
    print "字符串類型"
    print (buf)
    a = eval(buf)
    print type(a)
    if a['err_msg']=='success.':
        #print a['result'][0]#終於搞定了，在這里可以輸出，返回的語句
        duihua = a['result'][0]
        print duihua

def use_cloud(token):
    fp = wave.open(filename, 'rb')
    nf = fp.getnframes()
    f_len = nf * 2
    audio_data = fp.readframes(nf)
    cuid = "7519663" #產品id
    srv_url = 'http://vop.baidu.com/server_api' + '?cuid=' + cuid + '&token=' + token
    http_header = [
        'Content-Type: audio/pcm; rate=8000',
        'Content-Length: %d' % f_len
    ]

    c = pycurl.Curl()
    c.setopt(pycurl.URL, str(srv_url)) #curl doesn't support unicode
    #c.setopt(c.RETURNTRANSFER, 1)
    c.setopt(c.HTTPHEADER, http_header)   #must be list, not dict
    c.setopt(c.POST, 1)
    c.setopt(c.CONNECTTIMEOUT, 30)
    c.setopt(c.TIMEOUT, 30)
    c.setopt(c.WRITEFUNCTION, dump_res)
    c.setopt(c.POSTFIELDS, audio_data)
    c.setopt(c.POSTFIELDSIZE, f_len)
    c.perform() #pycurl.perform() has no return val

# 將data中的數據保存到名為filename的WAV文件中
def save_wave_file(filename, data):
    wf = wave.open(filename, 'wb')
    wf.setnchannels(1)
    wf.setsampwidth(2)
    wf.setframerate(SAMPLING_RATE)
    wf.writeframes("".join(data))
    wf.close()

token = get_token()
key = '05ba411481c8cfa61b91124ef7389767'
api = 'http://www.tuling123.com/openapi/api?key=' + key + '&info='

while(True):
    os.system('arecord -D "plughw:1,0" -f S16_LE -d 5 -r 8000 /home/pi/Desktop/2016-6-25/asr.wav')
    use_cloud(token)
    print duihua
    info = duihua
    duihua = ""
    request = api   + info
    response = getHtml(request)
    dic_json = json.loads(response)

    a = dic_json['text']
    print type(a)
    unicodestring = a

    # 將Unicode轉化為普通Python字符串："encode"
    utf8string = unicodestring.encode("utf-8")

    print type(utf8string)
    print str(a)
    url = "http://tsn.baidu.com/text2audio?tex="+dic_json['text']+"&lan=zh&per=0&pit=1&spd=7&cuid=8297904&ctp=1&tok=24.9ae6d50d24d1c222c4019be4c70613e7.2592000.1469358913.282335-8297904"
    os.system('mplayer "%s"'%(url))

這是網上大神自己給樹莓派自己寫的Python腳本，然后我自己修改的如下可以實現語音控制引腳開燈和關燈。

# -*- coding: utf-8 -*-

import numpy as np
from datetime import datetime
import wave
import time
import urllib, urllib2, pycurl
import base64
import json
import os
import sys
reload(sys)
sys.setdefaultencoding( "utf-8" )

save_count = 0
save_buffer = []
t = 0
sum = 0
time_flag = 0
flag_num = 0
filename = 'asr.wav'
commun = '1'
answer = '1'
def getHtml(url):
    page = urllib.urlopen(url)
    html = page.read()
    return html

def get_token():
    apiKey = "Ll0c53MSac6GBOtpg22ZSGAU"
    secretKey = "44c8af396038a24e34936227d4a19dc2"
    auth_url = "https://openapi.baidu.com/oauth/2.0/token?grant_type=client_credentials&client_id=" + apiKey + "&client_secret=" + secretKey;
    res = urllib2.urlopen(auth_url)
    json_data = res.read()
    return json.loads(json_data)['access_token']

def dump_res(buf):
    global duihua
    print "字符串類型"
    print (buf)
    a = eval(buf)
    print type(a)
    if a['err_msg']=='success.':
        commun = a['result'][0]
        print duihua

def use_cloud(token):
    fp = wave.open(filename, 'rb')
    nf = fp.getnframes()
    f_len = nf * 2
    audio_data = fp.readframes(nf)
    cuid = "7519663" #產品id
    srv_url = 'http://vop.baidu.com/server_api' + '?cuid=' + cuid + '&token=' + token
    http_header = [
        'Content-Type: audio/pcm; rate=8000',
        'Content-Length: %d' % f_len
    ]

    c = pycurl.Curl()
    c.setopt(pycurl.URL, str(srv_url)) #curl doesn't support unicode
    #c.setopt(c.RETURNTRANSFER, 1)
    c.setopt(c.HTTPHEADER, http_header)   #must be list, not dict
    c.setopt(c.POST, 1)
    c.setopt(c.CONNECTTIMEOUT, 30)
    c.setopt(c.TIMEOUT, 30)
    c.setopt(c.WRITEFUNCTION, dump_res)
    c.setopt(c.POSTFIELDS, audio_data)
    c.setopt(c.POSTFIELDSIZE, f_len)
    c.perform() #pycurl.perform() has no return val

# 將data中的數據保存到名為filename的WAV文件中
def save_wave_file(filename, data):
    wf = wave.open(filename, 'wb')
    wf.setnchannels(1)
    wf.setsampwidth(2)
    wf.setframerate(SAMPLING_RATE)
    wf.writeframes("".join(data))
    wf.close()


while(True):
    os.system('arecord -D "plughw:1,0" -f S16_LE -d3 -r 8000 /home/pi/Desktop/2016-6-25/asr.wav')
    use_cloud(token)
    print commun
    site = commun89     if "開" in site: #在返回的文本里尋找“開”
       answer = '好的，正在為您開燈，請稍后'
       url = "http://tsn.baidu.com/text2audio?tex="+answer+"&lan=zh&per=0&pit=1&spd=7&cuid=8297904&ctp=1&tok=24.9ae6d50d24d1c222c4019be4c70613e7.2592000.1469358913.282335-8297904"
       os.system('mplayer "%s"'%(url))
       os.system('cd /home/pi/Desktop/scripts&&./light on')
    if "關" in site:
       answer = '好的，正在為您關燈，請稍后'
       url = "http://tsn.baidu.com/text2audio?tex="+answer+"&lan=zh&per=0&pit=1&spd=7&cuid=8297904&ctp=1&tok=24.9ae6d50d24d1c222c4019be4c70613e7.2592000.1469358913.282335-8297904"
       os.system('mplayer "%s"'%(url))
       os.system('cd /home/pi/Desktop/scripts&&./light off

下面給大家一個現場演示視頻。

 http://v.youku.com/v_show/id_XMTYyMzIxMDc5Ng==.html

參考文章：

http://www.xiaopeiqing.com/posts/2337.html；（中大一位名為xieshundao博士師兄的貼，非常感謝師兄的幫助和人教誨…）

http://blog.csdn.net/haven200/article/details/50659499；

http://computers.tutsplus.com/articles/how-to-control-a-lamp-with-voice-commands-and-a-raspberry-pi--mac-60825；

http://www.urlteam.org/2016/05/python%E8%AF%AD%E9%9F%B3%E6%99%BA%E8%83%BD%E5%AF%B9%E8%AF%9D%E8%81%8A%E5%A4%A9%E6%9C%BA%E5%99%A8%E4%BA%BA%EF%BC%8Clinux%E6%A0%91%E8%8E%93%E6%B4%BE%E5%8F%8C%E5%B9%B3%E5%8F%B0%E5%85%BC%E5%AE%B9/；

http://blog.csdn.net/happen23/article/details/45821697；

http://www.modified.systems/archives/tag/voicecommand；

 

23:26:422016-06-27