=语音识别=
=Thrift协议=远程RPC通讯协议,与谷歌protobuf类似。为Facebook开发。[[智能硬件-语音识别]]
=Client端=
*移动终端(客户端)=实验1-基于Web的云端整合=
(1)Mobile in HUAWEI Kylin 930==PYNQ端+Web端实验==
(2)嵌入式设备JetsonKitPython for Zynq (PYNQ)是xilinx生产的一款嵌入式智能硬件。
调用API录音[https://github.com/Xilinx/PYNQ/blob/master/Pynq-Z1/notebooks/examples/overlay_download.ipynb pynq_overlay]
调用Thrift接口== PYNQ 端 ==
基于PYNQ开发,完成功能有:
=Server端=# 调用API录音# 发送录音文件或频谱图
==Audio Input==
*云端(服务器端)[https://github.com/Xilinx/PYNQ/blob/master/Pynq-Z1/notebooks/examples/audio_playback.ipynb pynq_audio_playback]
接收录音文件= 服务器端(Server) =*基于Flask开发,完成功能:# 接收录音文件,调用服务端处理程序# 运行Keras或者TensorFlow,对频谱图进行判断# 返回识别结果
调用服务端程序*推断模型AudioNet
运行Keras或者TensorFlow,对频谱图进行判断,返回结果。[http://gitlab.icenter.tsinghua.edu.cn/zhengwenxun/audioNet AudioNet]
=参考实验成果 = 输出:3-4页左右的书面报告,包括截图与文字。 # 项目报告(Word版本)# 项目代码(托管在[httpshttp://developergitlab.androidicenter.comtsinghua.edu.cn GitLab]) = 教学资源 = 嵌入式设备 Xilinx Pynq = 参考链接 = # [http://indexpynq.html Android开发入门io PYNQ开发入门]