机车仿真器中声音系统的研究与开发
|
摘要
本文是以铁道部科技发展项目“提速列车优化操纵与机车仿真器研究开发”为依托，对机车仿真器的声音系统进行研究：第一，对机车仿真器中声音仿真系统的音效进行改进，增加3D音效，如声音的距离感、方位感、多普勒效应等，使得训练环境音响更加逼真；第二，实现机车仿真器中教员与学员间的语音网络通讯。
声音仿真系统以声音渲染的数学模型、人耳的听觉模型、计算机音频知识为基础。本文分析了实际机车运行过程中的声音情况，并结合机车声音仿真的控制方法与具体要求，比较Windows环境中各种声音媒体控制的方法和特点后，提出了采用DirectSound技术开发声音仿真系统的方法。探讨了利用DirectSound技术实现声音的混音、回放和3D效果的原理及处理过程，实现了机车声音仿真的3D音效和多普勒效应。
以语音压缩编解码技术、网络通信技术和多线程技术为主要理论基础，给出了教员与学员间语音网络通讯的具体实现方案：采用对等模式及UDP通信技术和简捷的数据压缩技术，对全双工声卡编程，在局域网内实现点到点的全双工的、实时的语音通讯。文章详细地讨论了语音网络通讯的采集模块、回放模块、通信模块和压缩解压模块的具体实现，并提出了一种自适应的静音检测算法和数据包乱序调整的策略。最后，分析了语音网络通讯的时延。
The paper, which is based on the "Research and Development of the Speed-up Train's Manipulation of Optimization and Train Simulator" project, concerns the sound system in the Train Simulator. In the paper, the sound system includes two parts contents: firstly, improving the sound effect of the sound simulation system in the Train Simulator and enhancing 3D sound effect, such as sense of distance, sense of orientation, Doppler Effect etc, to make the sound of training environment more verisimilar; secondly, realization of the speech communication in network between teacher and student in the Train Simulator.
The sound simulation system is based on the mathematical model of sound rendering technology, the model of human hearing and the audio knowledge in the computer. The paper analyses the sound of train in fact, and combines with the requirement to the sound simulation of the Train Simulator. After evaluating all methods and traits of the controls to sound media in Windows system, the paper brings forward to use the DirectSound technology to develop the sound simulation system. At last, the paper discusses the principle and the process of disposal of using DirectSound technology to realize real time sound synthesization, playback and 3D sound effect, and realize 3D effect and Doppler Effect of the sound simulation.
The paper gives a project to realize speech communication between teacher and student in network, which is based on speech's compression and decompression technology, network communication technology and multithreading technology. The point-to-point full duplex and real time speech communication in network is implemented on LAN by using peer to peer model, UDP communication technology and simple data-compression method, and programming to the full duplex sound card. Then, the paper discusses the realization of the speech's sampling module, playback module, communication module, compression and decompression module in detail, and gives a self-adaptive silence detection algorithm and a policy to make disorder data package in order. At last, the paper analyses the delay time of the
speech communication in network.
声音仿真系统以声音渲染的数学模型、人耳的听觉模型、计算机音频知识为基础。本文分析了实际机车运行过程中的声音情况，并结合机车声音仿真的控制方法与具体要求，比较Windows环境中各种声音媒体控制的方法和特点后，提出了采用DirectSound技术开发声音仿真系统的方法。探讨了利用DirectSound技术实现声音的混音、回放和3D效果的原理及处理过程，实现了机车声音仿真的3D音效和多普勒效应。
以语音压缩编解码技术、网络通信技术和多线程技术为主要理论基础，给出了教员与学员间语音网络通讯的具体实现方案：采用对等模式及UDP通信技术和简捷的数据压缩技术，对全双工声卡编程，在局域网内实现点到点的全双工的、实时的语音通讯。文章详细地讨论了语音网络通讯的采集模块、回放模块、通信模块和压缩解压模块的具体实现，并提出了一种自适应的静音检测算法和数据包乱序调整的策略。最后，分析了语音网络通讯的时延。
The paper, which is based on the "Research and Development of the Speed-up Train's Manipulation of Optimization and Train Simulator" project, concerns the sound system in the Train Simulator. In the paper, the sound system includes two parts contents: firstly, improving the sound effect of the sound simulation system in the Train Simulator and enhancing 3D sound effect, such as sense of distance, sense of orientation, Doppler Effect etc, to make the sound of training environment more verisimilar; secondly, realization of the speech communication in network between teacher and student in the Train Simulator.
The sound simulation system is based on the mathematical model of sound rendering technology, the model of human hearing and the audio knowledge in the computer. The paper analyses the sound of train in fact, and combines with the requirement to the sound simulation of the Train Simulator. After evaluating all methods and traits of the controls to sound media in Windows system, the paper brings forward to use the DirectSound technology to develop the sound simulation system. At last, the paper discusses the principle and the process of disposal of using DirectSound technology to realize real time sound synthesization, playback and 3D sound effect, and realize 3D effect and Doppler Effect of the sound simulation.
The paper gives a project to realize speech communication between teacher and student in network, which is based on speech's compression and decompression technology, network communication technology and multithreading technology. The point-to-point full duplex and real time speech communication in network is implemented on LAN by using peer to peer model, UDP communication technology and simple data-compression method, and programming to the full duplex sound card. Then, the paper discusses the realization of the speech's sampling module, playback module, communication module, compression and decompression module in detail, and gives a self-adaptive silence detection algorithm and a policy to make disorder data package in order. At last, the paper analyses the delay time of the
speech communication in network.
引文
[1]王行仁．面向二十一世纪发展系统仿真技术．系统仿真学报．1999，10(2)：73-82
[2]苏虎，周美玉．高速列车模拟器的视景仿真与建模．系统仿真学报．2001，13(5)：588-591
[3]周美玉．现代仿真技术与机车仿真器．西南交通大学．科学研究与实验讲座教材．2000：12-18
[4]李春洪，毛跃奇等．基于DirectSound的声音实时仿真研究．计算机仿真．2001，18(3)：47-49
[5]何正伟等．实时三维声音仿真系统的设计与实现．计算机应用研究．2002，1：23-25
[6]陈坚，陈伟等编．Visual C++网络高级编程．人民邮电出版社，2001：5-43
[7]Walter J.Coralski,Matthew C.Kolon著．IP电话原理技术应用．舒华英，赖平漳等译．人民邮电出版社，2000：153-181
[8]Scott Keagy著．语音与数据集成网络．李真文等译．电子工业出版社，2002：114-136
[9]朱民雄，闻新等编．计算机语音技术．北京航空航天大学出版社，2002：42-74
[10]Bradley,Bargen等著．Inside DirectX从入门到精通．希望图书创作室译．北京希望电脑公司，1999：1-232
[11]周长发编著．Visual C++.NET多媒体编程．电子工业出版社，2002：31-204
[12]汪翔，袁辉编著．Visual C++实际与提高——网络编程篇．中国铁道出版社，2001：17-49
[13]侯俊杰著．深入浅出MFC.2．华中科技大学出版社，2001：38-45
[14]Prabhat K.Andleigh,Kiran Thakrar著．多媒体系统设计．徐光佑，史元春译．电子工业出版社，1998：186-200
[15]黄伟伦等编著．Ms-Windows多媒体程序设计务实与范例．华中理工大学出版社，1996：100-145
[16]徐剑辉，刘少凌编著．多媒体软件开发与设计．清华大学出版
社，1997：1-22
[17]汤子瀛等著．计算机操作系统．西安电子科技大学出版社，1996：61-131
[18]Jeffrey Richter著．Windows核心编程．王建华，张焕生等译．机械工业出版社，2000：45-121
[19]Jim Beveridge,Robert Wiener著．Win32多线程程序设计．侯捷译．华中科技大学出版社，2002：93-128
[20]Dale Rogerson著．COM技术内幕——微软组件对象模型．杨秀章，江英译．清华大学出版社，1999：11-21
[21]Charles Petzold著．Windows程序设计(下册)．北京博彦科技发展有限公司译．北京大学出版社，1999：1189-1315
[22]罗福元等．声音渲染技术及其在虚拟环境中的应用．系统仿真学报．1999，11(5)：364-368
[23]夏洪文．实现三维声效果的多媒体技术．电声技术．2000，4：47-49
[24]Amdersan D.B, Gasey M.A. The Sound Dimension.IEEE SPECTRUM.1997
[25]Damid M.DATABASE PROCFSING.4nd Edition.Msvmillsn Publishing Compang.1998
[26]张红岩．多媒体三维声音技术与实现．微型机与应用．1999，7：6-8
[27]陈川，郎诚廉．机车模拟驾驶装置音频仿真系统的设计与实现．上海铁道大学学报．2000，21(6)：52-56
[28]孟建军．机车仿真器音响系统研究．兰州铁道学院学报．1998，17(4)：54-58
[29]马云升，姚晓，夏志忠．VC++下声卡低层音频服务的编程技术．计算机应用．2002，22(2)：101-104
[30]韩雪梅．Windows95环境下声音的实时采集、处理、播放．现代计算机．2000，1：67-72
[31]魏民，许刚．基于WINDOWS95局域网的语音通信．计算机系统应用．1999，6：21-23
[32]杨建华，张晓明等．局域网的语音准实时全双工传输．石油化工高等学校学报．1998，11(3)：36-40
[33]林丕源等．局域网上声音实时捕捉和传输的实现。计算机应用．2002，22(6)：64-66
[34]张晶等．网上语音交谈的研究与实践．郑州大学学报．2000，32(3)：24-27
[35]杨俊等．PC Windows环境下数字音频的软件解码与播出技术研究．电声技术．2001，3
[36]申恺等．局域网电话系统设计．计算机工程与应用．2001，6：50-53
[37]Dowden Douglas C, Gitlin Richard D, Marrin Robert L Next-Generation Networks. Bell Labs Technical Journal. 1998
[38]徐梁．语音压缩及IP网上话音(VoIP)技术．通信世界．2001，7：20-22
[39]徐正伟，汤静．语音信号及其编译码算法的研究．电声技术．2002，4
[40]Paul Mermelslein, Yasheng Oian. Analysis by Synthesis Speech Coding with Generalized Pitch Prediction.IEEE International Conference on Acoustics, Speech and Signal Processing Vol Ⅰ of Ⅵ .1999
[41]胡毅，胡咏梅．因特网上语音传输中静音抑制算法的研究．计算机工程与应用．2001，19：112-113
[42]Bolor J C. End-to-end packet delay and loss behavior in the Internet. Proc ACM SIGCOMM 93.1993
[43]陆珉，季晓勇．多媒体通讯系统中的静音检测．通信技术．2001，7
[44]张祖良等．IP Phone的技术原理及展望．微型电脑应用．2001，17(6)：15-17
[45]王琦等．VoIP中为保证语音质量所采用的关键技术．中国数据通讯．2002，2：25-29
[46]谷建等．INTERNET网分组语音传输初探．沈阳教育学院学报．2001，3(3)：122-124
[47]H. Schul Zrinne, j. rosenberg etc..architecture and protocols-an IETF perspective. Computer Networks .1999,31
[48]徐春秀，武穆清．IP网络电话中常用的语音压缩技术的性能分
析．电子应用技术．2001，10：6-9
[49]孙其博，杨放春．影响IP电话语音质量的主要因素及相关技术．高技术通讯．2001，6：103-106
[50]居来提．语音压缩编码．新疆教育学院学报．2002，18(2)
[51]陈健．因特网音频编码技术．电子技术．2000，11：13-16
[52]Held G. Voice over IP NetWorks. Chicage JPMI. 1998
[53]毛新乐．局域网音频信息实时传送的实现方案．计算机自动测量与控制．2001，9(S0)：123-126
[54]Juin-Hwey Chen. High-quality 16kb/s speech coding with a one-way delay less than 2ms[C]. CH2847-2/90 IEEE. 1990
[55]R Salami,C Laflamme, J P Adoul. 8kbit/s ACELP coding of speech with 10ms speech-frame: a candidate for CCITT standardization[S].07803-1775-0/94 IEEE. 1994
[56]Alan MeCree, Kwan Truong. A 2.4 kbit/s MELP coder candidate for the speech coder[S]. CH2977-7/91 IEEE. 1991
[57]汤光明等．基于TCP/IP的多媒体通信实现．计算机应用研究．2001，4：95-97
[58]Mattew Chu. IP telephony-architecture and applications [M]. China voice over IP conference notes, Beijing, 1999
[59]Uyless D Black. Voice Over IP[M]. England, Addison-Weslay, 1998
[60]范延滨．集成IP电话软件的设计与实现．香港国际计算机会议论文集，青岛，1999
[61]黄德智，马尽文．一种IP电话软件的设计与实现．计算机工程与应用．2002，1：134-137
[62]陈启祥．IP电话终端系统的研究与设计．计算机工程与应用．2001，16：71-72
[2]苏虎，周美玉．高速列车模拟器的视景仿真与建模．系统仿真学报．2001，13(5)：588-591
[3]周美玉．现代仿真技术与机车仿真器．西南交通大学．科学研究与实验讲座教材．2000：12-18
[4]李春洪，毛跃奇等．基于DirectSound的声音实时仿真研究．计算机仿真．2001，18(3)：47-49
[5]何正伟等．实时三维声音仿真系统的设计与实现．计算机应用研究．2002，1：23-25
[6]陈坚，陈伟等编．Visual C++网络高级编程．人民邮电出版社，2001：5-43
[7]Walter J.Coralski,Matthew C.Kolon著．IP电话原理技术应用．舒华英，赖平漳等译．人民邮电出版社，2000：153-181
[8]Scott Keagy著．语音与数据集成网络．李真文等译．电子工业出版社，2002：114-136
[9]朱民雄，闻新等编．计算机语音技术．北京航空航天大学出版社，2002：42-74
[10]Bradley,Bargen等著．Inside DirectX从入门到精通．希望图书创作室译．北京希望电脑公司，1999：1-232
[11]周长发编著．Visual C++.NET多媒体编程．电子工业出版社，2002：31-204
[12]汪翔，袁辉编著．Visual C++实际与提高——网络编程篇．中国铁道出版社，2001：17-49
[13]侯俊杰著．深入浅出MFC.2．华中科技大学出版社，2001：38-45
[14]Prabhat K.Andleigh,Kiran Thakrar著．多媒体系统设计．徐光佑，史元春译．电子工业出版社，1998：186-200
[15]黄伟伦等编著．Ms-Windows多媒体程序设计务实与范例．华中理工大学出版社，1996：100-145
[16]徐剑辉，刘少凌编著．多媒体软件开发与设计．清华大学出版
社，1997：1-22
[17]汤子瀛等著．计算机操作系统．西安电子科技大学出版社，1996：61-131
[18]Jeffrey Richter著．Windows核心编程．王建华，张焕生等译．机械工业出版社，2000：45-121
[19]Jim Beveridge,Robert Wiener著．Win32多线程程序设计．侯捷译．华中科技大学出版社，2002：93-128
[20]Dale Rogerson著．COM技术内幕——微软组件对象模型．杨秀章，江英译．清华大学出版社，1999：11-21
[21]Charles Petzold著．Windows程序设计(下册)．北京博彦科技发展有限公司译．北京大学出版社，1999：1189-1315
[22]罗福元等．声音渲染技术及其在虚拟环境中的应用．系统仿真学报．1999，11(5)：364-368
[23]夏洪文．实现三维声效果的多媒体技术．电声技术．2000，4：47-49
[24]Amdersan D.B, Gasey M.A. The Sound Dimension.IEEE SPECTRUM.1997
[25]Damid M.DATABASE PROCFSING.4nd Edition.Msvmillsn Publishing Compang.1998
[26]张红岩．多媒体三维声音技术与实现．微型机与应用．1999，7：6-8
[27]陈川，郎诚廉．机车模拟驾驶装置音频仿真系统的设计与实现．上海铁道大学学报．2000，21(6)：52-56
[28]孟建军．机车仿真器音响系统研究．兰州铁道学院学报．1998，17(4)：54-58
[29]马云升，姚晓，夏志忠．VC++下声卡低层音频服务的编程技术．计算机应用．2002，22(2)：101-104
[30]韩雪梅．Windows95环境下声音的实时采集、处理、播放．现代计算机．2000，1：67-72
[31]魏民，许刚．基于WINDOWS95局域网的语音通信．计算机系统应用．1999，6：21-23
[32]杨建华，张晓明等．局域网的语音准实时全双工传输．石油化工高等学校学报．1998，11(3)：36-40
[33]林丕源等．局域网上声音实时捕捉和传输的实现。计算机应用．2002，22(6)：64-66
[34]张晶等．网上语音交谈的研究与实践．郑州大学学报．2000，32(3)：24-27
[35]杨俊等．PC Windows环境下数字音频的软件解码与播出技术研究．电声技术．2001，3
[36]申恺等．局域网电话系统设计．计算机工程与应用．2001，6：50-53
[37]Dowden Douglas C, Gitlin Richard D, Marrin Robert L Next-Generation Networks. Bell Labs Technical Journal. 1998
[38]徐梁．语音压缩及IP网上话音(VoIP)技术．通信世界．2001，7：20-22
[39]徐正伟，汤静．语音信号及其编译码算法的研究．电声技术．2002，4
[40]Paul Mermelslein, Yasheng Oian. Analysis by Synthesis Speech Coding with Generalized Pitch Prediction.IEEE International Conference on Acoustics, Speech and Signal Processing Vol Ⅰ of Ⅵ .1999
[41]胡毅，胡咏梅．因特网上语音传输中静音抑制算法的研究．计算机工程与应用．2001，19：112-113
[42]Bolor J C. End-to-end packet delay and loss behavior in the Internet. Proc ACM SIGCOMM 93.1993
[43]陆珉，季晓勇．多媒体通讯系统中的静音检测．通信技术．2001，7
[44]张祖良等．IP Phone的技术原理及展望．微型电脑应用．2001，17(6)：15-17
[45]王琦等．VoIP中为保证语音质量所采用的关键技术．中国数据通讯．2002，2：25-29
[46]谷建等．INTERNET网分组语音传输初探．沈阳教育学院学报．2001，3(3)：122-124
[47]H. Schul Zrinne, j. rosenberg etc..architecture and protocols-an IETF perspective. Computer Networks .1999,31
[48]徐春秀，武穆清．IP网络电话中常用的语音压缩技术的性能分
析．电子应用技术．2001，10：6-9
[49]孙其博，杨放春．影响IP电话语音质量的主要因素及相关技术．高技术通讯．2001，6：103-106
[50]居来提．语音压缩编码．新疆教育学院学报．2002，18(2)
[51]陈健．因特网音频编码技术．电子技术．2000，11：13-16
[52]Held G. Voice over IP NetWorks. Chicage JPMI. 1998
[53]毛新乐．局域网音频信息实时传送的实现方案．计算机自动测量与控制．2001，9(S0)：123-126
[54]Juin-Hwey Chen. High-quality 16kb/s speech coding with a one-way delay less than 2ms[C]. CH2847-2/90 IEEE. 1990
[55]R Salami,C Laflamme, J P Adoul. 8kbit/s ACELP coding of speech with 10ms speech-frame: a candidate for CCITT standardization[S].07803-1775-0/94 IEEE. 1994
[56]Alan MeCree, Kwan Truong. A 2.4 kbit/s MELP coder candidate for the speech coder[S]. CH2977-7/91 IEEE. 1991
[57]汤光明等．基于TCP/IP的多媒体通信实现．计算机应用研究．2001，4：95-97
[58]Mattew Chu. IP telephony-architecture and applications [M]. China voice over IP conference notes, Beijing, 1999
[59]Uyless D Black. Voice Over IP[M]. England, Addison-Weslay, 1998
[60]范延滨．集成IP电话软件的设计与实现．香港国际计算机会议论文集，青岛，1999
[61]黄德智，马尽文．一种IP电话软件的设计与实现．计算机工程与应用．2002，1：134-137
[62]陈启祥．IP电话终端系统的研究与设计．计算机工程与应用．2001，16：71-72