摘要：在精神疲勞研究中，能客觀地反映精神疲勞狀態(tài)的實(shí)驗(yàn)系統(tǒng)是研究的基礎(chǔ)。本文基于語(yǔ)音合成技術(shù)TTS，結(jié)合腦電采集設(shè)備，利用Micmsoft Speech SDK語(yǔ)音開(kāi)發(fā)包、TTS引擎和微軟MFC基礎(chǔ)類(lèi)庫(kù)，在VC++環(huán)境下設(shè)計(jì)并實(shí)現(xiàn)了精神疲勞實(shí)驗(yàn)系統(tǒng)。實(shí)驗(yàn)結(jié)果表明，將TTS技術(shù)應(yīng)用于精神疲勞實(shí)驗(yàn)系統(tǒng)，大大提高了實(shí)驗(yàn)的靈活性，能實(shí)現(xiàn)疲勞狀態(tài)的準(zhǔn)確標(biāo)定。
關(guān)鍵詞：TTS；腦電信號(hào)；VC開(kāi)發(fā)環(huán)境；精神疲勞狀態(tài)標(biāo)定；Microsoft Speech SDK

    精神疲勞是現(xiàn)代社會(huì)中的重要問(wèn)題，嚴(yán)重影響了人們的生命和健康。在交通駕駛、航天航空、實(shí)時(shí)監(jiān)控、高風(fēng)險(xiǎn)作業(yè)等行業(yè)，許多事故的發(fā)生都與精神疲勞有關(guān)，因此，對(duì)精神疲勞的分析及評(píng)價(jià)就顯得非常必要。
    自對(duì)疲勞進(jìn)行研究以來(lái)，精神疲勞的測(cè)定經(jīng)歷了生理生化法、主觀評(píng)定法、生理反應(yīng)測(cè)定法等方法。這些傳統(tǒng)方法因有很大的局限性而很難做到客觀和定量化。隨著現(xiàn)代電子技術(shù)和醫(yī)學(xué)信號(hào)檢測(cè)與處理技術(shù)的發(fā)展，基于生理參數(shù)信號(hào)(腦電信號(hào)、心電信號(hào)等)的精神疲勞測(cè)定技術(shù)的研究受到越來(lái)越多的關(guān)注。
    在精神疲勞的研究中，受試者的精神疲勞狀態(tài)一般通過(guò)不同的精神疲勞實(shí)驗(yàn)來(lái)產(chǎn)生，并對(duì)相應(yīng)的精神疲勞狀態(tài)進(jìn)行量化標(biāo)定。其中，讓受試者進(jìn)行某種作業(yè)，通過(guò)統(tǒng)計(jì)每次的完成時(shí)間或成功率來(lái)對(duì)受試者的疲勞狀態(tài)進(jìn)行標(biāo)定是一種廣泛采用的方法。Atsuo Murata等在其研究中讓受試者根據(jù)CRT顯示的兩個(gè)三位數(shù)做加法，根據(jù)其完成時(shí)間和正確率給出疲勞狀態(tài)的標(biāo)定，該方法中，受試者對(duì)計(jì)算機(jī)給出的操作命令需要經(jīng)過(guò)一定的心算或者判斷過(guò)程來(lái)完成。文獻(xiàn)中通過(guò)聽(tīng)覺(jué)操作命令為實(shí)驗(yàn)任務(wù)的方法，在按一定時(shí)間間隔播放的聲音序列中，隨機(jī)插入動(dòng)作命令集合(上下左右)中的某一個(gè)，受試者聽(tīng)到聲音命令后按下鍵盤(pán)上預(yù)先設(shè)定好的鍵，依據(jù)受試者操作正確率來(lái)標(biāo)定其疲勞狀態(tài)。隨著實(shí)驗(yàn)進(jìn)行受試者精神達(dá)到一定疲勞狀態(tài)，由于操作命令相對(duì)簡(jiǎn)單，這種情況下，依照操作正確率標(biāo)定的疲勞狀態(tài)不能準(zhǔn)確反映受試者的疲勞狀態(tài)。本文采用基于腦電信號(hào)的精神疲勞測(cè)定技術(shù)，將TTS技術(shù)應(yīng)用到精神疲勞實(shí)驗(yàn)系統(tǒng)中，嘗試通過(guò)控制大腦認(rèn)知問(wèn)題的難度來(lái)提高精神疲勞實(shí)驗(yàn)的可控性，為后續(xù)精神疲勞的研究提供更可信有效的數(shù)據(jù)。

1 實(shí)驗(yàn)系統(tǒng)總體設(shè)計(jì)
1．1 實(shí)驗(yàn)系統(tǒng)總體設(shè)計(jì)思路
    TTS技術(shù)，又稱(chēng)文語(yǔ)轉(zhuǎn)換技術(shù)，它是將計(jì)算機(jī)自己產(chǎn)生的或外部輸入的文字信息轉(zhuǎn)換為能被人理解的、流利的語(yǔ)言輸出的技術(shù)。Microso ft Speech SDK 5．1全面支持中文語(yǔ)音應(yīng)用程序的開(kāi)發(fā)。SDK中的底層協(xié)議都以COM組件的形式完全獨(dú)立于應(yīng)用程序?qū)?，語(yǔ)音相關(guān)的工作由COM組件來(lái)完成，程序員只需根據(jù)應(yīng)用程序的需要調(diào)用相關(guān)的語(yǔ)音應(yīng)用程序接口(SAPI)就可以實(shí)現(xiàn)語(yǔ)音功能。通過(guò)編制相應(yīng)的軟件程序，調(diào)用Microsoft Speech SDK 5．1的動(dòng)態(tài)鏈接庫(kù)，利用系統(tǒng)中安裝的TTS引擎將精神疲勞實(shí)驗(yàn)中隨機(jī)生成的一個(gè)等式判斷命令語(yǔ)句由文本轉(zhuǎn)換為語(yǔ)音讀出來(lái)，受試者以聽(tīng)覺(jué)判斷命令為實(shí)驗(yàn)任務(wù)，同時(shí)由腦電采集設(shè)備采集腦電信號(hào)，然后根據(jù)受試者完成作業(yè)的質(zhì)量對(duì)相應(yīng)腦電信號(hào)數(shù)據(jù)進(jìn)行疲勞狀態(tài)的定量標(biāo)定。
    基于TTS技術(shù)和腦電采集設(shè)備的精神疲勞實(shí)驗(yàn)系統(tǒng)的總體設(shè)計(jì)流程如圖1所示。

1．2 硬件配置及開(kāi)發(fā)環(huán)境
    硬件配置條件：
    1)計(jì)算機(jī)
    實(shí)驗(yàn)用標(biāo)準(zhǔn)配置計(jì)算機(jī)一臺(tái)，另有耳塞式耳機(jī)或音箱。
    2)腦電信號(hào)采集設(shè)備
    腦電信號(hào)的采集要通過(guò)專(zhuān)用的儀器設(shè)備完成，以實(shí)現(xiàn)安全、有效、可靠的獲取人的腦電信號(hào)數(shù)據(jù)供進(jìn)一步的分析處理。腦電采集設(shè)備種類(lèi)繁多，文中使用由g．tec公司生產(chǎn)的g．USBamp信號(hào)放大采集設(shè)備，電極位置按照國(guó)際10—20標(biāo)準(zhǔn)導(dǎo)聯(lián)系統(tǒng)的電極安放，詳細(xì)電極位置見(jiàn)文獻(xiàn)。
    開(kāi)發(fā)環(huán)境配置條件：
    軟件運(yùn)行環(huán)境為Win7系統(tǒng)，安裝有Microsoft Simplified Chinese語(yǔ)音引擎，開(kāi)發(fā)工具為VC6．0。
 
2 實(shí)驗(yàn)系統(tǒng)各模塊設(shè)計(jì)與實(shí)現(xiàn)
    本實(shí)驗(yàn)系統(tǒng)的目的是完成標(biāo)定有相應(yīng)精神疲勞狀態(tài)的腦電信號(hào)數(shù)據(jù)的采集存儲(chǔ)，實(shí)驗(yàn)系統(tǒng)主要包括兩個(gè)部分：腦電采集和聽(tīng)警覺(jué)作業(yè)。
    腦電采集是通過(guò)腦電采集設(shè)備完成對(duì)受試者腦電信號(hào)的采集，聽(tīng)警覺(jué)作業(yè)是讓受試者對(duì)聽(tīng)到的判斷命令進(jìn)行判斷選擇，同時(shí)系統(tǒng)會(huì)記下受試者每次選擇判斷的時(shí)間和正誤，最后依據(jù)作業(yè)完成質(zhì)量對(duì)疲勞狀態(tài)進(jìn)行量化標(biāo)定。實(shí)驗(yàn)首先進(jìn)行腦電信號(hào)的采集，在腦電信號(hào)開(kāi)始采集的初始階段，只采集受試者的腦電信號(hào)，直到聽(tīng)警覺(jué)作業(yè)開(kāi)始的同時(shí)才進(jìn)行腦電數(shù)據(jù)的存儲(chǔ)。這樣即丟棄了開(kāi)始采集腦電信號(hào)時(shí)因設(shè)備不穩(wěn)定而獲取的不準(zhǔn)確數(shù)據(jù)，同時(shí)保證了存儲(chǔ)下來(lái)的數(shù)據(jù)是受試者在作業(yè)過(guò)程中的腦電信號(hào)數(shù)據(jù)。這兩部分工作分別由2個(gè)線程來(lái)完成。
2．1 腦電采集模塊
    腦電信號(hào)采集部分由數(shù)據(jù)采集線程來(lái)完成，其主要實(shí)現(xiàn)過(guò)程如圖2所示。

    m_EEGRunFlag為數(shù)據(jù)采集狀態(tài)標(biāo)志，開(kāi)始腦電采集后，開(kāi)啟腦電數(shù)據(jù)采集線程。腦電信號(hào)的獲取是由g．tec公司提供的API函數(shù)編程實(shí)現(xiàn)的，創(chuàng)建overlapped結(jié)構(gòu)事件對(duì)象的目的是避免阻塞線程，系統(tǒng)調(diào)用獲取數(shù)據(jù)的函數(shù)時(shí)可以立即返回，但是直到overlapped結(jié)構(gòu)中事件被觸發(fā)數(shù)據(jù)才是有效的，用WaitForSingleObject()函數(shù)來(lái)判斷數(shù)據(jù)傳輸是否結(jié)束，用GetOvedappedResuk()函數(shù)來(lái)檢索獲取的有效字節(jié)數(shù)目。此時(shí)在線程中只獲取而不存儲(chǔ)腦電數(shù)據(jù)，直到m_RunFlag為T(mén)RUE才開(kāi)始腦電數(shù)據(jù)的存儲(chǔ)。
2．2 聽(tīng)警覺(jué)作業(yè)模塊
    聽(tīng)警覺(jué)作業(yè)部分由作業(yè)線程來(lái)完成，其主要實(shí)現(xiàn)過(guò)程如圖3所示。

    m_RunFlag為聽(tīng)警覺(jué)作業(yè)狀態(tài)標(biāo)志，開(kāi)始作業(yè)后，開(kāi)啟作業(yè)線程。開(kāi)始聽(tīng)警覺(jué)作業(yè)的同時(shí)開(kāi)始數(shù)據(jù)采集線程中數(shù)據(jù)的存儲(chǔ)。受試者聽(tīng)到聲音后，對(duì)判斷命令進(jìn)行選擇判斷，兩次朗讀判斷命令時(shí)間間隔由定時(shí)器控制，受試者操作結(jié)束后，等待定時(shí)器被觸發(fā)系統(tǒng)朗讀下一次判斷命令。當(dāng)判斷命令達(dá)到50次時(shí)，m_RunFlag置為FAISE，同時(shí)數(shù)據(jù)采集線程中不再存儲(chǔ)數(shù)據(jù)，保存受試者作業(yè)信息，作業(yè)線程結(jié)束。其中，TTS朗讀判斷命令和受試者選擇操作的實(shí)現(xiàn)過(guò)程如圖4所示。

    a、b、c為隨機(jī)生成的整數(shù)，a、b、c的范圍可自由調(diào)整，通過(guò)調(diào)整a、b的范圍可以調(diào)整作業(yè)的復(fù)雜度，圖4中選擇進(jìn)行20以內(nèi)整數(shù)的加法。c由a、b隨機(jī)得到，最終生成的文本內(nèi)容可能正確可能錯(cuò)誤(如：可能是3+5=8或者15+7=19)。受試者在聽(tīng)到判斷命令后，經(jīng)過(guò)心算判斷系統(tǒng)讀出的判斷命令的正誤，然后按下鍵盤(pán)上預(yù)先設(shè)定好的鍵(如：錯(cuò)誤按←，正確按→)。受試者在聽(tīng)到判斷命令后的1．5 s內(nèi)按鍵視為有效操作，如果受試者沒(méi)有在有效時(shí)間內(nèi)按鍵或者沒(méi)有按鍵視為此次操作錯(cuò)誤。如果判斷正確，對(duì)應(yīng)正確操作次數(shù)m_Tnum加1。
2．3 實(shí)驗(yàn)系統(tǒng)實(shí)現(xiàn)
    基于以上實(shí)驗(yàn)系統(tǒng)各個(gè)模塊實(shí)現(xiàn)，利用微軟MFC基礎(chǔ)類(lèi)庫(kù)，添加相應(yīng)控件，編寫(xiě)代碼，生成精神疲勞實(shí)驗(yàn)系統(tǒng)界面如圖5所示。

    每次實(shí)驗(yàn)設(shè)定50次判斷命令任務(wù)，在一天中的不同時(shí)刻重復(fù)進(jìn)行實(shí)驗(yàn)。每次實(shí)驗(yàn)結(jié)束后，受試者在實(shí)驗(yàn)中的按鍵正確率和反應(yīng)時(shí)間都被記錄下來(lái)?？偟膶?shí)驗(yàn)結(jié)束后，統(tǒng)計(jì)受試者在各次實(shí)驗(yàn)中的按鍵正確率和反應(yīng)時(shí)間(平均反應(yīng)時(shí)間)，求出正確率和反應(yīng)時(shí)間的比值，記為RT，根據(jù)這個(gè)比值大小確定精神疲勞狀態(tài)。具體來(lái)講，對(duì)每一個(gè)受試者，將個(gè)人RT的范圍(最大值到最小值)平均分為5個(gè)部分，分別對(duì)應(yīng)疲勞狀態(tài)1到5。受試者每次實(shí)驗(yàn)對(duì)應(yīng)的疲勞狀態(tài)分別由RT的值落在哪個(gè)范圍來(lái)確定，至此完成了腦電信號(hào)數(shù)據(jù)對(duì)應(yīng)精神疲勞狀態(tài)的標(biāo)定。

3 實(shí)驗(yàn)系統(tǒng)部分關(guān)鍵技術(shù)實(shí)現(xiàn)
    文中使用文語(yǔ)轉(zhuǎn)換技術(shù)TTS。用聽(tīng)警覺(jué)作業(yè)設(shè)計(jì)實(shí)驗(yàn)來(lái)標(biāo)定受試者精神疲勞狀態(tài)時(shí)，通常需要加入預(yù)先設(shè)定好的聲音命令。將TTS技術(shù)應(yīng)用到精神疲勞實(shí)驗(yàn)系統(tǒng)中，通過(guò)調(diào)用TTS引擎，將文本內(nèi)容用近似于人的聲音“讀”出來(lái)，系統(tǒng)不需要大量聲音文件的支持，并且，TTS引擎只有幾兆字節(jié)，因此，它可以節(jié)省很大的存儲(chǔ)空間。
    TTS關(guān)鍵實(shí)現(xiàn)代碼如下：
   
   

4 結(jié)論
    文中利用TTS技術(shù)和腦電采集設(shè)備設(shè)計(jì)并實(shí)現(xiàn)了精神疲勞實(shí)驗(yàn)系統(tǒng)，同以往的精神疲勞實(shí)驗(yàn)系統(tǒng)相比，有明顯的優(yōu)勢(shì)。相較于固定的聽(tīng)覺(jué)操作命令，本系統(tǒng)的實(shí)現(xiàn)過(guò)程更加靈活，可把隨機(jī)生成的一個(gè)文本等式朗讀出來(lái)。并且，可根據(jù)受試者的反饋或?qū)嶒?yàn)需要自由調(diào)整實(shí)驗(yàn)難度。實(shí)驗(yàn)證明，這種情況下得到的操作正確率和反應(yīng)時(shí)間，對(duì)疲勞狀態(tài)的標(biāo)定更加準(zhǔn)確，為后續(xù)精神疲勞的研究奠定了一定的基礎(chǔ)。