一種在電紙書上實現多媒體課件的方法

專利名稱：一種在電紙書上實現多媒體課件的方法
技術領域：
本發明屬于電紙書技術領域，具體涉及一種基于電子紙顯示器(Ero)的實現多媒體教學的電紙書。
背景技術：
近年來出現了一種試圖模擬紙的特性的顯示器被廣泛地應用，在本申請中，我們統一稱之為電子紙顯示器(Ero)。這種類型的顯示器的其他名稱包括:類紙顯示器、零功率顯不器、6紙、雙穩態和電泳顯不器等。一般認為，這種可以實現像紙一樣閱讀舒適、超薄輕便、可彎曲、超低耗電的顯示技術叫做電子紙顯示器(以下稱為電子紙)技術；而電子紙即是這樣一種類似紙張的電子顯示器，其兼有紙的優點(如視覺感觀可以做到幾乎完全和紙一樣等)，又可以像我們常見的液晶顯示器一樣不斷轉換刷新顯示內容。目前實現電子紙技術的途徑主要包括有膽固醇液晶顯示技術、電泳顯示技術以及電潤濕顯示技術等。以電泳顯示技術為例，其顯示的工作原理是靠浸在透明或彩色液體之中的電離子移動，即通過翻轉或流動的微粒子來使像素變亮或變暗，并可以被制作在玻璃、金屬或塑料襯底上。具體技術是將直徑約為Imm左右的二氧化鈦粒子散布在碳氫油中，黑色染料、表面活性劑以及使粒子帶電的電荷控制劑也被加到碳氫油中，將這種混合物放置在兩塊間距為10 IOOmm的平行導電板之間，當對兩塊導電板施加電壓時,這些粒子會以電泳的方式從所在的薄板遷移到帶有相反電荷的薄板上。當粒子位于顯示器的正面(顯示面)時，顯示屏為白色，這是因為光通過二氧化鈦粒子散射回閱讀者一方；當粒子位于顯示器背面時，顯示器為黑色，這是因為彩色染料吸收了入射光。如果將背面的電極分成多個微小的圖像元素(像素)，通過對顯示器的每個區域加上適當的電壓來產生反射區和吸收區圖案，即可形成圖像。電泳技術具有下述的幾大優勢:一是能耗低，由于具有雙穩定性，在電源被關閉之后，仍然可在顯示器上將圖像保留幾天或幾個月；二是電泳技術生產的顯示器屬于反射型，因此具有良好的日光可讀性，同樣也可以跟前面或側面的光線結合在一起，用于黑暗環境；三是具有低生產成本的潛力，因為該技術不需要嚴格的封裝，并且采用溶液處理技術如印刷是可行的；四是電泳顯示器以形狀因子靈活為特色，容許它們被制造在塑料、金屬或玻璃表面上，所以它是柔性顯示技術的最佳選擇。電子紙顯示器(EPD)技術與傳統陰極射線管(CRT)或現在的主流顯示器液晶顯示器(LCD)相比，其功耗要低得多。也正是因為上述顯示原理，電子紙顯示器典型地為反射外界光線進行閱讀的而不是背光透射的，因此，他們能夠使用環境的光而不要求設備中自帶的光源。傳統的發散型顯示設備可以自己發光，所以即使在光線暗淡的條件下也可以正常使用。但是，隨著環境光強度的增加，這種顯示器的顯示效果就不那么令人滿意了，因為較強的環境光提高了黑色素的亮度并降低了對比度，這也是我們無法在陽光直射的情況下看清顯示器上文字的原因。而反射型顯示器是通過反射環境光來顯示圖像的，圖像的亮度會根據環境光線的強度改變，而且對比度也會隨之變化，所以在強烈光線下反射型顯示器的優勢更明顯。近來隨著Ero技術的突飛猛進，使得電紙書在全世界普及開來。電子紙具有的低功耗和自然光閱讀的優點日益成為人們夠買電紙書的原因。但是，隨著人們越來越多的使用電紙書，人們也發現了電紙書尚存在的很多缺陷。最主要的缺陷是:電紙書的顯示原理造成了其響應速度慢、翻頁慢、刷新率低。當然隨著技術進步，這種情況會得到緩解，但是隨著刷新率的提高又會造成電量的耗費。現在電子紙因為刷新率低無法播放現有視頻和動畫，由于電子紙的刷新率普遍低于10次每秒，播放動畫和視頻要20次以上，而現有的教程類視頻，尤其是PPt轉成的演講和csf等視頻教程，其內容轉化慢，完全沒有必要以視頻格式在電紙書上呈現，這種情況也存在于現有flash動畫版本的教程。真正的教師課堂，其內容轉化速度很低，基本是在幾秒到幾分鐘才刷新一次正在講的內容。在傳統黑板教學中，這種情況體現在教師每講一段就書寫一段板書或者畫圖示意，然后繼續講解，循環往復構成了整個課堂教學的過程。現有視頻教程有幾種:一種是直接錄制板書和講課過程，比如步步高公司的好些視頻，包括黃網中學的教學視頻；又比如全球開展火熱的公開課程運動，耶魯大學，哈佛大學，麻省理工學院的好些課程基本都采用這種形式。再有就是現在演講和課堂普遍采用的PPt加講解或者PPt加板書模式，比如中國大學公開課程普遍采用的CSf格式的視頻教程，或者各種發布會或者TED演講采用的人物加ppt做成的視頻格式的演講。還有一種電子板書模式，有的是用單機軟件制作的，比如美國Khan學習網上的教學視頻，都是用手寫板和屏幕錄像軟件制作的，還比如中國的好些網絡家教，類似24小時家教網用電子白板錄制的課件。以上這些傳統往往以.rm、.rmvb、.av1、.wmv等格式呈現出來,但是現有電紙書暫時支持不了每秒幾十幀的刷新，就算以后能夠支持，這種內容變化緩慢的視頻教程也是對電能的一大浪費，與電子紙低功耗的初衷產生了背離。所以現有視頻教程的這些實現形式已經無法滿足電紙書對于播放課程的要求了。另外，近年來，點讀筆及其配套圖書近年來掀起了一大熱潮，迅速豐富了兒童閱讀市場的內容。但是，隨著大量的點讀筆配套的圖書的生產和銷售，大量的紙張浪費隨帶來的資源流失和環境污染問題日益嚴重起來。所以這種浪費自然資源而且造成環境污染的多媒體教材實現方式有待改進。目前用于電泳顯示的使開關時間達到幾十毫秒的更快的材料正在開發之中。所以，迄今為止，電紙書仍然無法播放圖文并茂的視頻教程和演講。目前電紙書能播放的格式有:文本:txt、htxt、pdf、doc、xls、ppt、html、epub、chm、fb2 ;圖像:jpg、bmp、gif、png ;音頻:mp3等。電紙書現在的只有TTS發生引擎能讀取文件內容，實現簡單的多媒體，但是對于實現圖文并茂的多媒體講座和講課，現有電紙書還做不到。隨著顯示技術的進步，以后可能會出現刷新率很高的可以播放視頻的電紙書，但是如果播放課件，過高的刷新率違背了電紙書低功耗的優點，所以我們需要一種匹配電子紙特性的多媒體教程格式。當今全球無紙化教學已是大勢所趨，電紙書進行無紙化教學無疑 是最佳選擇，在電紙書上實現多媒體教學課程也是迫切需要的。

發明內容
本發明的目的在于提供一種能夠適應電紙書翻頁之后無需供電即可保存圖像這種特性的在電紙書上實現多媒體課件的方法，用于解決現有技術存在的電紙書無法播放現有多媒體教程(這里多媒體教程指的是圖文并茂并且有聲音的教程，包括電影、電視、動畫等等，表現為格式包括.rm、.rmvb、.wmv、.f lv、.mp4、.avi等主流的視頻格式,也包括.csf專門的格式，當然還包括.swf這種flash動畫，當然也包括其他的課件形式，比如pc上播放的.exe電子雜志等，特別的，還包括紙質教材配套音頻講解的教材形式，整體上算是“多媒體”比如少兒故事書和配套的講解朗讀音頻，比如，市面上上已經普及的點讀筆及其配套教材)以及現有動畫和視頻教程在畫面不變情況下不停刷新導致電能浪費等問題。在此有必要首先定義一下電紙書可以播放的視頻格式，我們暫且稱之為Ero格式。這種格式的重要特點就是音配內容和圖像內容是關聯的，也就是說音頻的講解內容是對圖像中的文字和圖形進行的講述。它可以看做是每張圖像匹配一段相應的音頻文件的講解或說明的連貫整體，也可以看做在整個音頻講解背景下的圖像按其音頻講解的內容一張一張的播放的一個整體。值得注意的是，這兩種形式的圖像或者音頻都是按照時間前后順序和內容的關聯關系銜接在一起的。所包含的內容像PPt格式，但是背景音樂是教師或者說演講者的講課音頻。這種格式就是在電紙書上實現多媒體課件的一種表現形式。本發明為解決上述技術問題所提供的方案是創造一種符合電子紙翻頁一次圖像可以留存一段時間但是不耗電這個特性的新的多媒體教程格式，使得圖文聲并茂的多媒體教程和講座可以在電紙書上實現。這種在電紙書上實現多媒體課件的方法包含以下步驟:
(I)、把多媒體教程中的每一段音頻所對應的有效教學內容提取出來，形成一幅圖像；(2)、確定這幅圖像所含有效教學內容所對應的音頻文件；(3)、把上述步驟(I)中所述的有效教學內容的圖像和它所對應的音頻文件在時間軸上同步；(4)、把所有的包含有效教學內容的圖像及其對應的音頻，按照時間先后順序和內容的關聯關系排列，形成一個完成的電紙書可以播放的文件。本發明的實現還在于:所述的每一段音頻指的是一個課程分割開來的音頻，是按照意群分割的，根據不同意群有一種或多種分割方式，并對應相應的圖片，每段音頻對應相應的圖像。本發明的實現還在于:前述步驟⑴中所述有效圖像內容指的是步驟⑵中所對應音頻講解的內容，其形式為一張圖像的全部圖文內容，也可以是局部圖文內容。本發明的實現還在于:前述步驟(I)所述最終形成圖像的有效內容信息是講解音頻所對應的動畫或視頻的每一個圖像，圖像整體變化或者局部變化都對應一段講解內容，比如CSf教程，其有效的內容信息就是講解音頻所對應的PPt錄像的每一個圖像，PPt圖像整張變化或者局部變化都對應一段講解內容。本發明的實現還在于:前述步驟(I)中所述的音頻是一段有獨立起始點的音頻文件或/和整個課件整體背景音頻文件中對應圖像中有效內容的一部分音頻文件，或是事先錄制好的教師或者演說者的講解或者說明的錄音，或是圖像內的文字圖形及包括標量和矢量在內的各種圖形格式，音頻文件的內容與圖像中的有效內容不是TTS式的文字和音頻一一對應關系。也就是說講解或說明的聲音中的語言文字和圖像中的文字可以不同，但是其內容意思相關。這也涵及現有計算機發音引擎的發音機制，比如TTS發音引擎是通過程序識別文本內容，通過語音識別技術和模擬發音技術實現和文本對文本的講解或說明，所表述內容及文本內容。本發明的實現還在于:前述步驟(2)中所述的對應的音頻文件指的是此段音頻所包含的內容為對這張包含有效內容圖像的講解或講述。本發明的實現還在于:前述步驟(3)中所述的“同步”是每張圖像內容都通過相應音頻文件得到有效講解和說明，也就是說，我們能在這種音頻文件提供的講解或者說明的時候，一直看到的是相應的圖像；這在時間軸上看，每幅圖像占用的時間不小于(可以超過但是不能小于)關于此圖像有效內容的講解或說明音頻文件所占用的時間。本發明的實現還在于:前述步驟(3)中所述的在時間軸上同步，在沒有聲音的音頻銜接段，圖像是否對應這段音頻文件不作要求，其圖像與圖像的轉換方式類似PPt中的轉換方式。本發明的實現還在于:前述步驟(4)中所述最終形成的在電紙書上播放的文件，是一段課程、一段演講、一段詩歌或者散文的朗誦、一幅圖像或多幅圖像組成的組成的文件，或者一幅圖像對應相應講解或說明構成的文件，但是不管是什么形式和內容，這些文件中每個圖像對應的音頻文件的講解或說明連貫的，按照時間順序和內容的意義關聯銜接的。本發明的實現還在于:前述步驟(4)中所述最終形成的在電紙書上播放的文件與電紙書底層操作系統和硬件相匹配，現有各種型號和品牌電紙書常用的系統，均可播放圖像和聲音，現有各種操作系統:包括linux、android、Symbian、wince、kindle或者其他各個廠商自己定制的系統，都支持音樂和圖像的播放，也就都由操作系統內嵌程序或者上層應用(自己的或第三方的)來實現這種圖像和聲音在時間軸上同步匹配的多媒體文件格式。時間軸定義:所謂的時間軸，就是多媒體文件中將聲音和影像按照時間順序組合在一起的一個形象化的概念。與現有技術相比，本發明具有的有益效果是:一、本發明通過將講座和講課內容在時間軸上的匹配，有效地再現了真是講課的過程。特別是這種方法能夠在電紙書上進行實現；二、本發明巧妙的結合和講課或者講座在內容上的變化特性和電紙書翻頁之后不持續供電就可以保持圖像的特性，實現了符合電子紙特性的課件形式，減少了無效信息的刷新冗余，最大程度的節省了消耗的電能；三、本發明通過對講課內容的分解，使得傳統視頻或者動畫教程多幀顯示同一畫面的情況得到改善，大幅降低了視頻的數據量，對帶寬壓力和單機存儲課程數量都很有好處。以最低的數據量實現了電子課程，以最低的耗電量實現了無紙化教學。


圖1為在電紙書上實現多媒體課件的方法的流程圖。圖2為實現方法基于的系統路徑示意圖。圖3為電紙書多媒體文件的時間軸表述(從左到右箭頭所指時間延伸方向，表示事件發展過程)。圖4為局部轉換和整體轉換對比圖。圖5為csf格式有效內容局部截圖的示意圖。
具體實施例方式本發明所述的在電紙書上實現多媒體課件的方法形成了一種在現有電紙書硬件配置基礎之上的觀看多媒體課件的解決方案。參見圖2描示的實現方法基于的系統路徑所示:電紙書多媒體課件的制作系統由PC機201、電紙書202和服務器203組成。PC機201連接電紙書202和服務器203，其中電紙書202既可以從PC端下載制作好的多媒體課件，又可以從服務器直接下載(電紙書帶有硬件連接設備，比如藍牙，wifi等)。電紙書多媒體課件可以在201所示PC人工(指的是截圖，錄音等由人一步一步操作完成)或者自動(指的是有自動制作電紙書多媒體課件的軟件一步一步的完成)制作，又可以在服務器上自動或人工制作。當然，如果電紙書本身硬件和軟件條件具備，也可以在電紙書上制作電子書多媒體課件。本發明直接解決了電紙書不能觀看課件，和現有視頻和動畫這種方式與電子紙顯示和刷新方式不匹配的問題。從而達到了在電紙書上實現播放多媒體課件的目的，使得電紙書能夠播放的內容極大豐富了。參見附圖1，本發明所述在電紙書上實現多媒體課件的方法的主要實現過程如下:步驟110:把多媒體教程中的每一段音頻所對應的有效教學內容提取出來，形成
一幅圖像。所述多媒體教程包括電影、電視、動畫等等,表現為格式包括.rm、.rmvb、.wmv、.flv、.mp4、, avi等主流的視頻格式,也包括.csf專門的格式,還包括.swf這種flash動畫，當然也包括其他的課件形式，比如pc上播放的.exe電子雜志等,特別的，它還包括市面上已經普及的點讀筆及其配套教材，只要符合能夠提取靜態有效課程內容的多媒體教材都可以當做目標文檔。這里所述能夠提取靜態有效課程內容的視頻，舉例如下:如圖5含有與音頻內容意義關聯的文字和/或圖形和/或內嵌圖片的示意圖像，這些圖像中所包含的與音頻內容意義關聯的文字和/或圖形和/或內嵌圖片等，即所述有效內容。基于上述可以提取有效教學內容的視頻，我們提取有效教學內容主要有兩種方式:第一種是根據視頻或者動畫教程的圖像內容變化確定有效內容。具體方式可以是識別文字變化，得知有效內容的變化，也可以根據圖畫變化得知有效內容變化。第二種則是根據音頻講解或者說明的意群來識別有效信息的變化。比如講解一道題目，從開始到結束，我們可以感知整個內容的變化，依次提取含有相應有效內容的圖片。步驟110實現的特別點在于，所述的每一段音頻指的是一個課程分割開來的音頻，是按照意群分割的，可以根據不同意群有不止一種分割方式，對應的圖片也有所不同，但只要這段音頻對應相應圖像就可以了。其對應時間軸如圖3圖像和音頻的時間軸表述。圖中所標記的圖像I對應的音頻是IC到1D，圖像2所對應的音頻是2C到2D，那么他們分別對應圖像I和圖像2。另一種分法可以是把IC到2D當做一段音頻，那么所對應的圖像就是圖像I和圖像2的集成，對應的時間是IA到2B，與IC到2D的音頻是對應的。但是有時候從既有的視頻教程轉化的話，圖像I和圖像2無法合并成一個圖像，那么圖像I的音頻和圖像2的音頻就無法合并成一段。步驟110實現的特別點還在于，所述的有效內容指的是所對應音頻講解的內容，其形式可以為一張圖像的全部圖文內容。如新東方flash課件中，基本上全部圖文內容都是有效內容，都包含音頻講解中的有效課件信息；當然也可以是局部圖文內容，如TED演講的截圖，其中觀眾，舞臺效果等，都不是有效內容，和演講音頻錄音中的有效內容關系不大，只有演講人的肢體語言和PPt上的內容才是有效演講內容。步驟110實現的特別點還在于，所述的最終形成的圖像具體可以表現為一幅所有內容按照一定壓縮格式形成的圖像，也可以表現為PPt那種預設背景圖片上播放文字和/或圖形和/或內嵌圖片等形成的臨時圖像，當然每張PPt幻燈片在形式上都是一幅圖像。步驟110實現的特別點還在于，所述的最終形成的圖像的提取方式，可以是通過對視頻和動畫文件進行截圖，或者對紙質教材比如點讀筆使用的書籍或漫畫上的圖文進行拍照(類似定格動畫的制作過程)，當然每張ppt幻燈片在形式上都是一幅圖像。步驟120:確定這幅圖像所含有效教學內容所對應的音頻文件。步驟120實現的特別點在于，如圖3圖像和音頻的時間軸表述所示。步驟120中所述的音頻可以看做一段有獨立起始點的音頻文件，比如時間軸上的IC到ID這段時間的音頻可以看做獨立的一段，也可以看做整個課件整體背景音頻(從IC到ID到2C到2D到NC—直到整個文件音頻結束點)文件中對應圖像中有效內容的一部分音頻文件。步驟120實現的特別點還在于，音頻是事先錄制好的教師或者演說者的講解或者說明的錄音以及對圖像內的文字圖形(各種圖形，包括標量和矢量的各種圖形格式等)等，音頻文件的內容與圖像中的有效內容不一定是文字對應關系。也就是說講解或說明的聲音中的語言文字和圖像中的文字可以不同，但是內容意思相關。這與現有計算機發音引擎的發音機制:比如TTS發音引擎是通過程序識別文本內容，通過語音識別技術和模擬發音技術實現和文本對文本的講解或說明，所表述內容及文本內容。步驟130:把步驟120中所述包含有效內容的圖像和它所對應的音頻文件在時間軸上同步。步驟130實現的特別點在于，所述的“同步”是每張圖像內容都通過相應音頻文件得到有效講解和說明，也就是說，我們能在這種音頻文件提供的講解或者說明的時候，一直看到的是相應的圖像，如圖3電紙書多媒體文件的時間軸表述。所述“同步”這在時間軸上看，圖像I從出現到消失所占用的時間段為IA到IB之間，其對應的音頻講解從開始到結束所占用的時間段是IC到ID之間。要想達到每幅圖像都得到充分講解，換句話說，每段講解在進行的時候，圖片都可以看到這個效果，那么圖像占用的時間至少能完全覆蓋(可以超過但是不能小于)關于此圖像有效內容的講解或說明音頻文件所占用的時間。具體表現為:1A總是在IC左側或者重疊，而IB總在ID右側或者重疊。整體上看IA到IB整體大于等于IC到ID的時間段，形式上表現為覆蓋，有聲音就有響應圖片，沒有聲音也可能有圖片。步驟140:把所有的包含有效內容圖像及其對應的音頻，按照時間前后順序和內容的關聯關系排列，形成一個完成的電紙書可以播放的文件。步驟140實現的特別點在于，所述最終形成的在電紙書上播放的文件，可以是一段課程，也可以是一段演講或者一段詩歌或散文的朗誦，但是不管是什么形式和內容，其每個圖像對應的音頻文件的講解或說明連貫的，按照時間順序和內容的關聯關系銜接的。關于時間先后順序，如圖3電紙書多媒體文件的時間軸表述。圖像I和圖像2在時間上是明顯的先后順序(這里的先后不是絕對的關系，圖像I消失的時間IB和圖像2出現的時間2A是可以重疊的，所謂先后即2A不能先于IB出現)。關于內容的關聯，如圖3圖像I和圖像2在內容上是銜接的；與此對應，圖像I的音頻講解和圖像2的音頻講解在內容上也是銜接的。所謂銜接就是中間沒有內容跳躍，兩段講解可以合成一個整體。步驟140實現的特別點在于，所述最終形成的在電紙書上播放的文件，可以是一幅圖像或多幅圖像，如圖3，一幅圖像也能形成一個最終文件。如果是多張圖像，那就直接到圖像的NNA和音頻的NNC (這里N大于等于2)。但是不管多少幅圖像，其有效內容和音頻文件講解或說明的內容是對應的，相關的。步驟140實現的特別點在于，所述最終形成的在電紙書上播放的文件，兩個連續的圖像變化時，由于不同時間音頻講解對應的有效內容是不同的，從而對應的圖像不同。從而出現了不同的轉換方式。各段間的轉換在講課效果上一樣，不同的有效內容的選取，不影響講解的詳盡程度。只要所有的有效內容所對應的圖片都能被詳盡的講解就達到授課或者演講的目的了。步驟140實現的特別點在于，如圖3所示，在沒有聲音的音頻銜接段，圖像是否對應這段音頻文件不作要求，也就是說，隨著這段音頻講解或說明的結束，這幅圖像存在的目的就已經完成了，那么在下一段音頻講解開始之前或者開始的時候，下一段音頻所對應的圖像就應該顯示在屏幕上了。當然兩幅圖像之間可以有一定間隔，這個間隔對應的是音頻的空白，可以看做音頻銜接點或者音樂的休止符。步驟140實現的特別點在于，所述最終形成的在電紙書上播放的文件，是匹配電紙書底層操作系統和硬件的。現有電紙書不管是什么系統，均可播放圖像和聲音，所愿意不管是什么操作系統:linux、android、Symbian、wince、kindle或者其他各個廠商自己定制的系統，都支持音樂和圖像的播放，也就都可以通過操作系統內嵌程序或者上層應用(自己的或者第三方的)來實現這種圖像和聲音在時間軸上同步匹配的多媒體文件格式。 以下將通過三個具體實施例對本發明內容做進一步說明。實施例一:flash轉化而來的局部圖像變化對應相應音頻的電紙書多媒體文件的實現。步驟(I):把一個flash教程文件通過截圖的形式，將有效教學內容提取出來，形成一幅幅圖像。步驟(2):通過錄音或者音頻抓軌的形式提取出上述圖像中有效內容所對應的音頻講解。步驟(3):把步驟(I)中所述包含有效內容的圖像和步驟120所述它所對應的音頻文件在時間軸上安排各自的位置，實現圖片和相應音頻的同步。步驟(4):把所有已經同步的包含有效內容圖像及其對應的音頻，按照時間前后順序和內容的關聯關系排列，形成一個完整的電紙書可以播放的文件。類似此示例的還有軟件類教程，比如洪恩英語的一些圖文教程或者科利華的一些圖文教程；國外的有羅塞塔石碑等，都可以用此種方式實現電紙書多媒體課件。實施例二:將csf在電紙書上以電紙書多媒體課件的形式實現。
背景說明CSF格式文件是江蘇科建教育軟件有限公司開發的流媒體格式，它可以把PPT和教師講課的視頻完美結合，很多大學和大型企業使用這套軟件進行教學錄像和遠程教育，簡稱科建流媒體格式，有的人甚至稱其為“大學課程專用格式”。CSF 課件是由科健公司提供的 ScenicRecorder、ScenicLive、ScenicStation 等相關產品在實際中的授課過程中實時記錄而成，因而能夠充分體現現場教學情景，體現現場氣氛，提供更強的教學效果。步驟(I):把一個csf文件中ppt錄像的每一個幻燈片(Slide)以截圖的方式提取出來，形成一幅幅包含有演講或講座內容的圖像，如圖5所示。步驟(2):確定這幅圖像所對應的音頻講解或說明，可以以音頻抓軌的形式或者錄音的形式實現。步驟(3):把步驟110中所述包含有效內容的每幅圖像和步驟120中它所對應的音頻文件通過時間軸確定各自位置，實現圖像和相應音頻的同步。步驟(4):把所有的包含有效內容圖像及其對應的音頻，按照時間前后順序和內容的關聯關系排列，形成一個完成的電紙書可以播放的文件，也可以看做電紙書多媒體格式的制作。類似此示例的還有TED演講的PPT部分及其錄音，各種其他學術演講，講座也是PPT加上演講音像的形式，凡此種種，都能用這種方式實現。flash動畫教程(比如新東方的那種)也可以做成此類。實施例三:百科全書及其配套mp3光盤的類似ppt模式的電紙書可以播放的多媒體課件的實現。背景信息:百科全書一般配套光盤，這里光盤中內容指的是音頻內容。步驟⑴:所示把多紙質百科全科中的每一頁用照相機排成圖像，按照時間和內容的順序排列。步驟(2):確定這幅圖像所含有效教學內容所對應光盤中的講解部分。把這段音頻的起始點確定。步驟(3):把步驟(I)中所述百科全書所拍成的每一幅圖像和它所對應的音頻講解在時間軸上同步，形成一個個圖像配套音頻講解的整體。步驟(4):把步驟(3)中所述整體，按照時間前后順序和內容的關聯關系排列，形成一部電紙書可以播放的多媒體百科全書。當然，類似此示例的還有將課本相關頁面或者演講稿相關頁面或者漫畫相關頁面及其講解和/或說明和/或漫畫對白等的相應音頻文件做成電紙書能夠播放的多媒體課件格式，都能用這種方式實現。flash動畫教程(比如新東方的那種)也可以做成此類。特別點包括，所述步驟(I)和步驟(2)和步驟(3)和步驟⑷可以手動進行也可以自動進行(即由專門的電紙書多媒體文件制作軟件完成，類似于各種視頻格式的轉換軟件和制作軟件)。比如步驟(I)，具體到在視頻教程中“截圖”這個動作，可以由人來手動完成，從識別含有有效信息的圖像，到截圖到保存等；也可以由軟件自動完成，具體而言，就是有一種轉化軟件，可以自動識別含有有效信息的圖像，然后自動截圖保存為了下面的步驟做準備。同樣的，步驟B的音頻提取也可以有手動，點擊視頻播放軟件的聲音抓軌按鈕或者由轉化軟件自動進行。同理，步驟⑶和步驟⑷都可以用手動和自動兩種方式進行。特別點還包括，所述步驟(I)和步驟(2)可以同步進行，即對動畫和音頻可以同時操作。舉例說明，比如轉化csf軟件到電紙書多媒體文件，對于PPt部分的截圖和csf背景音頻提取可以同時進行。最后基于上述幾個實施例，申請人做出如下聲明:本發明上述在電紙書上實現多媒體課件的方法可以實現與各種電紙書硬件廠商合作的目的，即將利用本發明所提供在電紙書上實現多媒體課件的方法設計出來的可以在電紙書上播放的多媒體課件格式及其特定播放軟件與各種型號的電紙書設備進行捆綁，包括軟件捆綁(這里指的捆綁指的是使用軟硬件加密等方法，亦是指這種課件格式只能在特定的設備上播放)和硬件捆綁銷售，既可以促進軟件的銷售，還可以增強硬件的銷售，達到雙盈的目的。當然課件也可以推出通用版本，即在任何硬件設備包括PC上都可以播放的格式。以上所述，僅為本發明的較佳實施例而已，并非用于限定本發明的保護范圍，凡在本發明的精神和原則之內，所作的任何修改、等同替換、改進等，均應包含在本發明的保護范圍之內。即本發明不僅僅限于上述的實施例，還有很多其他具體表現形式。
權利要求
1.一種在電紙書上實現多媒體課件的方法，其特征在于，包含以下步驟: 1.1把多媒體教程中的每一段音頻所對應的有效教學內容提取出來，形成一幅圖像； 1.2確定這幅圖像所含有效教學內容所對應的音頻文件； 1.3把上述步驟1.1中所述的有效教學內容的圖像和它所對應的音頻文件在時間軸上同步； 1.4把所有的包含有效教學內容的圖像及其對應的音頻，按照時間先后順序和內容的關聯關系排列，形成一個完成的電紙書可以播放的文件。
2.如權利要求1所述的在電紙書上實現多媒體課件的方法，其特征在于:所述的每一段音頻指的是一個課程分割開來的音頻，是按照意群分割的，根據不同意群有一種或多種分割方式，并對應相應的圖片，每段音頻對應相應的圖像。
3.如權利要求1所述的在電紙書上實現多媒體課件的方法，其特征在于:步驟1.1中所述有效圖像內容指的是步驟1.2中所對應音頻講解的內容，其形式為一張圖像的全部圖文內容或局部圖文內容。
4.如權利要求1所述的在電紙書上實現多媒體課件的方法，其特征在于:步驟1.1所述最終形成圖像的有效內容信息是講解音頻所對應的動畫或視頻的每一個圖像，圖像整體變化或者局部變化都對應一段講解內容。
5.如權利要求1所述的在電紙書上實現多媒體課件的方法，其特征在于:步驟1.2中所述的音頻是一段有獨立起始點的音頻文件或/和整個課件整體背景音頻文件中對應圖像中有效內容的一部分音頻文件，或是事先錄制好的教師或者演說者的講解或者說明的錄音，或是圖像內的文字圖形及包括標量和矢量在內的各種圖形格式。
6.如權利要求1所述的在電紙書上實現多媒體課件的方法，其特征在于:步驟1.2中所述的對應的音頻文件指的是此段音頻所包含的內容為對這張包含有效內容圖像的講解或講述。
7.如權利要求1所述的在電紙書上實現多媒體課件的方法，其特征在于:步驟1.3中所述的“同步”是每張圖像內容都通過相應音頻文件得到有效講解和說明，即在時間軸上看，每幅圖像占用的時間不小于關于此圖像有效內容的講解或說明音頻文件所占用的時間。
8.如權利要求1所述在電紙書上實現多媒體課件的方法，其特征在于:步驟1.3中所述的在時間軸上同步，在沒有聲音的音頻銜接段，圖像是否對應這段音頻文件不作要求，其圖像與圖像的轉換方式類似PPt中的轉換方式。
9.如權利要求1所述的在電紙書上實現多媒體課件的方法，其特征在于:步驟1.4中所述最終形成的在電紙書上播放的文件，是一段課程、一段演講、一段詩歌或者散文的朗誦、一幅圖像或多幅圖像組成的組成的文件，或者一幅圖像對應相應講解或說明構成的文件，這些文件中每個圖像對應的音頻文件的講解或說明連貫的，按照時間順序和內容的意義關聯銜接的。
10.如權利要求1所述的在電紙書上實現多媒體課件的方法，其特征在于:步驟1.4中所述最終形成的在電紙書上播放的文件與電紙書底層操作系統和硬件相匹配，現有各種型號和品牌電紙書常用的系統，均可播放圖像和聲音，現有各種操作系統:包括linux、android、Symbian、wince、kindle或者其他各個廠商自己定制的系統，都支持音樂和圖像的播放，也就都由操作系統內嵌程序或者上層應用來實現這種圖像和聲音在時間軸上同步匹配的多媒體文 件格式。
全文摘要
本發明涉及一種在電紙書上實現多媒體課件的方法，包含以下步驟(1)把多媒體教程中的每一段音頻所對應的有效教學內容提取出來，形成一幅圖像；(2)確定這幅圖像所含有效教學內容所對應的音頻文件；(3)把上述步驟(1)中所述的有效教學內容的圖像和它所對應的音頻文件在時間軸上同步；(4)把所有的包含有效教學內容的圖像及其對應的音頻，按照時間先后順序和內容的關聯關系排列，形成一個完成的電紙書可以播放的文件。本發明提供的方案創造了一種符合電子紙翻頁一次圖像可以留存一段時間但是不耗電這個特性的新的多媒體教程格式，使得圖文聲并茂的多媒體教程和講座可以在電紙書上實現。
文檔編號G09B5/06GK103177611SQ20111043992
公開日2013年6月26日 申請日期2011年12月23日 優先權日2011年12月23日
發明者李云峰, 孫朋朋 申請人:李云峰