通過組合素材生成樂音的制作方法

專利名稱：通過組合素材生成樂音的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及用于組合聲音素材并且基于組合的聲音素材可聽見的生成樂音或音樂聲的技術(shù)。
背景技術(shù)：
迄今已經(jīng)存在將多種片段聲音素材預(yù)存儲在數(shù)據(jù)庫中，并且選擇性地組合某些預(yù)存儲的聲音素材以基于組合的聲音素材生成樂音(即樂音波形)的已知技術(shù)。用于生成樂
音的各聲音素材是從預(yù)存儲在數(shù)據(jù)庫中的多種聲音素材中選擇的。為了便于選擇聲音素材，將存儲在數(shù)據(jù)庫中的所述多個(gè)聲音素材分類成指示各種音樂特征的類別。日本專利申請?zhí)卦S公開第2010-191337號公開了從多個(gè)樂曲的連續(xù)聲音波形中提取多個(gè)聲音素材、將所提取的聲音素材分入各個(gè)類別、然后將分類后的聲音素材存儲在數(shù)據(jù)庫中的技木。用于使用存儲在數(shù)據(jù)庫中的某些聲音素材可聽見的生成樂音的聲音生成風(fēng)格(style)例如由用戶等預(yù)先確定，其中用戶等還定義聲音生成所要使用的聲音素材以及聲音素材的聲音生成定時(shí)。因此，用戶必須確定與將要可聽見的生成或者發(fā)聲的樂音的數(shù)量相同的聲音素材和聲音生成定時(shí)的組合。于是，由用戶設(shè)置多個(gè)聲音素材和聲音生成定時(shí)的組合所創(chuàng)建的樂曲越長，則用戶需要執(zhí)行的操作量越大。較長的樂曲可能包含某一部分，在該部分上重復(fù)地可聽見的生成或者發(fā)聲預(yù)定時(shí)間周期的特定聲音生成風(fēng)格(或聲音生成內(nèi)容)。在這種情況下，用戶有時(shí)可以通過復(fù)制該部分的聲音素材和聲音生成定時(shí)的組合并且將復(fù)制的組合應(yīng)用于該樂曲的另ー時(shí)間周期，來簡化必需的操作。不過，應(yīng)用這樣簡單地復(fù)制可能會不利地導(dǎo)致樂曲單調(diào)。為了避免這種問題，用戶有時(shí)可以嘗試改變所復(fù)制的樂曲部分的特效而不對樂曲的前進(jìn)流程作出顯著改變。在這種情況下，用戶實(shí)際上改變了要發(fā)聲的聲音素材(即目標(biāo)聲音素材)的類型，而不改變聲音生成定時(shí)。不過，由于存在改變所有目標(biāo)聲音素材的類型的需要，上述方法可能無法實(shí)現(xiàn)操作的簡化。

發(fā)明內(nèi)容
鑒于上述現(xiàn)有技術(shù)中的問題，本發(fā)明的目的是提供一種改進(jìn)的技木，在通過組合聲音素材以生成樂音的情況下，該技術(shù)有助于重新組合要使用的聲音素材，于是能夠容易地改變例如樂曲的部分時(shí)間周期內(nèi)的樂曲的特效。為了實(shí)現(xiàn)上述目的，本發(fā)明提供了一種改進(jìn)的聲音生成控制裝置，其包括顯示控制部分，其在顯示屏幕上顯示具有時(shí)間軸的圖標(biāo)放置區(qū)域的圖像，并且在圖標(biāo)放置區(qū)域中與時(shí)間軸上的期望時(shí)間位置相關(guān)聯(lián)地顯示圖標(biāo)圖像，其中圖標(biāo)圖像與特征量信息相關(guān)聯(lián)，所述特征量信息表示包括聲音素材波形的素材數(shù)據(jù)的特征；設(shè)置部分，其與圖標(biāo)放置區(qū)域的時(shí)間軸上的期望時(shí)間范圍相關(guān)聯(lián)地設(shè)置要被使用的特定數(shù)據(jù)庫，所述特定數(shù)據(jù)庫是從存儲與特征量信息相關(guān)聯(lián)的素材數(shù)據(jù)的多種類型的數(shù)據(jù)庫中選擇的；和聲音生成控制部分，其基干與圖標(biāo)圖像相關(guān)聯(lián)的特征量信息來從數(shù)據(jù)庫獲取素材數(shù)據(jù)，并且基于所獲取的素材數(shù)據(jù)和圖標(biāo)圖像被放置的時(shí)間位置來生成樂音數(shù)據(jù)，其中所述數(shù)據(jù)庫是與包含圖標(biāo)圖像被放置的時(shí)間位置的時(shí)間范圍相關(guān)聯(lián)地設(shè)置的。利用上述裝置，本發(fā)明能夠通過把與顯示在時(shí)間軸上期望位置處的圖標(biāo)圖像相關(guān)聯(lián)或?qū)?yīng)的數(shù)據(jù)庫改變?yōu)槎喾N類型的數(shù)據(jù)庫中另ー個(gè)期望的數(shù)據(jù)庫而不改變特征量信息，即僅將數(shù)據(jù)庫從一種類型變?yōu)榱硪环N類型(即僅改變數(shù)據(jù)庫類型設(shè)置)，來改變要從期望的數(shù)據(jù)庫取出的素材數(shù)據(jù)。因此即使在用戶不具有關(guān)于特征量信息的數(shù)據(jù)結(jié)構(gòu)、文件結(jié)構(gòu)等的專業(yè)知識的情況下，本發(fā)明也使用戶能夠容易地重新組合要使用的聲音素材。本發(fā)明不僅可以構(gòu)造和實(shí)現(xiàn)為上述裝置發(fā)明，還可以構(gòu)造為方法發(fā)明。此外，本發(fā)明還可以配置并實(shí)現(xiàn)為用于由處理器(如計(jì)算機(jī)或DSP)執(zhí)行的軟件程序，以及存儲這種軟件程序的非瞬時(shí)性存儲介質(zhì)。在這種情況下，程序可以在存儲介質(zhì)中提供給用戶，并被安裝/至用戶的計(jì)算機(jī)中，或者通過通信網(wǎng)絡(luò)從服務(wù)器裝置傳送至客戶端計(jì)算機(jī)并且安裝到客戶端計(jì)算機(jī)中。此外，本發(fā)明使用的處理器可以包括構(gòu)建于硬件中的具有專用邏輯電路的專用處理器，更可以是能夠運(yùn)行期望的軟件程序的計(jì)算機(jī)或其它通用處理器。下面將對本發(fā)明的實(shí)施例進(jìn)行描述，但應(yīng)理解，本發(fā)明不限于所描述的實(shí)施例，在不偏離基本原理的情況下本發(fā)明的各種變型例也是可行的。本發(fā)明的范圍因此僅由所附權(quán)利要求限定。


下面參照附圖并僅以示例的形式對本發(fā)明的優(yōu)選實(shí)施例進(jìn)行詳細(xì)說明，其中附圖中圖I是說明根據(jù)本發(fā)明優(yōu)選實(shí)施例的聲音生成控制系統(tǒng)的整體構(gòu)造的框圖；圖2是說明本發(fā)明實(shí)施例中的服務(wù)器裝置的構(gòu)造示圖；圖3是說明本發(fā)明實(shí)施例中的特征量數(shù)據(jù)庫(DB)的示圖；圖4是說明本發(fā)明實(shí)施例中的信息處理終端的構(gòu)造示圖；圖5是說明本發(fā)明實(shí)施例中的所提取數(shù)據(jù)的示圖；圖6A及圖6B是說明本發(fā)明實(shí)施例中的序列數(shù)據(jù)示例的示圖；圖7是說明本發(fā)明實(shí)施例中的信息處理終端及服務(wù)器裝置的功能的功能框圖；圖8是說明本發(fā)明實(shí)施例中在執(zhí)行序列程序期間呈現(xiàn)在顯示屏幕上的示例顯示的示圖；圖9是說明本發(fā)明實(shí)施例中聲音生成控制系統(tǒng)在執(zhí)行序列程序期間的操作的示圖；圖10是說明本發(fā)明實(shí)施例中的聲音生成控制系統(tǒng)在執(zhí)行相似聲音替換程序期間的操作的示圖；圖IlA至IlC是說明本發(fā)明實(shí)施例中在執(zhí)行相似聲音替換程序期間呈現(xiàn)在顯示屏幕上的示例顯示的示圖；圖12是說明本發(fā)明實(shí)施例中在執(zhí)行相似聲音替換程序期間用于設(shè)置素材數(shù)據(jù)范圍的屏幕示圖；圖13是說明本發(fā)明實(shí)施例中在執(zhí)行相似聲音替換程序期間用于設(shè)置素材數(shù)據(jù)替換風(fēng)格的屏幕示圖14是說明本發(fā)明實(shí)施例中在執(zhí)行模板序列程序期間的顯示屏幕的示圖；圖15是示出了本發(fā)明實(shí)施例中的用于模板序列程序中的圖14的“模板2”的示圖；圖16是說明本發(fā)明的變型例I中在執(zhí)行序列程序期間呈現(xiàn)在顯示屏幕上的示例顯示的示圖；圖17是說明本發(fā)明的變型例4中在執(zhí)行類型聲音替換程序期間用于指定替換素材數(shù)據(jù)的屏幕的示圖；圖18是說明本發(fā)明的變型例4中的聲音生成控制系統(tǒng)在執(zhí)行相似聲音替換程序期間的操作的示圖； 圖19是說明圖17所示屏幕的變型例的示圖；圖20是說明本發(fā)明的變型例10中的信息處理終端的構(gòu)造的示圖；圖21是說明本發(fā)明的變型例10中的信息處理終端的功能的功能框圖；圖22是說明在本發(fā)明的變型例14中在執(zhí)行相似聲音替換程序期間用于指定要替換的素材數(shù)據(jù)的屏幕的示圖；圖23是說明在本發(fā)明的變型例14中在執(zhí)行序列程序期間呈現(xiàn)在顯示屏幕上的示例顯示的示圖；以及圖24是說明本發(fā)明的變型例15中在執(zhí)行序列程序期間呈現(xiàn)在顯示屏幕上的示例顯示的示圖。
具體實(shí)施例方式<實(shí)施例><整體構(gòu)造>圖I是說明根據(jù)本發(fā)明一個(gè)優(yōu)選實(shí)施例的聲音生成控制系統(tǒng)I的整體構(gòu)造的框圖。聲音生成控制系統(tǒng)I包括信息處理終端10和服務(wù)器裝置50，信息處理終端10和服務(wù)器裝置50通過如互聯(lián)網(wǎng)的通信線路1000互相連接。聲音生成控制系統(tǒng)I執(zhí)行控制以通過對預(yù)先準(zhǔn)備的多個(gè)聲音素材中的一些進(jìn)行適當(dāng)?shù)慕M合來生成期望的樂音或音樂聲。聲音素材各自具波形形式，聲音素材可以用作創(chuàng)建聲音的素材，并且具有給定的時(shí)間長度、給定的波形特征以及給定的幅度特征，并且通過從樂曲數(shù)據(jù)中提取(剪輯)部分波形可以得到，其中所述樂曲數(shù)據(jù)包括演奏或再現(xiàn)的樂曲的樂音波形數(shù)據(jù)。當(dāng)然，可以通過提取(剪輯)所記錄的期望聲音波形的部分而不是提取樂曲數(shù)據(jù)的部分來獲得聲音素材。每ー個(gè)聲音素材都可以是如下形式能夠被人識別為音塊的特定聲音模塊(単音或和音)的整體或一部分的形式、或者是包括多個(gè)聲音的時(shí)間序列塊的樂句、或者半樂句(halfway phrase)、或者是部分樂句或噪聲或音效。注意，本文所使用的術(shù)語“樂曲數(shù)據(jù)”具體是指“ー組樂曲波形數(shù)據(jù)”。在所示示例中，在服務(wù)器裝置50中預(yù)存儲各自表示聲音素材的波形的多個(gè)素材數(shù)據(jù)。信息處理終端10是例如移動電話、平板終端或PDA(個(gè)人數(shù)字助理)。如圖I所示，信息處理終端10在其殼體100的前表面上包括觸摸傳感器121、操作按鈕122和顯示屏幕131。觸摸傳感器121提供在顯示屏幕131的前表面上，以與顯示屏幕131 —起構(gòu)成觸摸面板。這里假設(shè)給至信息處理終端10的指令是由用戶操作觸摸傳感器121或操作按鈕122來輸入的。盡管圖I僅示出了ー個(gè)操作按鈕122，但可以提供多個(gè)操作按鈕，或者也可以不提供任何操作按鈕。信息處理終端10生成用于對預(yù)存儲在服務(wù)器裝置50中的素材數(shù)據(jù)進(jìn)行組合的序列數(shù)據(jù)，以基于該組合發(fā)聲或者可聽見的生成樂音。此外，基于這種序列數(shù)據(jù)，信息處理終端10從服務(wù)器裝置50獲取素材數(shù)據(jù)，并且基于所獲取的素材數(shù)據(jù)通過揚(yáng)聲器161 (圖4)可聽見的生成樂音。<服務(wù)器裝置50的構(gòu)造>圖2是說明本發(fā)明實(shí)施例中的服務(wù)器裝置50的硬件構(gòu)造的示圖。服務(wù)器裝置50包括通過總線互連的控制部分51、通信部分54和存儲部分55。 控制部分51包括CPU (中央處理器)、RAM(隨機(jī)訪問存儲器)、R0M(只讀存儲器)等?？刂撇糠?1通過運(yùn)行存儲在ROM或存儲部分55中的各種程序來執(zhí)行各種功能。在所示示例中，控制部分51響應(yīng)于通過信息處理終端10給出的指令來運(yùn)行搜索程序或提取程序。通過運(yùn)行捜索程序，控制部分51響應(yīng)于通過信息處理終端10給出的指令來執(zhí)行搜索 特征量數(shù)據(jù)庫(有時(shí)也稱作“特征量DB”)并且將識別(捜索)出的素材數(shù)據(jù)發(fā)送至信息處理終端10的功能。提取程序執(zhí)行從由信息處理終端10發(fā)送的剪輯數(shù)據(jù)中提取素材數(shù)據(jù)(其變?yōu)槁曇羲夭?、然后將提取的素材數(shù)據(jù)存儲到存儲部分55中的功能。這些功能將在后文詳細(xì)說明。在控制部分51的控制下，通信部分54連接至通信線路1000以與通信設(shè)備(如信息處理終端10)通信信息。控制部分51可以使用通過通信部分54獲取的信息來更新存儲在存儲部分55中的信息。通信部分54可以包括可以以有線或無線方式與外部設(shè)備連接的接ロ，而不必局限為通過通信線路1000執(zhí)行通信。存儲部分55包括硬盤、非易失性存儲器等，其不僅包括用于存儲特征量DB和剪輯數(shù)據(jù)數(shù)據(jù)庫(下文中也稱為“剪輯數(shù)據(jù)DB”)的存儲區(qū)域，還包括用于存儲諸如搜索程序和提取程序的各種程序的存儲區(qū)域。剪輯數(shù)據(jù)DB是用于存儲通過提取(剪輯)樂音波形的若干部分而得到的多個(gè)剪輯數(shù)據(jù)的數(shù)據(jù)庫。每個(gè)剪輯數(shù)據(jù)都是其全部或部分被用作表示聲音素材的素材數(shù)據(jù)的數(shù)據(jù)。特征量DB包括由DBa、DBb 表示的多種類型的特征量數(shù)據(jù)庫。不過，在無需特別地將其彼此區(qū)分開來進(jìn)行說明吋，也可以將特征量數(shù)據(jù)庫統(tǒng)稱為“特征量DB”。特征量DB預(yù)存儲在存儲部分55中，并且任何新類型的特征量DB均可以通過通信部分54從外部設(shè)備獲得并且另外存儲在存儲部分55中。圖3是說明本發(fā)明實(shí)施例中采用的特征量DB的示例的示圖。特征量DB針對表示ー個(gè)聲音素材的素材數(shù)據(jù)，將用于識別這ー個(gè)聲音素材的素材識別信息和表不該聲音素材的特征量信息彼此相關(guān)聯(lián)地存儲起來。特征量DB針對多個(gè)素材數(shù)據(jù)存儲這種素材識別信息和特征量信息(具體來說是多個(gè)特征量信息)。根據(jù)特征量信息的內(nèi)容將多個(gè)素材數(shù)據(jù)分成多個(gè)類別(類別A、類別B-)。素材識別信息包括用于識別存儲在剪輯數(shù)據(jù)DB中的特定剪輯數(shù)據(jù)的信息與表示指定剪輯數(shù)據(jù)的一部分或全部的數(shù)據(jù)范圍的信息的組合。在圖3所示的示例中，素材數(shù)據(jù)對應(yīng)于從剪輯數(shù)據(jù)A的數(shù)據(jù)頭開始的從時(shí)間點(diǎn)tsl到時(shí)間點(diǎn)tel的數(shù)據(jù)范圍。特征量信息(多個(gè)特征量信息中的每ー個(gè))包括多種類型的特征量pl、p2 ，其用于描述或定義與其對應(yīng)的ー個(gè)素材數(shù)據(jù)。描述素材數(shù)據(jù)的特征量是例如由素材數(shù)據(jù)表示的聲音素材(樂音波形)的特征量，諸如聲音素材的各個(gè)頻率區(qū)域(如高頻區(qū)域、中頻區(qū)域和低頻區(qū)域)的強(qiáng)度、達(dá)到幅度峰值的時(shí)間點(diǎn)(從素材數(shù)據(jù)頭開始的時(shí)間點(diǎn))、峰值幅度強(qiáng)度、諧調(diào)程度、復(fù)雜度等，其具有通過對素材數(shù)據(jù)(即樂音波形的剪輯數(shù)據(jù))進(jìn)行分析所得到的值的形式。例如，一個(gè)特征量Pl的值表示聲音素材的高頻區(qū)域的強(qiáng)度。在后續(xù)說明中，單個(gè)素材數(shù)據(jù)的多個(gè)特征量信息P由不同的Pa、Pb…來表示。如前文所述，多個(gè)不同的特征量信息Pa、Pb…中的姆ー個(gè)均包括針對于相應(yīng)素材數(shù)據(jù)的ー組特定特征量pl、p2…。注意，在多種類型的特征量數(shù)據(jù)庫DBa、DBb…之間，即使對于相同的特征量信息P，與特征量信息P相關(guān)聯(lián)的素材數(shù)據(jù)也可以不同。例如，可以響應(yīng)利用相同內(nèi)容的特征量信息P進(jìn)行的訪問而從不同的特征量數(shù)據(jù)庫DBa和DBb取出的素材數(shù)據(jù)彼此不同，盡管其彼此類似。因此，通過改變要利用特征量信息P訪問的特征量數(shù)據(jù)庫，而不改變特征量信息P的內(nèi)容，即可在不同的素材數(shù)據(jù)之間進(jìn)行切換。 如前文所指出的，根據(jù)特征量信息的內(nèi)容將素材數(shù)據(jù)分入不同的類別或種類。具體來說,將聽覺特征上相似的素材數(shù)據(jù)(聲音素材)分入相同的類別。這些類別的示例包括類別(種類)A和類別(種類)B，其中分入類別(種類)A的素材數(shù)據(jù)作為具有清晰沖擊和強(qiáng)烈邊緣感(例如邊緣聲)的聲音，分入類別(種類)B的素材數(shù)據(jù)作為作為環(huán)繞噪聲的聲音(如材質(zhì)(texture)聲)。在圖3的特征量DB中，被識別為從剪輯數(shù)據(jù)A的時(shí)間點(diǎn)tsl到時(shí)間點(diǎn)tel的數(shù)據(jù)范圍的素材數(shù)據(jù)具有特征量Pa，并被分入種類A的類別。前文是關(guān)于服務(wù)器裝置50的硬件構(gòu)造的說明。<信息處理終端10的構(gòu)造>圖4是說明本發(fā)明實(shí)施例中的信息處理終端10的硬件構(gòu)造的示圖。信息處理終端10包括通過總線相互連接的控制部分11、操作部分12、顯示部分13、通信部分14、存儲部分15和音頻處理部分16。此外，信息處理終端10還包括連接至音頻處理部分16的揚(yáng)聲器161和麥克風(fēng)162?？刂撇糠?1包括CPU、RAM、ROM等，并且通過運(yùn)行存儲在ROM或存儲部分15中的各種程序來執(zhí)行各種功能。在所示示例中，控制部分11根據(jù)用戶給出的指令來運(yùn)行序列程序、相似聲音替換程序或模板序列程序。通過按照用戶輸入的指令運(yùn)行序列程序，控制部分執(zhí)行生成序列數(shù)據(jù)的功能并且獲取通過服務(wù)器裝置50捜索和識別的素材數(shù)據(jù)以通過揚(yáng)聲器161可聽見的生成素材數(shù)據(jù)，其中所述序列數(shù)據(jù)用于組合素材數(shù)據(jù)以基于組合的素材數(shù)據(jù)可聽見的生成樂音。相似聲音替換程序執(zhí)行使服務(wù)器裝置50提取期望的素材數(shù)據(jù)(其變?yōu)槁曇羲夭?的功能，例如根據(jù)預(yù)先準(zhǔn)備的樂曲數(shù)據(jù)，從數(shù)據(jù)庫中獲取在特征量信息上與所提取的素材數(shù)據(jù)相似的素材數(shù)據(jù)，并且用所獲取的相似素材數(shù)據(jù)來替換所提取的樂曲數(shù)據(jù)的素材數(shù)據(jù)，以對樂曲數(shù)據(jù)進(jìn)行修改，從而能夠通過揚(yáng)聲器161可聽見的生成修改后的樂曲數(shù)據(jù)。模板序列程序執(zhí)行根據(jù)模板可聽見的生成特征量信息與所提取的素材數(shù)據(jù)相似的素材數(shù)據(jù)的功能。這些功能將在后文詳細(xì)說明。操作部分12包括用于供用戶執(zhí)行期望操作(即接收用戶的期望操作)的觸摸傳感器121和操作按鈕122，并且將表示所接收的用戶操作內(nèi)容的操作信息輸出至控制部分
11。于是將用戶的指令輸入信息處理終端10。顯示部分13是例如液晶顯示器的顯示設(shè)備，其在顯示屏幕131上顯示與控制部分11執(zhí)行的控制相對應(yīng)的各種內(nèi)容。也即，根據(jù)所運(yùn)行的程序在顯示屏幕131上顯示諸如菜單屏幕、設(shè)置屏幕等的各種內(nèi)容(見圖8、11、12、13和14)。在控制部分11的控制下，通信部分14連接至通信線路1000，以與諸如服務(wù)器裝置50的通信設(shè)備進(jìn)行信息通信。控制部分14可以用通過通信線路1000獲取的信息來更新存儲部分15中存儲的信息。此外，通信部分14可以包括可以以有線或無線方式與外部設(shè)備連接的接ロ，而不必局限為通過通信線路1000執(zhí)行通信。存儲部分15包括具有易失性存儲器和非易失性存儲器形式的臨時(shí)存儲區(qū)域。后述程序?qū)⒁褂玫臉非鷶?shù)據(jù)、要運(yùn)行的程序等臨時(shí)存儲在臨時(shí)存儲區(qū)域中。非易失性存儲器包括用于存儲樂曲數(shù)據(jù)庫(下文中稱為“樂曲DB”)、提取的數(shù)據(jù)、素材數(shù)據(jù)庫(下文中稱為“素材DB” )、序列數(shù)據(jù)和模板數(shù)據(jù)的存儲區(qū)域，以及用于存儲諸如上述序列程序、相似聲音替換程序、和模板序列程序的各種程序的存儲區(qū)域。盡管非易失性存儲器中存儲的各種數(shù)據(jù)預(yù)存儲在存儲部分15中，但也可以通過通信部分14從外部設(shè)備獲取其它數(shù)據(jù)，并另外存儲到非易失性存儲器中。此外，用戶以后文將要說明的方式創(chuàng)建的新的序列數(shù)據(jù)和模板 數(shù)據(jù)也可以存儲在存儲部分15中。樂曲DB是其中存儲有樂曲數(shù)據(jù)(樂曲數(shù)據(jù)A、樂曲數(shù)據(jù)的數(shù)據(jù)庫，這些樂曲數(shù)據(jù)表示各種樂曲的波形。素材DB是其中存儲有替換素材數(shù)據(jù)(素材數(shù)據(jù)Wl、素材數(shù)據(jù)W2…)的數(shù)據(jù)庫，這些素材數(shù)據(jù)是由服務(wù)器裝置50運(yùn)行服務(wù)器裝置50中的捜索程序而從服務(wù)器裝置50發(fā)送的。圖5是說明本發(fā)明實(shí)施例中的提取數(shù)據(jù)的示圖。所提取的數(shù)據(jù)包括用于識別從服務(wù)器裝置50的樂曲數(shù)據(jù)中提取的素材數(shù)據(jù)的素材識別信息、素材數(shù)據(jù)的特征量信息、根據(jù)特征量信息確定的種類、以及表示在服務(wù)器裝置50被識別為特征量信息與所提取的素材數(shù)據(jù)相似的替換素材數(shù)據(jù)的信息，并將這些信息和種類彼此相關(guān)聯(lián)地存儲起來。與上述存儲在特征量DB中的素材識別信息相似，所提取的素材數(shù)據(jù)的素材識別信息包括用于識別樂曲數(shù)據(jù)的信息與表示指定樂曲數(shù)據(jù)的一部分或全部的數(shù)據(jù)范圍的信息的組合。在圖5所示的示例中，所提取的素材數(shù)據(jù)對應(yīng)于從樂曲數(shù)據(jù)A的數(shù)據(jù)頭開始的從時(shí)間點(diǎn)ts2到時(shí)間點(diǎn)te2的數(shù)據(jù)范圍，其特征量由Pb表示，類別為種類B，并且與所提取的素材數(shù)據(jù)相似的替換素材數(shù)據(jù)按照與所提取素材數(shù)據(jù)的相似度的降序由W5、WE1、W2…來表示。圖6A和圖6B是說明本發(fā)明實(shí)施例中序列數(shù)據(jù)的示例的示圖。序列數(shù)據(jù)包括特征量指定數(shù)據(jù)(圖6A)和DB指定數(shù)據(jù)(圖6B)。特征量指定數(shù)據(jù)包括各自指示聲音生成定時(shí)的再現(xiàn)時(shí)間點(diǎn)、各自與要在聲音生成定時(shí)發(fā)聲的素材數(shù)據(jù)相對應(yīng)的特征量信息、以及各自表示相應(yīng)的素材數(shù)據(jù)的發(fā)聲音量的音量，相應(yīng)的再現(xiàn)時(shí)間點(diǎn)、特征量信息和音量彼此相關(guān)聯(lián)地存儲。圖6A所示的示例表示基于特征量信息Pb的聲音在再現(xiàn)時(shí)間點(diǎn)“0002:01:000”(對應(yīng)于第二小節(jié)的第一節(jié)拍)以音量“20”發(fā)聲。如后面將要說明的，基于特征量信息Pb的聲音不必局限為基于由特征量信息Pb的素材數(shù)據(jù)所表不的聲音素材的聲音,而是可以是與基于該素材數(shù)據(jù)的聲音相似的任何ー種聲音。DB指定數(shù)據(jù)是用于針對給定的再現(xiàn)時(shí)間范圍指定或設(shè)置期望的特征量DB的類型的數(shù)據(jù)，該特征量DB是要由服務(wù)器裝置50進(jìn)行搜索以識別素材數(shù)據(jù)的搜索對象(即搜索目標(biāo)特征量DB)。具體來說，在圖6B所示的示例中，針對從“0001:01:000”到“0001:03:959”的再現(xiàn)時(shí)間范圍設(shè)置的捜索目標(biāo)特征量DB是特征量數(shù)據(jù)庫DBa。模板數(shù)據(jù)將在后文說明。
回到圖4,由用戶生成的聲音輸入麥克風(fēng)162,麥克風(fēng)162將表不用戶生成的聲音的音頻信號輸出至音頻處理部分16。揚(yáng)聲器161發(fā)聲或者可聽見的生成從音頻處理部分16輸出的音頻信號。音頻處理部分16包括諸如DSP(數(shù)字信號處理器)的信號處理電路。音頻處理部分16對從麥克風(fēng)162輸入的音頻信號執(zhí)行模數(shù)(A/D)轉(zhuǎn)換，并將所得的轉(zhuǎn)換后的音頻信號輸出至控制部分U。進(jìn)而，音頻處理部分16對從控制部分11輸出的樂音數(shù)據(jù)執(zhí)行由控制部分11設(shè)置的信號處理，如音效處理、數(shù)模(D/A)轉(zhuǎn)換處理、放大處理等，然后音頻處理部分16將所得的處理后的樂音數(shù)據(jù)輸出至揚(yáng)聲器161作為音頻信號。前文是關(guān)于信息處理終端10的硬件構(gòu)造的說明。<功能配置>下面說明由運(yùn)行序列程序的信息處理終端10的控制部分11以及響應(yīng)于控制部分11對序列程序的運(yùn)行而運(yùn)行搜索程序的服務(wù)器裝置50的控制部分51實(shí)現(xiàn)的功能。注意，用于實(shí)現(xiàn)如下功能的配置中的ー種、ー些或全部可以由硬件實(shí)現(xiàn)。圖7是用于說明本發(fā)明實(shí)施例中的信息處理終端10和服務(wù)器裝置50的功能的框圖。對應(yīng)于開始運(yùn)行序列程序的控制部分11，構(gòu)建顯示控制部分110、設(shè)置部分120、聲音生成控制部分130和數(shù)據(jù)輸出部分140，從而使信息處理終端10用作聲音生成控制裝置。此夕卜，對應(yīng)于開始運(yùn)行捜索程序的控制部分51，構(gòu)建識別部分510，從而使服務(wù)器裝置50用作識別裝置。響應(yīng)于通過用戶輸入的指令，顯示控制部分10控制顯示屏幕131上顯示的內(nèi)容。在這種情況下，在顯示屏幕131上顯示如圖8所示的內(nèi)容。圖8是說明本發(fā)明實(shí)施例中在執(zhí)行序列程序期間呈現(xiàn)在顯示屏幕131上的示例顯示的示圖。顯示屏幕131包括兩個(gè)主要區(qū)域圖標(biāo)放置區(qū)域ST ;和DB放置區(qū)域DT。圖標(biāo)放置區(qū)域ST和DB放置區(qū)域DT各自的水平軸被設(shè)置為共同的時(shí)間軸。欄線BL是用于指示一個(gè)節(jié)拍位置的輔助線。此外，圖標(biāo)放置區(qū)域ST具有設(shè)置為定義音量的音量軸的垂直軸。不過，如果音量的定義與圖標(biāo)圖像的位置無關(guān)，則可以省略該音量軸。圖標(biāo)圖像sl、s2…是與各種特征量信息相關(guān)聯(lián)的圖像。利用顯示在或者放置在圖標(biāo)放置區(qū)域ST上的圖標(biāo)圖像sl、s2 ，可以根據(jù)圖標(biāo)圖像的左端沿時(shí)間軸的位置(即時(shí)間軸位置)來定義基干與任一圖標(biāo)圖像對應(yīng)的特征量信息的聲音的聲音生成定時(shí)。此外，根據(jù)圖標(biāo)圖像的下端沿音量軸的位置來定義音量。各個(gè)圖標(biāo)圖像sl、s2…的設(shè)計(jì)類型被確定為依據(jù)與圖標(biāo)圖像相關(guān)聯(lián)或者相對應(yīng)的各種特征量信息所分入的類別(種類A、種類B…)而不同。例如，對應(yīng)于圖標(biāo)圖像Si的特征量信息與對應(yīng)于圖標(biāo)圖像s2的特征量信息分入不同的類別，但是對應(yīng)于圖標(biāo)圖像s2的特征量信息與對應(yīng)于圖標(biāo)圖像s4的特征量信息分入相同的類別。不過應(yīng)注意，圖標(biāo)圖像并不必須在設(shè)計(jì)上根據(jù)類別而不同；換句話說，所有圖標(biāo)圖像可以具有相同的設(shè)計(jì)。或者，可以根據(jù)類別之外的其它參數(shù)來控制圖標(biāo)圖像的設(shè)計(jì)以使其彼此不同。DB圖像dl、d2…各自是表示可以按期望指定的時(shí)間范圍的圖像，期望類型的特征量DB可以與這些DB圖像相關(guān)聯(lián)。響應(yīng)于用戶的操作或者根據(jù)序列數(shù)據(jù)等，這些時(shí)間范圍中的每ー個(gè)均可以設(shè)置在或者改變至期望的位置和長度。這些DB圖像dl、d2…顯示在或 者放置在DB放置區(qū)域DT中，并且根據(jù)DB圖像的時(shí)間軸(左端至右端)位置來定義ー個(gè)時(shí)間周期(時(shí)間范圍)，在該時(shí)間周期中將對應(yīng)于任一 DB圖像的特征量DB用作服務(wù)器裝置50的搜索對象(捜索目標(biāo)特征量DB)。例如，從時(shí)間點(diǎn)t0到時(shí)間點(diǎn)t2的范圍被定義為將特征量數(shù)據(jù)庫DBa用作捜索目標(biāo)特征量DB的時(shí)間范圍，以及將從時(shí)間點(diǎn)tl至?xí)r間點(diǎn)t3的范圍定義為將特征量數(shù)據(jù)庫DBc用作捜索目標(biāo)特征量DB的時(shí)間范圍。也即，在從時(shí)間點(diǎn)t0至?xí)r間點(diǎn)t2的范圍內(nèi)，特征量數(shù)據(jù)庫DBa和特征量數(shù)據(jù)庫DBc被用作捜索目標(biāo)特征量數(shù)據(jù)庫。此外，在顯示屏幕131上顯示用于設(shè)置再現(xiàn)拍子(tempo)的拍子控制按鈕bl ;轉(zhuǎn)換指令按鈕b2，其用于指令基于圖標(biāo)放置區(qū)域中的圖標(biāo)圖像的放置風(fēng)格來從序列數(shù)據(jù)轉(zhuǎn)換成樂音數(shù)據(jù)；和用于發(fā)聲或者可聽見 的生成轉(zhuǎn)換樂音數(shù)據(jù)的再現(xiàn)指令按鈕b3。注意，還可以顯示用于將創(chuàng)建的序列數(shù)據(jù)存儲到存儲部分15中的存儲按鈕等?；氐綀D7，信息處理終端10的設(shè)置部分120根據(jù)用戶輸入的指令來沿時(shí)間軸設(shè)置特征量DB的特定類型。在所示示例中，設(shè)置部分120將所設(shè)置的特征量DB類型(即特征量DB類型設(shè)置)輸出至顯示控制部分110，于是如圖8所示在顯示屏幕131上顯示相應(yīng)的DB圖像(其表示所設(shè)置的特征量DB類型)。設(shè)置部分120不必將所設(shè)置的特征量DB類型輸出至顯示控制部分110，在這種情況下，可以不在顯示屏幕131上放置相應(yīng)的DB圖像，因此可以省略DB放置區(qū)域DT。也即，所設(shè)置的特征量DB類型可以放置也可以不放置在顯示屏幕131上，只要特征量DB的類型沿著與圖標(biāo)放置區(qū)域ST —祥的時(shí)間軸設(shè)置即可。顯示控制部分110和設(shè)置部分120根據(jù)圖標(biāo)圖像放置風(fēng)格和特征量DB類型設(shè)置風(fēng)格來生成序列數(shù)據(jù)。這里，顯示控制部分110生成序列數(shù)據(jù)的特征量指定數(shù)據(jù)，而設(shè)置部分120生成序列數(shù)據(jù)的DB指定數(shù)據(jù)?？梢栽诿慨?dāng)放置了圖標(biāo)圖像或者設(shè)置了特征量DB時(shí)、或者在操作了轉(zhuǎn)換指令按鈕b2時(shí)確定序列數(shù)據(jù)的內(nèi)容。只要在存儲按鈕顯示在顯示屏幕131上的同時(shí)由用戶操作了上述存儲按鈕，則將如上所述生成的序列數(shù)據(jù)存儲在存儲部分15中?！┯脩舨僮髁宿D(zhuǎn)換指令按鈕b2，則聲音生成控制部分130就通過通信部分14將所生成的序列數(shù)據(jù)的一部分或全部發(fā)送至服務(wù)器裝置50，于是服務(wù)器裝置50的控制部分51啟動并運(yùn)行搜索程序?！靶蛄袛?shù)據(jù)的一部分”是指其中至少特征量信息以及在時(shí)間軸上與特征量信息具有對應(yīng)關(guān)系的特征量DB的類型(類型信息)彼此相關(guān)聯(lián)的數(shù)據(jù)。然后，聲音生成控制部分130通過通信部分14從服務(wù)器裝置50接收素材數(shù)據(jù)，并且基于所接收的素材數(shù)據(jù)和序列數(shù)據(jù)通過數(shù)據(jù)輸出部分140輸出樂音數(shù)據(jù)。具體來說，聲音生成控制部分130參照序列數(shù)據(jù)的特征量指定數(shù)據(jù)來根據(jù)音量對對應(yīng)于圖標(biāo)圖像之一的素材數(shù)據(jù)進(jìn)行處理(即改變其電平)，并且通過數(shù)據(jù)輸出部分140在與再現(xiàn)時(shí)間點(diǎn)對應(yīng)的定時(shí)輸出處理后的素材數(shù)據(jù)來作為樂音數(shù)據(jù)，其中數(shù)據(jù)輸出部分140在聲音生成控制部分130的控制下輸出樂音數(shù)據(jù)。標(biāo)識部分510通過通信部分54接收基于從聲音生成控制部分130發(fā)送的序列數(shù)據(jù)的信息，捜索由所接收的信息指示的類型(捜索目標(biāo)類型)的特征量DB，并且針對序列數(shù)據(jù)中包括的每項(xiàng)特征量信息來識別特征量信息與序列數(shù)據(jù)中包括的特征量信息相匹配(相同或相似)的素材數(shù)據(jù)。在所示的示例中，識別部分510將特征量信息作為由多個(gè)特征量構(gòu)成的向量，并且參照捜索目標(biāo)類型的特征量DB來識別特征量信息具有最小Euclidian距離的素材數(shù)據(jù)。注意，可以采用與前述不同的其它已知的算法來確定相似度(匹配度)。作為另ー替代方案，識別部分510可以識別其特征量信息具有第二小或第三小而不是最小Euclidian距離的素材數(shù)據(jù)，即其特征量信息與序列數(shù)據(jù)中包含的特征量信息第二或第三接近的素材數(shù)據(jù)。這種識別所必需的信息可以由用戶等預(yù)先設(shè)置。此外，要被識別的素材數(shù)據(jù)不必在特征量信息上與序列數(shù)據(jù)中包含的特征量信息相似，只要其與序列數(shù)據(jù)中包含的特征量信息具有特定的預(yù)定關(guān)系即可。捜索目標(biāo)還可以通過類別進(jìn)ー步縮小，而不必局限于搜索目標(biāo)特征量DB。在這種情況下，例如作為搜索目標(biāo)的類別可以由用戶指定，或者可以是與序列數(shù)據(jù)中包含的特征量信息相同或相關(guān)的類別。這里，“相關(guān)的類別”是通過預(yù)設(shè)的算法確定的，或者可以是預(yù)先設(shè)置的互相關(guān)的類別。隨后，識別部分510通過通信部分54將識別的素材數(shù)據(jù)發(fā)送至聲音生成控制部分130。在所示的示例中，如前文所述，通信部分54用作獲取裝置和輸出裝置，其中獲取裝置基于序列數(shù)據(jù)通過來自通信裝置的信息來獲取信息，輸出裝置通過將識別的素材數(shù)據(jù)通過通信裝置發(fā)送來輸出識別的素材數(shù)據(jù)。前文已經(jīng)對信息處理終端10和服務(wù)器裝置50的功能配置進(jìn)行了說明。下面參照圖9對聲音生成控制系統(tǒng)I在運(yùn)行序列程序期間的操作進(jìn)行說明。<運(yùn)行序列程序期間的操作>圖9是說明本發(fā)明實(shí)施例中的聲音生成控制系統(tǒng)I在運(yùn)行序列程序期間的操作的示圖。這里將主要參照圖9對用戶將運(yùn)行序列程序的指令輸入信息處理終端10之后聲音生成控制系統(tǒng)I的操作進(jìn)行說明。在序列程序開始時(shí)，如圖8所示，在顯示屏幕131上顯示圖標(biāo)放置區(qū)域ST、DB放置區(qū)域DT等。假設(shè)在此階段尚無圖標(biāo)圖像和DB圖像顯示在顯示屏.131 上。在步驟S110，響應(yīng)于用戶輸入確定特征量信息內(nèi)容的指令、在圖標(biāo)放置區(qū)域ST中顯示或放置根據(jù)確定的內(nèi)容的設(shè)計(jì)的圖標(biāo)圖像的指令、以及在DB放置區(qū)域DT中顯示或放置DB圖像的指令，來創(chuàng)建生成樂音的序列。于是，在顯示屏幕131上顯示圖8所示的內(nèi)容。在此狀態(tài)下生成的序列數(shù)據(jù)例如是如圖6A或6B所示的內(nèi)容，其中特征量信息Pc、Pd和Pe分別對應(yīng)于圖標(biāo)圖像s3、s4和s5。在步驟S120，一旦用戶通過操作轉(zhuǎn)換指令按鈕b2來輸入轉(zhuǎn)換指令，則信息處理終端10的聲音生成控制部分130在步驟S130將序列數(shù)據(jù)發(fā)送至服務(wù)器裝置50。這里所要發(fā)送的序列數(shù)據(jù)不必包括全部預(yù)定信息，只要其包括如下數(shù)據(jù)即可，其中在該數(shù)據(jù)的一部分中特征量信息以及在時(shí)間軸上與該特征量信息具有預(yù)定對應(yīng)關(guān)系的特征量DB的類型彼此相關(guān)聯(lián)。在步驟S140，在從信息處理終端10接收到序列數(shù)據(jù)后，服務(wù)器裝置50運(yùn)行搜索程序，于是識別部分510捜索特征量DB以識別素材數(shù)據(jù)。例如，對于與圖標(biāo)圖像s 3對應(yīng)的特征量信息Pc，識別部分510對在時(shí)間軸上與特征量信息Pc具有預(yù)定對應(yīng)關(guān)系的特定類型的特征量數(shù)據(jù)庫DBc進(jìn)行搜索，并且在步驟S150取出被識別為具有與特征量信息Pc相似的特征量信息的素材數(shù)據(jù)，并將取出的素材數(shù)據(jù)發(fā)送至信息處理終端10。此時(shí)，服務(wù)器裝置50以如下方式發(fā)送識別的素材數(shù)據(jù)，其中允許對于所識別的素材數(shù)據(jù)對應(yīng)于哪個(gè)特征量信息進(jìn)行識別。在完成素材數(shù)據(jù)的接收后，信息處理終端10通知用戶該結(jié)果。然后，在步驟S160中當(dāng)用戶通過操作再現(xiàn)指令按鈕b3以輸入再現(xiàn)指令之后，聲音生成控制部分130控制數(shù)據(jù)、輸出部分140。聲音生成控制部分130參照序列數(shù)據(jù)的特征量指定數(shù)據(jù)來調(diào)節(jié)所接收素材數(shù)據(jù)的音量，并且根據(jù)對應(yīng)特征量信息的再現(xiàn)時(shí)間點(diǎn)將調(diào)節(jié)音量之后的素材數(shù)據(jù)輸出為樂音數(shù)據(jù)(步驟S170)，從而通過揚(yáng)聲器161發(fā)聲或者可聽見的生成素材數(shù)據(jù)。按照前述方式，根據(jù)用戶創(chuàng)建的序列從信息處理終端10輸出樂音數(shù)據(jù)。注意，成為搜索目標(biāo)的特征量DB的類型(捜索目標(biāo)特征量DB類型)是通過DB指定數(shù)據(jù)定義的。因此，用戶僅通過改變DB指定數(shù)據(jù)即可將搜索目標(biāo)特征量DB類型改變成其它類型，并且在這種情況下，即使特征量指定數(shù)據(jù)的內(nèi)容沒有改變，由識別部分510識別的素材數(shù)據(jù)也將改變；于是，根據(jù)用戶的再現(xiàn)指令可聽見的生成的內(nèi)容也將改變。此時(shí)，即使ー個(gè)素材數(shù)據(jù)變?yōu)榱愆`素材數(shù)據(jù)，特征量信息也不必改變，于是在大多數(shù)情況下可以僅針對(stare with)分入作為特征量信息的同一類別的素材數(shù)據(jù)來識別素材數(shù)據(jù)，而不將該素材數(shù)據(jù)的聲音變?yōu)橥耆煌穆曇簟Ｒ虼?，在特征量DB的類型對應(yīng)于流派(爵士、搖滾等)的情況下，在維
持相同的聲音生成風(fēng)格或內(nèi)容(如樂音特色)的同時(shí)僅由用戶改變DB指定數(shù)據(jù)，即可以將所生成的樂音或聲音的特效變成例如類似爵士或類似搖滾的特效。下面參照圖10對聲音生成控制系統(tǒng)I在運(yùn)行相似聲音替換程序期間的操作進(jìn)行說明。<運(yùn)行相似聲音替換程序期間的操作>圖10是說明本發(fā)明實(shí)施例中的聲音生成控制系統(tǒng)I在運(yùn)行相似聲音替換程序期間的操作的示圖。這里將主要參照圖10對用戶將運(yùn)行相似聲音替換程序的指令輸入信息處理終端10之后聲音生成控制系統(tǒng)I的操作進(jìn)行說明。在相似聲音替換程序開始時(shí)，在顯示屏幕131上顯如圖IlA至IlC所示的內(nèi)容，該顯示用于確定包括剪輯數(shù)據(jù)的樂音數(shù)據(jù)，所述剪輯數(shù)據(jù)用于發(fā)送至服務(wù)器裝置50以從中提取素材數(shù)據(jù)。在步驟S210，控制部分11根據(jù)用戶輸入的指令來確定樂音數(shù)據(jù)。圖IlA至IlC是說明本發(fā)明實(shí)施例中在運(yùn)行相似聲音替換程序期間呈現(xiàn)在顯示屏幕131上的顯示示例的示圖。在相似聲音替換程序開始時(shí)，控制部分11在顯示屏幕131上顯示ー個(gè)屏幕，其用于確定是要記錄并輸入樂音數(shù)據(jù)，還是從預(yù)存儲在存儲部分15的樂曲DB中的樂曲數(shù)據(jù)中選擇樂音數(shù)據(jù)。在所示的示例中，如圖IlA所示,在顯示屏幕131上顯示記錄選擇按鈕bsl和樂曲數(shù)據(jù)選擇按鈕bs2，其中記錄選擇按鈕bsl用于指令記錄并輸入樂音數(shù)據(jù)，樂曲數(shù)據(jù)選擇按鈕bs2用于指令從樂曲數(shù)據(jù)中選擇樂音數(shù)據(jù)。如果用戶操作樂曲數(shù)據(jù)選擇按鈕bs2，則控制部分11在顯示屏幕131上顯示存儲在樂曲DB中的樂曲數(shù)據(jù)的列表(即樂曲數(shù)據(jù)組)(未示出)。然后，如果用戶輸入了從列表中選擇ー個(gè)樂曲數(shù)據(jù)(樂曲數(shù)據(jù)組)的指令，則控制部分11將所選擇的樂曲數(shù)據(jù)確定為樂音數(shù)據(jù)(見圖10的步驟S210)。另ー方面，如果用戶操作了記錄選擇按鈕bsl，則控制部分11將顯示屏幕131上的顯示內(nèi)容切換為圖IlB所示的內(nèi)容。此時(shí),在顯示屏幕131上顯示記錄開始按鈕brs、記錄時(shí)間顯示條區(qū)域Sb、返回按鈕br以及回車按鈕bf,其中記錄開始按鈕brs用于接收開始記錄的用戶指令(即可以通過用戶操作來輸入開始記錄的指令)，記錄時(shí)間顯示條區(qū)域Sb表示從開始記錄起所經(jīng)過的時(shí)間，返回按鈕br用于接收返回最近(即前一)屏幕(此時(shí)為圖IlA所示的屏幕)的用戶指令，回車按鈕bf用于接收將記錄的內(nèi)容確定為樂音數(shù)據(jù)的用戶指令。
如果用戶操作了記錄開始按鈕brs，則控制部分11將顯示屏幕131上的顯示內(nèi)容切換為圖IlC所示的內(nèi)容，并且累積表示通過麥克風(fēng)162輸入的聲音的數(shù)據(jù)。此時(shí)，在顯示屏幕131上，記錄開始按鈕brs變成用于接收停止記錄的用戶指令的記錄停止按鈕bre，并且在記錄時(shí)間顯示條區(qū)域sb上顯示經(jīng)過時(shí)間顯示條sbt。在這種狀態(tài)下，用戶通過麥克風(fēng)162輸入要設(shè)置為樂音數(shù)據(jù)的聲音。如果用戶在聲音輸入結(jié)束后操作記錄停止按鈕bre，則控制部分11終止累積表示通過麥克風(fēng)162輸入的聲音的數(shù)據(jù)，然后將顯示屏幕131上的顯示內(nèi)容切換為圖IlB所示的內(nèi)容。然后，如果用戶再次操作記錄開始按鈕brs，則控制部分11再次開始記錄，在此情況下在丟棄已經(jīng)累積的數(shù)據(jù)之后或者不丟棄已經(jīng)累積的數(shù)據(jù)而開始累積新的表示聲音的數(shù)據(jù)。如果用戶操作回車按鈕bf，則控制部分11將已經(jīng)通過記錄累積的數(shù)據(jù)確定為樂音數(shù)據(jù)(見圖10的步驟S210)。/按照前述方式，控制部分11將樂曲數(shù)據(jù)或通過記錄累積的數(shù)據(jù)確定為樂音數(shù)據(jù)(步驟S210)，然后將顯示屏幕131上的顯示內(nèi)容切換為圖12所示的內(nèi)容。圖12是說明本發(fā)明實(shí)施例中在執(zhí)行相似聲音替換程序期間用于設(shè)置素材數(shù)據(jù)范圍的屏幕的示圖。在此示例中，在顯示屏幕131上以放大的比例顯示波形wd2，波形wd2是已確定的樂音數(shù)據(jù)的波形wdl的一部分。此外還在顯示屏幕131上顯示用于對波形wdl的部分波形wd2的顯示范圍進(jìn)行定義的顯示范圍窗ロ ws。如果用戶輸入改變顯示范圍窗ロws的位置和范圍的指令，則控制部分11不僅改變顯示范圍窗ロ ws的位置和范圍，還根據(jù)范圍窗ロ ws的改變后的位置和范圍變化來改變波形wd2的顯示。在顯示屏幕131上還顯示范圍指定箭頭(開始指定箭頭“as”和結(jié)束指定箭頭“ae”)，其用于指定要發(fā)送至服務(wù)器裝置50的數(shù)據(jù)范圍(剪輯數(shù)據(jù)范圍)tw。如果用戶指定了范圍指定箭頭的位置，則將指定的位置之間的范圍指定為數(shù)據(jù)范圍tw。時(shí)間顯示twc表示數(shù)據(jù)范圍tw的時(shí)間?？梢匀魏尾煌谏鲜龇绞降倪m當(dāng)方式來指定范圍；例如，可以通過某些輸入裝置以數(shù)值輸入節(jié)拍的數(shù)量和時(shí)間。在顯示屏幕131上還顯示設(shè)置按鈕bk、返回按鈕br、和再現(xiàn)按鈕bp，其中設(shè)置按鈕bk用于設(shè)置指定的數(shù)據(jù)范圍tw，返回按鈕br用于接收返回至最近(前一)屏幕的用戶指令，再現(xiàn)按鈕bp用于接收再現(xiàn)指定數(shù)據(jù)范圍tw的樂音數(shù)據(jù)以通過揚(yáng)聲器161輸出該樂音數(shù)據(jù)的用戶指令。由用戶用兩個(gè)手指觸摸顯示屏幕131上的范圍指定箭頭并且擴(kuò)展、縮小和/或滑動兩個(gè)手指，可以指定上述位置?？梢韵鄬Σㄐ蝫d2重疊地顯示范圍指定箭頭，具體來說是在波形wd2的中心線上或附近顯示。利用相對波形wd2重疊地顯示的范圍指定箭頭，容易直觀地識別開始指定點(diǎn)和結(jié)束指定點(diǎn)；于是，每個(gè)范圍指定箭頭不必是箭頭圖標(biāo)，而可以是能夠可視地指示觸摸何處的任意期望圖標(biāo)。此外，范圍指定箭頭可以是部分透明或半透明的，其中可以容易地識別波形的開始指定點(diǎn)和結(jié)束指定點(diǎn)。當(dāng)用戶在指定了數(shù)據(jù)范圍tw之后操作再現(xiàn)按鈕bp吋，則控制部分11僅再現(xiàn)指定的數(shù)據(jù)范圍tw的樂音數(shù)據(jù)，以再現(xiàn)指定的數(shù)據(jù)范圍tw的樂音數(shù)據(jù)，從而通過揚(yáng)聲器161可聽見的輸出。如果用戶在指定了數(shù)據(jù)范圍tw之后操作設(shè)置按鈕bk，則控制部分11將數(shù)據(jù)范圍tw設(shè)置為由服務(wù)器裝置50提取素材數(shù)據(jù)的對象(圖10的步驟S220)，從而通過通信部分14發(fā)送作為數(shù)據(jù)范圍tw內(nèi)的樂音數(shù)據(jù)的剪輯數(shù)據(jù)(步驟S230)。注意，在運(yùn)行序列程序期間使用的DB指定數(shù)據(jù)也可以用在相似聲音替換程序中。在這種情況下，還將DB指定數(shù)據(jù)發(fā)送至服務(wù)器裝置50。在服務(wù)器裝置50接收了剪輯數(shù)據(jù)之后，則服務(wù)器裝置50的控制部分51運(yùn)行提取程序，以從數(shù)據(jù)范圍tw的樂音數(shù)據(jù)提取素材數(shù)據(jù)(步驟S240)。作為提取素材數(shù)據(jù)的ー種示例方法，可以提取起始點(diǎn)(On-set point)以及與位于從檢測到的起始點(diǎn)開始的預(yù)定時(shí)間范圍內(nèi)并且具有滿足特定條件的特征量部分來作為素材數(shù)據(jù)，其中起始點(diǎn)是可以從剪輯數(shù)據(jù)中檢測到的音量變化超過預(yù)定量的點(diǎn)。盡管可以使用任何已知的方法來從表示樂音的剪輯數(shù)據(jù)中提取素材數(shù)據(jù)，但優(yōu)選使用日本專利申請?zhí)卦S公開第2010-191337中公開的方法。然后，控制部分51將與所提取的素材數(shù)據(jù)相關(guān)的數(shù)據(jù)登記到存儲部分55中(步驟S250)。具體來說，控制部分51將所接收的剪輯數(shù)據(jù)登記到剪輯數(shù)據(jù)DB中，并且將數(shù)據(jù)范圍、特征量信息及其種類登記至特征量DB中。特征量DB、數(shù)據(jù)范圍、特征量信息及其種類 所應(yīng)當(dāng)?shù)怯浀降臄?shù)據(jù)庫的類型可以由用戶預(yù)先指定。如果剪輯數(shù)據(jù)是樂曲數(shù)據(jù)的一部分，并且可以獲取樂曲數(shù)據(jù)的相應(yīng)流派，則可以將剪輯數(shù)據(jù)與流派相關(guān)聯(lián)。在步驟S260處登記素材數(shù)據(jù)的步驟可以省略，可以由用戶預(yù)先指定是否執(zhí)行素材數(shù)據(jù)的登記。然后，控制部分51運(yùn)行搜索程序，以識別在特征量信息上與從剪輯數(shù)據(jù)中提取的單個(gè)素材數(shù)據(jù)相似的素材數(shù)據(jù)(步驟S260)。具體來說，在所示的示例中，控制部分51針對從剪輯數(shù)據(jù)提取的每個(gè)素材數(shù)據(jù)計(jì)算特征量，并且從特征量DB中捜索和識別特征量信息與所提取的素材數(shù)據(jù)相似的5個(gè)素材數(shù)據(jù)。這里可以按照與識別部分510所執(zhí)行的素材數(shù)據(jù)識別相同的方式來執(zhí)行素材數(shù)據(jù)識別。也即，控制部分51可以為每個(gè)所提取的素材數(shù)據(jù)識別特征量信息與所提取的素材數(shù)據(jù)的特征量信息最接近的5個(gè)素材數(shù)據(jù)，即按照與所提取的素材數(shù)據(jù)的特征量信息的Euclidian距離的降序識別最接近的5個(gè)素材數(shù)據(jù)。注意，步驟S250中登記的信息被排除在搜索范圍之外。在控制部分51按照上述方式識別了特征量信息與所提取的素材數(shù)據(jù)相似的5個(gè)素材數(shù)據(jù)之后，其將這5個(gè)素材數(shù)據(jù)以及用于形成如圖5所示的提取數(shù)據(jù)的信息(如提取為素材數(shù)據(jù)的剪輯數(shù)據(jù)的一部分)、素材數(shù)據(jù)的特征量信息、以及用于區(qū)分相似素材數(shù)據(jù)(替換素材數(shù)據(jù))的信息通過通信部分54發(fā)送至信息處理終端10。如果已經(jīng)從信息處理終端10接收了 DB指定數(shù)據(jù)，則服務(wù)器裝置50的控制部分51按照服務(wù)器裝置50響應(yīng)于序列程序的運(yùn)行來運(yùn)行搜索程序的相同方式，基于所接收的DB指定數(shù)據(jù)確定成為識別素材數(shù)據(jù)時(shí)的捜索目標(biāo)的特征量DB的類型。此時(shí)，可以基于所提取的素材數(shù)據(jù)在剪輯數(shù)據(jù)中的數(shù)據(jù)位置來確定特征量DB的類型。例如，可以使用表示剪輯數(shù)據(jù)的數(shù)據(jù)位置的信息來指定DB指定數(shù)據(jù)中的再現(xiàn)時(shí)間范圍。在信息處理終端10接收這些信息之后，信息處理終端10的控制部分11將所提取的數(shù)據(jù)存儲到存儲部分15的臨時(shí)存儲區(qū)域，并且在顯示屏幕131上顯示圖13所示的內(nèi)容。注意，當(dāng)在服務(wù)器裝置50中執(zhí)行處理的同吋，即在執(zhí)行步驟S230至S270的操作的同時(shí)，控制部分11還可以在顯示屏幕131上顯示諸如消息“正在發(fā)送數(shù)據(jù)”或“正在處理數(shù)據(jù)”等內(nèi)容。圖13是說明本發(fā)明實(shí)施例中在運(yùn)行相似聲音替換程序期間用于設(shè)置素材數(shù)據(jù)替換風(fēng)格的屏幕的示例。如圖13所示，在顯示屏幕131上顯示了表示剪輯數(shù)據(jù)的波形w3的波形wd3以及表示提取為素材數(shù)據(jù)的各個(gè)部分的提取窗ロ wkl、wk2…。還在顯示屏幕131上波形wd3的下方顯示了與提取窗ロ wkl、wk2…相對應(yīng)的圖標(biāo)鏈bkl、bk2…。顯示屏幕131上顯示這些波形、窗口和圖標(biāo)鏈的區(qū)域?qū)?yīng)于上述圖標(biāo)放置區(qū)域ST。因?yàn)閳D13中的水平軸方向?qū)?yīng)于從波形wd3提取的素材之間的位置關(guān)系，因此其與圖標(biāo)放置區(qū)域ST對應(yīng)于時(shí)間軸。不過與圖8所示的示例不同，波形wd3未隨著時(shí)間軸方向上經(jīng)過的預(yù)定時(shí)間而前進(jìn)預(yù)定量。也即，在圖13所示的示例中，隨著時(shí)間軸方向上經(jīng)過的預(yù)定時(shí)間而前進(jìn)預(yù)定量的波形wd3的時(shí)間軸被適當(dāng)?shù)財(cái)U(kuò)展(伸長)或收縮，于是以時(shí)間順序顯示素材數(shù)據(jù)。即，對應(yīng)于圖標(biāo)放置區(qū)域ST的區(qū)域有時(shí)以適當(dāng)擴(kuò)展或收縮的時(shí)間軸來顯示。注意，在使用DB指定數(shù)據(jù)的情況下，對應(yīng)于DB放置區(qū)域DT的區(qū)域可以或可以不顯示在顯示屏幕131上。圖標(biāo)鏈bkl、bk2…各自具有一行圖像的形式，其中這一行圖像的設(shè)計(jì)對應(yīng)于根據(jù) 特征量信息將素材數(shù)據(jù)分入的類別。也即，每個(gè)圖像對應(yīng)于與其特征量信息相關(guān)聯(lián)的圖標(biāo)圖像。盡管圖像設(shè)計(jì)可以不同于圖13所示，但優(yōu)選使得圖像設(shè)計(jì)能夠在所使用的類別之間構(gòu)成視覺區(qū)分。在圖13所示的示例中，對應(yīng)于提取窗ロ wkl的素材數(shù)據(jù)和對應(yīng)于提取窗ロwk4的素材數(shù)據(jù)被分入相同的類別，對應(yīng)于提取窗ロ wk2的素材數(shù)據(jù)和對應(yīng)于提取窗ロ wk3的素材數(shù)據(jù)被分入相同的類別。此外，圖標(biāo)鏈bkl、bk2…包括原始聲音素材行bki,其中排列表不所提取的素材數(shù)據(jù)的圖標(biāo)圖像，還包括相似聲音素材行bkr，其中排列表示替換素材數(shù)據(jù)的圖標(biāo)圖像。在圖13的相似聲音素材行bkr中，在上下方向上按照素材數(shù)據(jù)與對應(yīng)素材數(shù)據(jù)的相似度的降序(后面變型例3中的識別坐標(biāo)軸)來顯示素材數(shù)據(jù)的圖標(biāo)圖像。此外，以較暗的顏色顯示與對應(yīng)的素材數(shù)據(jù)更相似的素材數(shù)據(jù)的圖標(biāo)圖像。注意，相似聲音素材行bkr中的圖標(biāo)圖像行的數(shù)量不限于圖13中所示的ー個(gè)，可以設(shè)置任意期望數(shù)量的圖標(biāo)圖像行。此外，顯示每個(gè)圖標(biāo)圖像之間相似度的方式不限于利用顔色的暗度差別，還可以是其它方式，例如顔色的差別、圖像尺寸的差別等，只要其構(gòu)成各種相似度之間的清楚視覺區(qū)別即可。此外，在每個(gè)圖標(biāo)鏈bkl、bk2…中顯示光標(biāo)ck，其用于指定替換所提取的素材數(shù)據(jù)的替換素材數(shù)據(jù)。因此根據(jù)所提取的素材數(shù)據(jù)的數(shù)量來改變圖標(biāo)鏈的數(shù)據(jù)量?？梢愿鶕?jù)圖標(biāo)鏈來選擇圖標(biāo)鏈中每個(gè)圖標(biāo)的顯示尺寸。例如，可以根據(jù)圖標(biāo)鏈的最大可能的數(shù)量來預(yù)先分配顯示屏幕，其中如果圖標(biāo)鏈的數(shù)量較小則將相對較大的非圖標(biāo)顯示部分置于顯示屏幕左側(cè)，另ー種方案是，可以在每次顯示圖標(biāo)鏈時(shí)根據(jù)圖標(biāo)鏈的數(shù)量來分配顯示屏幕，以使得所顯示的尺寸是可以通過圖標(biāo)改變的，并且將圖標(biāo)鏈顯示在顯示屏幕的基本整個(gè)區(qū)域上。如圖13所示，當(dāng)用戶輸入了用于在圖標(biāo)鏈bkl、bk2 的任意ー個(gè)上指定位置的指令之后，例如通過操作任意一個(gè)光標(biāo)ck而指向該位置，則信息處理終端10的控制部分11進(jìn)行替換設(shè)置，以將所提取的素材數(shù)據(jù)替換為與所操作的光標(biāo)ck的位置相對應(yīng)的替換素材數(shù)據(jù)(圖10的步驟S280)。此外，在用戶通過操作再現(xiàn)按鈕bp指令再現(xiàn)時(shí)(圖10的步驟S290)，控制部分11將剪輯數(shù)據(jù)的提取數(shù)據(jù)替換為替換素材數(shù)據(jù)，以根據(jù)替換設(shè)置來修改所提取的數(shù)據(jù)，并且將替換或修改后的提取數(shù)據(jù)再現(xiàn)和輸出為樂音數(shù)據(jù)(步驟S300)，從而通過揚(yáng)聲器161發(fā)聲或可聽見的生成樂音數(shù)據(jù)。然后，控制部分11將表示修改后的提取數(shù)據(jù)的信息存儲在存儲部分16中，根據(jù)用戶輸入的指令來指定文件名。所述信息可以是表示波形的數(shù)據(jù)或者修改后的提取數(shù)據(jù)的組合，或者是表示提取數(shù)據(jù)與所選擇的替換素材數(shù)據(jù)的組合的數(shù)據(jù)。通過指定文件名即可從信息處理終端10讀出所存儲的文件。注意，用戶可以通過調(diào)節(jié)提取窗ロ wkl、wk2…的時(shí)間軸向長度來調(diào)節(jié)提取素材數(shù)據(jù)的開始或結(jié)束時(shí)間。如果已經(jīng)如此調(diào)節(jié)了提取素材數(shù)據(jù)的開始或結(jié)束時(shí)間，則信息處理終端10可以將表示改變后的開始或結(jié)束時(shí)間的信息發(fā)送至服務(wù)器裝置50，并且服務(wù)器裝置50的控制部分51對作為改變后的素材數(shù)據(jù)的提取素材數(shù)據(jù)執(zhí)行步驟S250的操作。前面描述了聲音生成控制系統(tǒng)I在運(yùn)行相似聲音替換程序期間的操作。<運(yùn)行模板序列程序期間的操作>圖14是說明運(yùn)行模板序列程序期間的顯示屏幕的示圖。根據(jù)該模板序列程序，可以預(yù)先準(zhǔn)備多個(gè)(如16個(gè))模板，并且在所選擇的多個(gè)模板之一所定義的聲音生成定時(shí)發(fā)聲或可聽見的生成素材數(shù)據(jù)。 為了運(yùn)行模板序列程序，用戶操作切換按鈕bts，其接收用戶的操作以在圖13的前述屏幕上指令切換至用于設(shè)置素材數(shù)據(jù)替換風(fēng)格的模板序列程序(即可以在圖13屏幕上由用戶操作來指令切換至模板序列程序)。上述素材數(shù)據(jù)替換風(fēng)格設(shè)置屏幕中顯示的波形wd3被顯示在圖14上部的波形區(qū)域中，在圖14下方的音軌區(qū)域TT中示出多個(gè)(圖13的示例中為4個(gè))音軌。音軌區(qū)域TT對應(yīng)于上述圖標(biāo)放置區(qū)域ST。也即，這些音軌(對應(yīng)于圖13中的tbl至tb4)從上到下稱為第一、第二、第三和第四音軌。音軌tbl、tb2、tb3、tb4與提取窗ロ wkl、wk2、wk3和wk4具有對應(yīng)關(guān)系。提取窗ロ wkl、wk2、wk3和wk4中指示的“a”、“b”、“c”和“d”對應(yīng)于音軌區(qū)域TT的音軌tbl、tb2、tb3、tb4左側(cè)所指示的“a”、“b”、“c”和“d”，于是能夠得知波形區(qū)域中哪個(gè)部分的數(shù)據(jù)對應(yīng)于哪個(gè)音軌的相似聲音。姆個(gè)音軌tbl、tb2、tb3、tb4均在屏幕的水平方向上指示針對ー個(gè)小節(jié)的16個(gè)節(jié)拍的各個(gè)聲音生成定時(shí)；也即，聲音生成定時(shí)從左端圖標(biāo)開始ー個(gè)節(jié)拍接一個(gè)節(jié)拍地順序前迸。即，音軌區(qū)域的水平軸方向表示上述圖標(biāo)放置區(qū)域ST的時(shí)間軸。每個(gè)聲音生成定時(shí)均由圖14中的矩形圖標(biāo)圖像指示。圖標(biāo)圖像中的每個(gè)圖標(biāo)圖像(如后文將被稱為“聲音生成圖標(biāo)圖像tbs”的圖標(biāo)圖像)均顯示為指示聲音生成定時(shí)的亮顯示(即粗框顯示)，粗框中指示的數(shù)值表示所選擇的相似聲音的類型(其對應(yīng)于上述替換素材數(shù)據(jù)的類型)。例如
…表示根據(jù)與所提取素材數(shù)據(jù)的相似度確定的替換素材數(shù)據(jù)，“0”表示對應(yīng)于波形wd3中的提取窗ロ的素材數(shù)據(jù)。根據(jù)顯示圖標(biāo)圖像tbs的音軌，每個(gè)聲音生成圖標(biāo)圖像tbs對應(yīng)于一個(gè)與提取素材數(shù)據(jù)的特征量信息相關(guān)聯(lián)的圖標(biāo)圖像。也即，布置在屏幕垂直軸向上的音軌構(gòu)成了用于定義特征量信息的特征量定義軸。另ー方面，每個(gè)顯示為暗顯示(即圖13中的細(xì)框顯示)的圖標(biāo)圖像都指示非聲音生成定時(shí)(如后文將被稱為“無聲圖標(biāo)圖像tbb”的圖標(biāo)圖像)。例如,在第一音軌tbl中,對應(yīng)于提取窗ロ wkl的素材數(shù)據(jù)在第一節(jié)拍發(fā)聲,被識別為與提取窗ロ wkl對應(yīng)的素材數(shù)據(jù)第三最相似的素材數(shù)據(jù)在第六節(jié)拍發(fā)聲，并且被識別為與提取窗ロ wkl對應(yīng)的素材數(shù)據(jù)第一最相似的素材數(shù)據(jù)在第十節(jié)拍發(fā)聲。通過操作(即觸摸)聲音生成圖標(biāo)圖像tbs中的任意ー個(gè)來改變圖標(biāo)圖像tbs的數(shù)值，用戶能夠循環(huán)地選擇相應(yīng)的相似聲音的類型。不過，盡管在圖14所示示例中針對ー個(gè)小節(jié)十六個(gè)節(jié)拍的情況進(jìn)行描述，但該小節(jié)可以具有雙倍的時(shí)間等，并且小節(jié)的數(shù)量可以為2、4等；即可以選擇任意期望的小節(jié)的時(shí)間類型和小節(jié)的數(shù)量。此外，盡管上文已經(jīng)描述了通過模板序列程序預(yù)定義的模板，但用戶可以創(chuàng)建模板或者修改或處理已有的模板。如上文所述，所創(chuàng)建或處理的模板可以存儲到存儲部分15中，于是可以響應(yīng)于用戶隨后運(yùn)行模板序列程序來讀出并使用這些模板。此外，顯示在音軌區(qū)域TT中的圖標(biāo)圖像的數(shù)量也可以根據(jù)節(jié)拍總數(shù)來增減，或者可以滾動的方式顯示圖標(biāo)圖像。此外可以使用新創(chuàng)建的模板以及預(yù)先準(zhǔn)備的模板。在這種情況下，用戶重新設(shè)置特征量信息，并且從根據(jù)圖10的上述步驟S240提取的素材數(shù)據(jù)中確定與新設(shè)置的特征量信息相似的素材數(shù)據(jù)。另外，可以針對各個(gè)音軌按期望設(shè)置聲音生成定時(shí)。提供在屏幕左下方的滑塊ts可以由用戶滑動，以指定期望的演奏拍子(tempo)。提供在屏幕右下方的模板按鈕tn可操作來選擇ー個(gè)期望的模板。每當(dāng)用戶觸摸模板按鈕tn吋，一個(gè)模板編號的模板都將變?yōu)橄乱荒０寰幪柕哪０?。因此，通過順序地觸摸模板按鈕tn，用戶可以選擇期望的模板類型；在所示的示例中，當(dāng)前選擇了模板編號為“2”的模板。代替在聲音生成圖標(biāo)圖像tbs中指示的數(shù)值，可以通過聲音生成圖標(biāo)圖像tbs的不同亮度或不同顔色深度來顯示相似聲音的類型。類似地，可以通過不同的顔色等代替字符來指示音軌tbl、tb2、tb3、tb4和提取窗ロ wkl、wk2、wk3和wk4之間的對應(yīng)關(guān)系。 圖15是示出了本發(fā)明實(shí)施例中的用于模板序列程序中的圖14的“模板2”的示圖。該模板定義了用于選擇分配至各個(gè)音軌的素材數(shù)據(jù)以及各個(gè)音軌中的聲音生成定時(shí)的特征量信息。圖15所示的特征量信息與圖6的特征量指定數(shù)據(jù)中的特征量信息相同。聲音生成定時(shí)被定義為小節(jié)數(shù)量和小節(jié)中的定時(shí)值(例如ー個(gè)節(jié)拍的定時(shí)值為120)的組合。例如，圖15所示的聲音生成定時(shí)“1:360”指示第一小節(jié)中的第三節(jié)拍。如上文所述，在使用DB指定數(shù)據(jù)的情況下，可以使用與模板的定時(shí)數(shù)據(jù)形式一致的小節(jié)數(shù)量和小節(jié)中定時(shí)值的組合來指定再現(xiàn)時(shí)間范圍。此外，可以在顯示屏幕131上顯示或不顯示對應(yīng)于DB放置區(qū)域DT的區(qū)域。在運(yùn)行相似聲音替換程序期間，通過信息處理終端10在將剪輯數(shù)據(jù)發(fā)送至服務(wù)器裝置50時(shí)也將各個(gè)模板的信息發(fā)送至服務(wù)器裝置50，并且由服務(wù)器裝置50將與各個(gè)模板的特征量信息相似的素材數(shù)據(jù)分配至音軌、并且隨后將分配后的素材數(shù)據(jù)與提取的數(shù)據(jù)一起發(fā)送至信息處理終端10，能夠?qū)崿F(xiàn)通過模板將素材數(shù)據(jù)分配至各個(gè)音軌。然后，信息處理終端10使用分配表來分配音軌和素材數(shù)據(jù)之間的對應(yīng)關(guān)系，并將音軌和素材數(shù)據(jù)之間的對應(yīng)關(guān)系存儲在臨時(shí)存儲區(qū)域中。在圖14所的例中，與提取窗ロ wkl對應(yīng)的素材數(shù)據(jù)被分配給第一音軌tbl，與提取窗ロ wk2對應(yīng)的素材數(shù)據(jù)被分配給第二音軌tb2，與提取窗ロ wk3對應(yīng)的素材數(shù)據(jù)被分配給第三音軌tb3，并且與提取窗ロ wk4對應(yīng)的素材數(shù)據(jù)被分配給第四音軌tb4。盡管通常使用在特征量和聲音生成定時(shí)上彼此不同的16個(gè)模板，但這些模板中的一些也可以與其它模板共享相同的特征量或者聲音生成定時(shí)，從而降低在服務(wù)器裝置50和信息處理終端10之間通信的數(shù)據(jù)量以及在服務(wù)器裝置50中執(zhí)行的計(jì)算量。在顯示屏幕131上顯示如圖14所示的屏幕內(nèi)容時(shí)，如果用戶通過操作再現(xiàn)按鈕bp來指令再現(xiàn)，則信息處理終端10的控制部分11將根據(jù)音軌區(qū)域TT中顯示的任一聲音生成圖標(biāo)圖像tbs所指示的數(shù)值而確定的素材數(shù)據(jù)再現(xiàn)并輸出為樂音數(shù)據(jù)，其中通過揚(yáng)聲器161在與聲音生成圖標(biāo)圖像tbs的位置對應(yīng)的聲音生成定時(shí)可聽見的生成素材數(shù)據(jù)。然后，響應(yīng)于用戶輸入的指令，控制部分11將各個(gè)模板的數(shù)據(jù)以及分配表作為具有指定文件名的單個(gè)文件存儲在存儲部分15的非易失性存儲器中，從而能夠單獨(dú)使用文件名來通過信息處理終端10讀出所存儲的文件?！碊AW上的示例應(yīng)用〉上面已經(jīng)描述了將信息處理終端10應(yīng)用于手寫板終端、移動電話、PDA等。作為另ー示例應(yīng)用，信息處理終端10的各項(xiàng)功能也可以通過運(yùn)行在PC(個(gè)人計(jì)算機(jī))的OC(操作系統(tǒng))上的稱為“DAW”(數(shù)字音頻工作室)的應(yīng)用軟件來實(shí)現(xiàn)。也即，信息處理終端10也可以通過運(yùn)行DAW的PC實(shí)現(xiàn)為音樂處理裝置。這種音樂處理裝置能夠執(zhí)行一系列音樂處理，如音頻信號和MIDI ( 樂器數(shù)字接ロ)事件的記錄/再現(xiàn)、編輯和混音，并且上述序列程序和模板序列程序可以提供為該音樂處理裝置的功能。當(dāng)個(gè)人計(jì)算機(jī)(PC)運(yùn)行DAW的給定應(yīng)用軟件吋，該給定應(yīng)用軟件可以與上述序列程序結(jié)合起來操作，以從控制MIDI事件的記錄/再現(xiàn)的MIDI音序器再現(xiàn)的信號中提取特征量，從而創(chuàng)建序列數(shù)據(jù)并將與所提取的特征量對應(yīng)的素材數(shù)據(jù)記錄為音頻信號。也即，運(yùn)行該應(yīng)用軟件的個(gè)人計(jì)算機(jī)(PC)能夠在MIDI音序器和序列程序之間通信數(shù)據(jù)，并且根據(jù)序列程序創(chuàng)建的數(shù)據(jù)記錄和編輯音頻信號。此外，當(dāng)個(gè)人計(jì)算機(jī)(PC)運(yùn)行DAW的給定應(yīng)用軟件時(shí)，該給定應(yīng)用軟件可以與上述模板序列程序結(jié)合起來操作，以根據(jù)模板序列程序的音軌創(chuàng)建MIDI音序器的MIDI音軌，或者反過來使用MIDI音序器的音軌的定時(shí)信息來創(chuàng)建模板序列程序的模板，并且創(chuàng)建模板序列的一個(gè)或多個(gè)音軌的MIDI數(shù)據(jù)。此外，當(dāng)個(gè)人計(jì)算機(jī)(PC)運(yùn)行混音器相關(guān)的應(yīng)用軟件，并且用戶使用DAW的應(yīng)用軟件的混音器屏幕選擇或指定音軌時(shí)，可以控制序列程序的輸入/輸出音軌以使得能夠在混音器屏幕上以類似于其它MIDI音軌和音頻音軌的方式選擇或指定任意所述輸入/輸出音軌。于是，能夠?qū)IDI數(shù)據(jù)的再現(xiàn)信號和上述序列數(shù)據(jù)混合起來以輸出混音結(jié)果，并且將再現(xiàn)的音頻信號和上述序列數(shù)據(jù)混合起來以輸出混音結(jié)果。注意，個(gè)人計(jì)算機(jī)(PC)可以僅運(yùn)行序列程序，以單獨(dú)基于序列程序執(zhí)行再現(xiàn)輸出和記錄。此外，在DAW的應(yīng)用中進(jìn)行數(shù)據(jù)存儲和再現(xiàn)時(shí)，可以提供上述序列數(shù)據(jù)和DB指定數(shù)據(jù)來作為工程文件的組成數(shù)據(jù)，并將其組織到單個(gè)工程文件中。于是在這種情況下，エ程文件除了例如文件頭、音頻音軌的數(shù)據(jù)(即多個(gè)音軌的管理數(shù)據(jù)和波形數(shù)據(jù))、音頻混音器的數(shù)據(jù)(多個(gè)通道的參數(shù))、MIDI音軌的數(shù)據(jù)(多個(gè)音軌的序列數(shù)據(jù))、軟件樂音發(fā)生器的數(shù)據(jù)(啟動的軟件樂音發(fā)生器的參數(shù))、硬件樂音發(fā)生器的數(shù)據(jù)(登記在樂音發(fā)生器架(rack)中的硬件樂音發(fā)生器的參數(shù))、軟件音效器(啟動的軟件音效器的參數(shù))、硬件音效器(嵌入的硬件音效器的參數(shù))、樂音發(fā)生器列表、音效器列表、樂音發(fā)生器LAN的數(shù)據(jù)及其它數(shù)據(jù)，還包括上述序列數(shù)據(jù)和DB指定數(shù)據(jù)。利用這種構(gòu)造，可以將DAW的應(yīng)用所提供的大量音頻數(shù)據(jù)用作序列數(shù)據(jù)和素材數(shù)據(jù)的基礎(chǔ)，于是不僅能夠顯著改善序列程序的可用性，還可以將序列程序用于MIDI音序器的工具或者音頻數(shù)據(jù)編輯工作?！醋冃屠怠醋冃屠?>在上述優(yōu)選實(shí)施例中顯示在圖標(biāo)放置區(qū)域ST中的圖標(biāo)圖像可以響應(yīng)于用戶輸入的指令在時(shí)間軸方向上能夠擴(kuò)展、伸長或者收縮。圖16是本發(fā)明的變型例I中在運(yùn)行序列程序期間呈現(xiàn)在顯示屏幕上的示例顯示的示圖。響應(yīng)于用戶輸入的指令，顯示控制部分110在沿時(shí)間軸的方向上(時(shí)間軸方向)改變特定的ー個(gè)圖標(biāo)圖像的長度。例如，顯示控制部分110將圖8的圖標(biāo)圖像s4在時(shí)間軸方向上伸長為如圖16的圖標(biāo)圖像s41所示。在這種情況下，當(dāng)通過輸出部分140輸出對應(yīng)于圖標(biāo)圖像s41的素材數(shù)據(jù)時(shí)，聲音生成控制部分130可以根據(jù)圖標(biāo)圖像s41的時(shí)間軸長度，通過執(zhí)行擴(kuò)展素材數(shù)據(jù)波形的時(shí)間伸長處理、重復(fù)輸出素材數(shù)據(jù)的循環(huán)處理等來對素材數(shù)據(jù)進(jìn)行處理，然后通過輸出部分140將所得的處理后的素材數(shù)據(jù)輸出為樂音數(shù)據(jù)。在這種情況下，將必需的輸入(如聲音生成結(jié)束定時(shí)和循環(huán)再現(xiàn)標(biāo)志)添加為序列信息。圖8所示的全部圖標(biāo)圖像具有相同的尺寸，并且上文描述的即時(shí)修改是在時(shí)間軸方向上對任ー圖標(biāo)圖像進(jìn)行伸長或擴(kuò)展。另ー種方案是，即使在圖標(biāo)圖像被伸長時(shí)，也可以顯示與素材數(shù)據(jù)的估計(jì)的再現(xiàn)聲音長度相對應(yīng)的長度，其中該素材數(shù)據(jù)被識別為與對應(yīng)于圖標(biāo)圖像的特征量信息相似。〈變型例2>
已經(jīng)在優(yōu)選實(shí)施例中將圖標(biāo)放置區(qū)域ST的垂直軸描述為表示音量的坐標(biāo)軸(即音量軸)。不過，本發(fā)明不限于此，該垂直軸還可以是表示聲音間距、長度等的坐標(biāo)軸(下文中將稱為“指定坐標(biāo)軸”)。也即，圖標(biāo)放置區(qū)域ST可以具有指定坐標(biāo)軸，其表示素材數(shù)據(jù)的除音量之外的指定處理內(nèi)容的指定值。如果指定坐標(biāo)軸是表示間距的坐標(biāo)軸，則聲音生成控制部分130可以根據(jù)圖標(biāo)圖像在指定坐標(biāo)軸上的位置來改變素材數(shù)據(jù)的間距，然后通過數(shù)據(jù)輸出部分140將改變間距后的素材數(shù)據(jù)輸出為樂音數(shù)據(jù)。如果指定坐標(biāo)軸是表示聲音長度的坐標(biāo)軸，則聲音生成控制部分130可以根據(jù)圖標(biāo)圖像在指定坐標(biāo)軸上的位置來執(zhí)行(用于擴(kuò)展素材數(shù)據(jù)的波形的)時(shí)間伸長處理、(用于重復(fù)輸出素材數(shù)據(jù)的)循環(huán)處理等，并通過輸出部分140將處理后的素材數(shù)據(jù)輸出為樂音數(shù)據(jù)。此外，由指定坐標(biāo)軸指定的處理內(nèi)容可以關(guān)于多種類型的因素，如音量和間距，其中指定坐標(biāo)軸可以響應(yīng)于用戶輸入的指令在多種類型之間切換，從而將圖標(biāo)圖像放置在沿著切換之后的坐標(biāo)軸的位置上。可以通過將圖標(biāo)圖像放置在具有這種可切換指定坐標(biāo)軸的圖標(biāo)放置區(qū)域ST中，來對素材數(shù)據(jù)進(jìn)行各種處理?！醋冃屠?>盡管已經(jīng)在優(yōu)選實(shí)施例中將圖標(biāo)放置區(qū)域ST的垂直軸描述為指定了素材數(shù)據(jù)的處理內(nèi)容的指定坐標(biāo)軸，但其也可以是表示識別值的坐標(biāo)軸，該識別值用于通過識別部分510來識別素材數(shù)據(jù)(這種坐標(biāo)軸在下文將被稱為“識別坐標(biāo)軸”)。在這種情況下，識別部分510可以根據(jù)圖標(biāo)圖像在識別坐標(biāo)軸上的位置來識別素材數(shù)據(jù)。例如，在識別值表示相似度的情況下，如果圖標(biāo)圖像在圖標(biāo)放置區(qū)域ST中的位置更靠上，則可以采用由識別部分510識別出同提取的素材數(shù)據(jù)具有較低相似度(即其特征量信息與所提取的素材數(shù)據(jù)的特征量信息具有較大的Euclidian距離)的素材數(shù)據(jù)。除了由用戶指定相似度，還可以響應(yīng)于用戶執(zhí)行的預(yù)定操作(如任意按鈕操作)來根據(jù)某種算法(例如隨機(jī)算法)指定相似度，在該算法中預(yù)先確定了與全部或預(yù)先指定的部分圖標(biāo)圖像相關(guān)聯(lián)的相似度。此外，上述識別值也可以關(guān)于多種因素，在這種情況下，可以將圖標(biāo)圖像放置在圖標(biāo)放置區(qū)域ST中一個(gè)可以切換選擇的識別坐標(biāo)軸中以及變型例2的指定坐標(biāo)軸中。識別 值的類型的另ー示例是用于將對應(yīng)于圖標(biāo)圖像的特征量信息分入的類別，在這種情況下，可以改變識別坐標(biāo)軸上的識別值以改變特征量信息并因而改變類別。〈變型例4>根據(jù)上述優(yōu)選實(shí)施例，通過運(yùn)行相似聲音替換程序?qū)@示在顯示屏幕131上的內(nèi)容從圖12的內(nèi)容切換為圖13的內(nèi)容，從而由用戶通過各種選項(xiàng)選擇替換素材數(shù)據(jù)來作為相似聲音。不過，本發(fā)明不限于此，在變型例4中，可以顯示圖17的內(nèi)容，以按照與前述不同的方式選擇替換素材數(shù)據(jù)。下面參照圖17和圖18對顯示屏幕131上的顯示內(nèi)容以及變型例4中聲音生成控制系統(tǒng)I的操作進(jìn)行描述圖17是說明變型例4中在運(yùn)行相似聲音替換程序期間用于指定替換素材數(shù)據(jù)的屏幕的示圖，圖18是在運(yùn)行相似聲音替換程序期間由聲音生成控制系統(tǒng)I執(zhí)行的操作的示圖。圖18所示的步驟S210至步驟S250的操作與上述優(yōu)選實(shí)施例中的操作相同，在此不再給予說明以免重復(fù)。服務(wù)器裝置50的控制部分51通過通信部分54將表示從剪輯數(shù)據(jù)提取的素材數(shù)據(jù)的信息(即表示剪輯數(shù)據(jù)中的數(shù)據(jù)范圍和特征量信息的信息)作為提取結(jié)果數(shù)據(jù)發(fā)送(步驟 S310)。在信息處理終端10接收到提取結(jié)果數(shù)據(jù)之后，信息處理終端10的控制部分11將顯示屏幕131上的顯示內(nèi)容切換為圖17的內(nèi)容。在圖17所示的示例中，將剪輯數(shù)據(jù)的波形wd3和提取窗ロ wrl、wr2…顯示在顯示屏幕131上。顯示提取窗ロ的區(qū)域?qū)?yīng)于上述圖標(biāo)放置區(qū)域ST，該區(qū)域的水平軸對應(yīng)于時(shí)間軸。每個(gè)提取窗ロ均對應(yīng)于與所提取的素材數(shù)據(jù)的特征量信息相關(guān)聯(lián)的圖標(biāo)圖像。在所示的示例中，以對應(yīng)于各個(gè)特征量信息所分入類別的顔色來顯示提取窗ロwrU wr2…。這里，每個(gè)提取窗ロ都填充對應(yīng)于該類別的半透明顔色，使得顔色在從下到上的方向上變深或變暗，同時(shí)顏色在從上到下方向上變淺或變亮。下面針對提取窗ロ wrl進(jìn)行說明。在提取窗ロ wrl的上端部分顯示種類切換區(qū)域wrb。種類切換區(qū)域wrb被分成多個(gè)子區(qū)域，這些子區(qū)域各自填充對應(yīng)于類別的顔色。此外，提取窗ロ wrl中的垂直位置(即垂直軸方向上的位置)與相似度相關(guān)聯(lián)，其中相似度在從下到上的方向上増大；也即相似度與顏色密度互相關(guān)。如果用戶指定了種類切換區(qū)域wrb的任何位置，則控制部分11將顯示屏幕131的提取窗ロ wrl的顏色變?yōu)橛脩糁付ǖ奈恢盟鶎俚淖訁^(qū)域的顔色。此時(shí)，顔色在從下到上的方向上變深同時(shí)在從上到下方向上變淺的顔色密度漸變圖案不發(fā)生改變。通過這種方式，控制部分11將對應(yīng)于已改變成的顔色的類別設(shè)置為搜索目標(biāo)種類。如果未進(jìn)行這種用戶指定，則仍將對應(yīng)于提取窗ロ的素材數(shù)據(jù)的特征量信息所分入的原始類別設(shè)置為搜索目標(biāo)種類。如果用戶指定了提取窗ロ wrl內(nèi)的任何位置，則控制部分11將對應(yīng)于用戶指定位置的垂直軸位置的相似度設(shè)置為捜索條件。按照前述方式，控制部分11將該種類和相似度設(shè)置為搜索條件(步驟S320)。當(dāng)用戶操作了再現(xiàn)按鈕bp時(shí)，控制部分11通過通信部分14將表示捜索條件的條件數(shù)據(jù)與識別提取窗口中的素材數(shù)據(jù)的信息相關(guān)聯(lián)地進(jìn)行發(fā)送(步驟S330)。在服務(wù)器裝置50接收到條件數(shù)據(jù)之后，按照與上述優(yōu)選實(shí)施例中的步驟S260相似的方式，控制部分51識別與所提取的素材數(shù)據(jù)的特征量信息相似的素材數(shù)據(jù)(步驟S340)。不過，與優(yōu)選實(shí)施例不同，在所示的示例中，控制部分51基于條件數(shù)據(jù)來識別素材數(shù)據(jù)。也即，此處的捜索目標(biāo)是存儲在特征量DB中并且其特征量信息被分入由條件數(shù)據(jù)所指示的類別的素材數(shù)據(jù)。此外，按照相似度的降序來順序識別這種素材數(shù)據(jù)，即從具有最小Euclidian距離的素材數(shù)據(jù)開始捜索。即，識別出相比于其他素材數(shù)據(jù)其特征量信息與所提取的素材數(shù)據(jù)的特征量信息具有較高相似度和最接近的Euclidian距離的素材數(shù)據(jù)。在采用了 DB指定數(shù)據(jù)的情況下，如上文所述，控制部分51基于DB指定數(shù)據(jù)來確在識別素材數(shù)據(jù)時(shí)成為搜索目標(biāo)的定特征量DB的類型。當(dāng)控制部分51基于條件數(shù)據(jù)識別了素材數(shù)據(jù)之后，其通過通信部分54將識別出的素材數(shù)據(jù)和標(biāo)識替換素材數(shù)據(jù)的信息彼此相關(guān)聯(lián)地發(fā)送至信息處理終端10(步驟S350)。在從服務(wù)器裝置50接收這些數(shù)據(jù)之后，信息處理終端10的控制部分11將所提取的素材數(shù)據(jù)替換為識別出的素材數(shù)據(jù)(步驟S360)。當(dāng)用戶通過操作再現(xiàn)按鈕bp來指令再現(xiàn)時(shí)(步驟S370)，控制部分11再現(xiàn)已經(jīng)進(jìn)行了素材數(shù)據(jù)替換的剪輯數(shù)據(jù)以將剪輯數(shù)據(jù)輸出為樂音數(shù)據(jù)(步驟S380)，從而通過揚(yáng)聲器161可聽見地生成樂音數(shù)據(jù)。圖19是說明圖17所示屏幕的變型例的示圖。在圖19所示的示例中，在每個(gè)提取窗ロ中垂直軸方向上的用戶指定位置處顯示水平條狀標(biāo)記wrc (代表相似度)。于是，用戶能夠容易地得知當(dāng)前指定的相似度為多少。此外，在圖19所示的示例中，代替替換素材數(shù)據(jù)的波形，顯示包含在提取窗ロ wrl中的波形wd3的一部分wra。應(yīng)當(dāng)理解,上述說明適用于其它提取窗ロ wr2、wr3和wr4。這里，每個(gè)提取窗ロ均表示服務(wù)器裝置50中提取的素材數(shù)據(jù)的一部分。此外，可以將用戶指定的部分(如圖19示出的部分wrs)添加為從服務(wù)器裝置50中提取的素材數(shù)據(jù)的一部分。在這種情況下，可以將表示部分wrs的信息從信息處理終端10發(fā)送至服務(wù)器裝置50，以將該部分wrs的波形處理為已經(jīng)在圖18的步驟S240中被提取為素材數(shù)據(jù)。也即，可以將該部分wrs作為用戶指定提取窗ロ來増加提取窗ロ的數(shù)量。此外，用戶可以刪除用戶指定提取窗ロ。盡管前文已經(jīng)針對由用戶指定相似度的情況進(jìn)行了說明，但也可以響應(yīng)于用戶執(zhí)行的預(yù)定操作(任意按鈕操作)，根據(jù)將相似度預(yù)定為與全部或預(yù)指定的部分提取窗ロ相關(guān)聯(lián)的算法(例如隨機(jī)算法)來指定相似度。此外，提取窗口中包括的部分以及其它部分的再現(xiàn)音量可以彼此獨(dú)立地調(diào)節(jié)。這種音量調(diào)節(jié)可以連續(xù)量的方式或者開/關(guān)方式間斷地控制。此外，可以針對每個(gè)提取窗ロ獨(dú)立地執(zhí)行音量調(diào)節(jié)。通過這種方式，能夠以突出或不突出素材數(shù)據(jù)部分的方式來可聽見地生成聲音。也可以在將上述針對優(yōu)選實(shí)施例描述的圖13的顯示呈現(xiàn)在顯示屏幕131上的同時(shí)適用這些修改的特征。此外，如針對優(yōu)選實(shí)施例所述，用戶可以調(diào)節(jié)提取窗ロ wrl、wr2、…的時(shí)間軸方向的長度，從而使得所提取素材數(shù)據(jù)的開始和結(jié)束時(shí)間可調(diào)?！醋冃屠?>在上述優(yōu)選實(shí)施例中，圖9所示步驟S170的操作(即在運(yùn)行序列程序期間通過數(shù)據(jù)輸出部分140輸出樂音數(shù)據(jù)的操作)是由聲音生成控制部分130在時(shí)間軸上對應(yīng)于圖標(biāo)圖像的位置的定時(shí)處輸出素材數(shù)據(jù)而實(shí)現(xiàn)的。不過，本發(fā)明不限于此，在變型例5中，可以由聲音生成控制部分130在整個(gè)輸出時(shí)間周期中生成樂音數(shù)據(jù)來作為表示聲音生成內(nèi)容的數(shù)據(jù)，然后通過輸出部分140輸出。聲音生成控制部分130可以將所生成的樂音數(shù)據(jù)存儲到存儲部分15中。此外，代替被存儲為樂音數(shù)據(jù)自身，素材數(shù)據(jù)還可以存儲為生成樂音數(shù)據(jù)所必需的多種類型數(shù)據(jù)的組合，如序列數(shù)據(jù)和素材數(shù)據(jù)的組合?？梢杂捎脩糨斎氪鎯Ω鞣N類型數(shù)據(jù)的指令。此外在上述優(yōu)選實(shí)施例中，通過信息處理終端10的揚(yáng)聲器161來輸出基于這些樂音數(shù)據(jù)的聲音?；蛘?，可以通過連接至信息處理終端10的外部揚(yáng)聲器設(shè)備或者通過服務(wù)器裝置50輸出基于這些樂音數(shù)據(jù)的聲音。也即，聲音生成控制部分130可以不僅控制信息處理終端10的構(gòu)成組件，還可以控制連接至控制信息處理終端10的構(gòu)成組件?！醋冃屠?>在上述優(yōu)選實(shí)施例中，在運(yùn)行序列程序期間顯示在顯示屏幕131上的圖標(biāo)圖像、DB圖像等是通過程序生成的。不過，本發(fā)明不限于此，在變型例6中，可以將這些圖像預(yù)存儲在存儲部分15、55等中。〈變型例7>在上述優(yōu)選實(shí)施例中，與要顯示在圖標(biāo)放置區(qū)域ST中的圖標(biāo)圖像相對應(yīng)的特征量信息的內(nèi)容是根據(jù)用戶輸入的指令來確定的。不過，本發(fā)明不限于此，在變型例7中，用戶可以選擇期望的圖標(biāo)圖像的設(shè)計(jì)，從而確定針對所選設(shè)計(jì)對應(yīng)類別而預(yù)定的代表值來作為特征量信息。〈變型例8>在上述優(yōu)選實(shí)施例中，DB指定數(shù)據(jù)的內(nèi)容是由用戶將DB圖像放置在DB放置區(qū)域DT中來確定的。不過，本發(fā)明不限于此，在變型例8中，再現(xiàn)時(shí)間范圍和特征量DB類型之間的關(guān)系可以由控制部分11自動確定?！醋冃屠?>上述優(yōu)選實(shí)施例可以通過如下方式進(jìn)行修改，其中如果存在特征量DB的類型沒有被DB指定數(shù)據(jù)指定的再現(xiàn)時(shí)間范圍，則將預(yù)定的特征量DB的類型(多種類型中的全部或ー個(gè)或特定多個(gè))或者在前一再現(xiàn)時(shí)間范圍中指定的類型指定為該再現(xiàn)時(shí)間范圍的搜索目標(biāo)?！醋冃屠?0>盡管在上述優(yōu)選實(shí)施例中，聲音生成控制系統(tǒng)I包括通過通信線路1000互連的信息處理終端10和服務(wù)器裝置50，但聲音生成控制系統(tǒng)I也可以包括構(gòu)造為整體単元的信息處理終端10和服務(wù)器裝置50，并且其間不帶有通信線路1000。此外，即使信息處理終端10和服務(wù)器裝置50被提供為分離的裝置，信息處理終端10的ー個(gè)或多個(gè)構(gòu)成組件也可以包括在服務(wù)器裝置50中，或者相反服務(wù)器裝置50的ー個(gè)或多個(gè)構(gòu)成組件也可以包括在信息處理終端10中。此外，上述存儲在信息處理終端10的存儲部分15中的各種信息以及存儲在服務(wù)器裝置50的存儲部分55中的各種信息僅需要存儲在整個(gè)聲音生成控制系統(tǒng)I中 的任一存儲部分中。例如，可以將用于存儲上述各種信息的全部或部分的存儲裝置連接至通信線路1000，而不是連接至信息處理終端10和服務(wù)器裝置50。此外，可以與能夠連接至通信線路1000的其它信息處理終端10共享各種信息，從而其它用戶可以使用所述各種信
O
例如，特征量DB可以存儲在服務(wù)器裝置50的存儲部分55中，剪輯數(shù)據(jù)DB可以存儲在信息處理終端10的存儲部分15中，從而實(shí)現(xiàn)識別部分510的功能。此外，捜索程序和提取程序可以在信息處理終端10中運(yùn)行，或者基于從信息處理終端10獲取的信息在服務(wù)器裝置50中運(yùn)行。此外，本發(fā)明不限于由計(jì)算機(jī)或處理器實(shí)現(xiàn)基于前述序列程序和模板序列程序的軟件配置的構(gòu)成。本發(fā)明可以由專用音序器的硬件構(gòu)成。如果將本發(fā)明應(yīng)用于DAW并且僅與MIDI音序器協(xié)作即足夠，則可以將上述序列程序和模板序列程序應(yīng)用于MIDI音序器。下面參照圖20和圖21對將上述信息處理終端10和服務(wù)器裝置50構(gòu)造為整體單元的信息處理終端IOA進(jìn)行說明。圖20是說明變型例10中的信息處理終端IOA的構(gòu)造的示圖。在下面的描述中，僅對不同于上述優(yōu)選實(shí)施例中的信息處理終端10的構(gòu)成組件(如控制部分IlA和存儲部分15A)進(jìn)行說明，省略了對與信息處理終端10相同的構(gòu)成組件(即具有與信息處理終端10中相同的參考標(biāo)號和字符的構(gòu)成組件)的說明以避免重復(fù)。存儲部分15A是上述優(yōu)選實(shí)施例中使用的存儲部分15和存儲部分55的組合；也即，存儲部分15A對上述存儲在存儲部分15中的內(nèi)容以及存儲在存儲部分55中的內(nèi)容進(jìn)行存儲?？刂撇糠諭lA運(yùn)行上述優(yōu)選實(shí)施例中由控制部分11和51分別運(yùn)行的程序。需要一起運(yùn)行的程序(如序列程序和捜索程序)可以集成并作為單個(gè)程序存儲在存儲部分15A中。下面參照圖21對運(yùn)行序列程序和捜索程序的控制部分IlA所實(shí)現(xiàn)的功能進(jìn)行說明。圖21是說明變型例10中信息處理終端IOA的功能的功能框圖。如圖21所示，變型例10中的信息處理終端IOA與圖7所示的信息處理終端10的不同之處在于，聲音生成控制部分130A和識別部分510A不通過通信部分即可彼此通信信息。信息處理終端IOA的其它方面與信息處理終端10相似，在此不再給予說明以免重復(fù)?！醋冃屠?1>模板序列程序中的音軌數(shù)量不限于4個(gè)，可以多于或小于4個(gè)。音軌的數(shù)量可以無限大(實(shí)際上上至系統(tǒng)允許的數(shù)量)。在這種情況下，可以將大量特征量數(shù)據(jù)置于時(shí)間軸上，并且可以彼此獨(dú)立地改變相似聲音和特征量參數(shù)。〈變型例12>盡管上述優(yōu)選實(shí)施例配置為根據(jù)特征量DB的數(shù)據(jù)范圍從剪輯數(shù)據(jù)DB中獲取必需的素材數(shù)據(jù)，但也可以僅預(yù)先存儲預(yù)先剪輯的部分的素材數(shù)據(jù)，在這種情況下不必將表示數(shù)據(jù)范圍的信息存儲在特征量DB中?！醋冃屠?3>盡管上述優(yōu)選實(shí)施例配置為搜索特征量DB以識別與所提取的素材數(shù)據(jù)的特征量信息具有高度相似度的素材數(shù)據(jù)(見圖10的步驟S260)，但也可以設(shè)置相似度的閾值，從而排除大于與閾值對應(yīng)的Euclidian距離的素材數(shù)據(jù)，這是因?yàn)槿绻崛×诉^于相似的素材數(shù)據(jù)，則無法從原始聲音產(chǎn)生特定的變化，或者是排除小于與閾值對應(yīng)的Euclidian距離的素材數(shù)據(jù)，從而不識別與提取的素材數(shù)據(jù)差距大大的素材數(shù)據(jù)。另外也可以同時(shí)采用上、述閾值。這些閾值可以由用戶設(shè)置。〈變型例14>在前面關(guān)于優(yōu)選實(shí)施例和變型例4的說明中，已經(jīng)指出用戶可以調(diào)節(jié)提取窗ロ的時(shí)間軸方向的長度，這種配置允許進(jìn)行精細(xì)的時(shí)間軸方向的長度調(diào)節(jié)。圖22是說明本發(fā)明的變型例14中在運(yùn)行相似聲音替換程序期間用于指定要替換的素材數(shù)據(jù)的屏幕示圖。具體來說，圖22示出了用戶已經(jīng)在上述變型例4的圖19的屏幕上對提取窗ロ wr3執(zhí)行了預(yù)定操作(例如雙擊操作)時(shí)所顯示的內(nèi)容。響應(yīng)于用戶的操作顯示如圖22所示的彈出窗ロ PW1，其以放大的比例示出對應(yīng)于提取窗ロ wr3的波形。用戶可以通過改變彈出窗ロ PWl上的波形的范圍來調(diào)節(jié)波形的時(shí)間軸長度。由于該波形是以放大的比例顯示在彈出窗ロ PWl上，因此可以精細(xì)地調(diào)節(jié)波形的時(shí)間軸長度。 還可以在上述優(yōu)選實(shí)施例的如圖8所示的顯示屏幕上在彈出窗口上執(zhí)行時(shí)間軸長度調(diào)節(jié)。圖23是說明本發(fā)明的變型例14中在運(yùn)行序列程序期間呈現(xiàn)在顯示屏幕上的示例顯示的示圖。具體來說，圖23示出了當(dāng)用戶已經(jīng)在圖8的顯示屏幕上對圖標(biāo)圖像s3執(zhí)行預(yù)定操作(如雙擊操作)時(shí)的顯示內(nèi)容。響應(yīng)于用戶的操作而顯示圖23所示的彈出窗ロPW2，其以放大的比例示出對應(yīng)于圖標(biāo)圖像s3的波形?！皩?yīng)于圖標(biāo)圖像s3的波形”是要在再現(xiàn)時(shí)與圖標(biāo)圖像s3相關(guān)聯(lián)地可聽見地生成的聲音的波形。用戶可以通過改變彈出窗ロPW2上的波形的范圍來調(diào)節(jié)該波形的時(shí)間軸長度?！醋冃屠?5>盡管在上述優(yōu)選實(shí)施例中在DB放置區(qū)域DT中顯示了與數(shù)據(jù)庫DB的類型相關(guān)聯(lián)的DB圖像，但也可以彼此獨(dú)立地顯示作為類型捜索目標(biāo)的特征量DB的類型和時(shí)間范圍。圖24是說明本發(fā)明的變型例15中在運(yùn)行序列程序期間呈現(xiàn)在顯示屏幕上的示例顯示的示圖。在圖24所示示例的DB放置區(qū)域DT中，以多個(gè)水平行來顯示指定類型的特征量DB。以各個(gè)水平行來放置表示時(shí)間范圍的DB周期指定圖像d I a、d2a ，在該時(shí)間范圍中指定的特征量DB成為搜索目標(biāo)。此外，在DB放置區(qū)域DT的左側(cè)顯示用于指定特征量DB類型的DB類型指定區(qū)域DM。用戶可以通過彈出菜單等改變與水平行對應(yīng)的特征量DB的類型。在圖24所示的示例中，指定了特征量數(shù)據(jù)庫DBa、DBbjP DBc，例如特征量數(shù)據(jù)庫DBa成為通過DB類型指定圖像dla指定的時(shí)間范圍中的搜索目標(biāo)。盡管圖24的顯示與圖8的顯示不同，但特征量DB類型和其中特征量DB成為搜索目標(biāo)的時(shí)間范圍在圖24的顯示與圖8的顯示之間是相同的。可以在DB類型指定區(qū)域DM的左側(cè)顯示復(fù)選框CB，于是用戶可以指定在相應(yīng)水平行中指定的捜索目標(biāo)是否有效。這種復(fù)選框CB也可以應(yīng)用在圖8的顯示中?！醋冃屠?6>在上述優(yōu)選實(shí)施例中，根據(jù)響應(yīng)于用戶指令而確定的特征量信息，將圖8顯示上的圖標(biāo)圖像各自定位。在變型例16中，用戶可以在指定特征量信息時(shí)從特征量DB捜索期望的特征量信息。為此，例如可以采用在日本專利申請?zhí)卦S公開第2011-163171號公開的方法。此外，可以將在圖24所示的復(fù)選框中指定的特征量DB作為搜索目標(biāo)。注意，當(dāng)用戶要指定與圖標(biāo)圖像對應(yīng)的特征量信息時(shí)，可以在圖8顯示的一部分上呈現(xiàn)用于指定特征量信息的顯示。作為另ー種替代方案，可以響應(yīng)于用戶在任一圖標(biāo)圖像上執(zhí)行的預(yù)定操作(如雙擊操作)來顯示彈出窗ロ等，于是用戶能夠指定與圖標(biāo)圖像對應(yīng)的特征量信息。< 變型例 17>在本發(fā)明的上述優(yōu)選實(shí)施例中，由用戶在圖8的顯示上指定特征量DB的類型以及其中特征量DB的類型成為搜索目標(biāo)的時(shí)間范圍。在變型例17中，可以響應(yīng)于用戶執(zhí)行的預(yù)定操作(如隨機(jī)按鈕的操作)，根據(jù)預(yù)定算法(如隨機(jī)算法)指定這種特征量DB的類型和時(shí)間范圍。或者，如果如圖8的示例一樣預(yù)先確定了特征量DB的類型和其中特征量DB的類型成為搜索目標(biāo)的時(shí)間范圍，則可以響應(yīng)于用戶指定任一 DB圖像并根據(jù)針對指定的DB 圖像預(yù)定的算法(如隨機(jī)算法)來改變特征量DB的類型和時(shí)間范圍中的任ー個(gè)。此外，通過隨機(jī)選擇任一數(shù)據(jù)庫，可以隨機(jī)執(zhí)行如下操作，即在激活狀態(tài)下(即其中特征量DB選擇功能激活的狀態(tài)下)放置DB放置區(qū)域DT自身以允許選擇特征量DB，或者在未激活狀態(tài)下(即其中特征量DB選擇功能未激活的狀態(tài)下)放置DB放置區(qū)域DT自身以允許僅應(yīng)用ー個(gè)特定的特征量DB。此外，可以隨機(jī)執(zhí)行如下操作，即在激活狀態(tài)下(即其中所選擇的特征量DB被設(shè)置為捜索目標(biāo)的狀態(tài)下)或未激活狀態(tài)下(即其中所選擇的特征量DB未被設(shè)置為捜索目標(biāo)的狀態(tài)下)將所選擇的特征量DB放置在DB放置區(qū)域DT中。在這種情況下，可以將每個(gè)對應(yīng)于激活特征量DB的DB圖像置于彩色狀態(tài)，同時(shí)將每個(gè)對應(yīng)于未激活特征量DB的DB圖像置于灰暗狀態(tài)等，從而能夠視覺上識別已經(jīng)改變了其顯示的任何特征量DB是否激活。< 變型例 18>在上述優(yōu)選實(shí)施例中呈現(xiàn)的圖8的顯示上，如果不存在對應(yīng)于圖標(biāo)圖像的聲音，則可以將圖標(biāo)圖像置于灰暗狀態(tài)?！安淮嬖趯?yīng)于圖標(biāo)圖像的聲音”意味著例如已經(jīng)確定在對應(yīng)于圖標(biāo)圖像的時(shí)間范圍中不存在作為搜索目標(biāo)的特征量DB的情況，或者不存在由識別部分510基于對應(yīng)于圖標(biāo)圖像的特征量信息而識別出的素材數(shù)據(jù)的情況?！安淮嬖谟勺R別部分510識別出的素材數(shù)據(jù)”意味著例如被識別為與對應(yīng)于圖標(biāo)圖像的特征量信息最相似的素材數(shù)據(jù)具有小于相似度預(yù)定閾值的相似度的情況，或者是在利用類別縮窄搜索目標(biāo)的情形下與圖標(biāo)圖像對應(yīng)的類別未包括在捜索目標(biāo)特征量DB中的情況。< 變型例 19>上述優(yōu)選實(shí)施例中采用的每個(gè)程序均可以存儲在諸如磁存儲介質(zhì)(如磁帶或磁盤)、光存儲介質(zhì)(如光盤)、磁光存儲介質(zhì)或半導(dǎo)體存儲器的計(jì)算機(jī)可讀存儲介質(zhì)中來提供。此外，信息處理終端10或服務(wù)器裝置50可以通過網(wǎng)絡(luò)下載程序。< 變型例 20>優(yōu)選實(shí)施例已經(jīng)說明了將通過序列程序創(chuàng)建的文件和通過模板序列程序創(chuàng)建的文件作為單獨(dú)的文件存儲到非易失性存儲器中。在變型例20中，響應(yīng)于僅ー個(gè)操作而將通過序列程序創(chuàng)建的文件和通過模板序列程序創(chuàng)建的文件存儲到非易失性存儲器中。此時(shí)，這些文件可以作為単獨(dú)的文件存儲(例如具有不同的擴(kuò)展名)，或者組合起來存儲在單個(gè)文件中。此外，可以根據(jù)對應(yīng)樂曲名、日期等信息來自動指定每個(gè)文件名，而無需通過用戶指定。本申請基于2011年3月2日提交的JP PA 2011-045708以及2011年11月4日提交的JP PA 2011-242606，并要求其優(yōu)先權(quán)。優(yōu)先權(quán)申請的公開，包括其附圖、權(quán)利要求和說明書通過引用整體并入本申 請。
權(quán)利要求
1.ー種聲音生成控制裝置，包括 顯示控制部分，其在顯示屏幕上顯示具有時(shí)間軸的圖標(biāo)放置區(qū)域的圖像，并且在圖標(biāo)放置區(qū)域中與時(shí)間軸上的期望時(shí)間位置相關(guān)聯(lián)地顯示圖標(biāo)圖像，其中圖標(biāo)圖像與特征量信息相關(guān)聯(lián)，所述特征量信息表示包括聲音素材波形的素材數(shù)據(jù)的特征； 設(shè)置部分，其與圖標(biāo)放置區(qū)域的時(shí)間軸上的期望時(shí)間范圍相關(guān)聯(lián)地設(shè)置要被使用的特定數(shù)據(jù)庫，所述特定數(shù)據(jù)庫是從存儲與特 量信息相關(guān)聯(lián)的素材數(shù)據(jù)的多種類型的數(shù)據(jù)庫中選擇的；和 聲音生成控制部分，其基干與圖標(biāo)圖像相關(guān)聯(lián)的特征量信息來從數(shù)據(jù)庫獲取素材數(shù)據(jù)，并且基于所獲取的素材數(shù)據(jù)和圖標(biāo)圖像被放置的時(shí)間位置來生成樂音數(shù)據(jù)，其中所述數(shù)據(jù)庫是與包含圖標(biāo)圖像被放置的時(shí)間位置的時(shí)間范圍相關(guān)聯(lián)地設(shè)置的。
2.如權(quán)利要求I所述的聲音生成控制裝置，其中所述設(shè)置部分不僅響應(yīng)于用戶操作來在圖標(biāo)放置區(qū)域中的時(shí)間軸上指定期望時(shí)間范圍，還從多種類型的數(shù)據(jù)庫中選擇要用在所指定的時(shí)間范圍內(nèi)的特定數(shù)據(jù)庫。
3.如權(quán)利要求I所述的聲音生成控制裝置，其中所述顯示控制部分響應(yīng)于用戶操作在圖標(biāo)放置區(qū)域中的時(shí)間軸上的期望時(shí)間位置處放置期望的圖標(biāo)圖像，或者移動顯示在圖標(biāo)放置區(qū)域中的圖標(biāo)圖像中期望的一個(gè)圖標(biāo)，以改變該期望的圖標(biāo)圖像的時(shí)間位置。
4.如權(quán)利要求I所述的聲音生成控制裝置，其中所述顯示控制部分顯示圖標(biāo)放置區(qū)域中的多個(gè)圖標(biāo)圖像， 所述設(shè)置部分指定圖標(biāo)放置區(qū)域的時(shí)間軸上的多個(gè)期望時(shí)間范圍，并且 所述聲音生成控制裝置基干與各個(gè)圖標(biāo)圖像相對應(yīng)的素材數(shù)據(jù)來按照對應(yīng)于圖標(biāo)圖像被放置的時(shí)間位置的特定順序生成樂音數(shù)據(jù)。
5.如權(quán)利要求4所述的聲音生成控制裝置，其中所述顯示控制部分不僅基于定義了多個(gè)素材數(shù)據(jù)的時(shí)間序列組合的序列數(shù)據(jù)來顯示多個(gè)圖標(biāo)圖像，還響應(yīng)于用戶操作執(zhí)行編輯，所述編輯包括顯示位置變化、所顯示的圖標(biāo)圖像的刪除和插入，并且 所述設(shè)置部分不僅基于序列數(shù)據(jù)指定時(shí)間范圍和設(shè)置針對每個(gè)指定時(shí)間范圍的數(shù)據(jù)庫，還響應(yīng)于用戶操作執(zhí)行包括改變時(shí)間范圍和數(shù)據(jù)庫的編輯，通過響應(yīng)于用戶操作執(zhí)行編輯所改變的序列數(shù)據(jù)能夠存儲到存儲部分中。
6.如權(quán)利要求I所述的聲音生成控制裝置，其中所述設(shè)置部分在顯示屏幕上顯示具有與圖標(biāo)放置區(qū)域相同的時(shí)間軸的數(shù)據(jù)庫放置區(qū)域的圖像，并且在數(shù)據(jù)庫放置區(qū)域中顯示表示期望的時(shí)間范圍的圖像，并且添加識別與所顯示的時(shí)間范圍相關(guān)聯(lián)的所設(shè)置的數(shù)據(jù)庫的顯不。
7.如權(quán)利要求I所述的聲音生成控制裝置，其中所述圖標(biāo)放置區(qū)域還具有指定坐標(biāo)軸，所述指定坐標(biāo)軸表示指定了素材數(shù)據(jù)的處理內(nèi)容的指定值，并且 所述聲音生成控制部分執(zhí)行控制以使得與基于圖標(biāo)圖像識別的素材數(shù)據(jù)對應(yīng)的聲音生成的內(nèi)容根據(jù)圖標(biāo)圖像在指定坐標(biāo)軸上的位置而變化。
8.如權(quán)利要求I所述的聲音生成控制裝置，其中所述圖標(biāo)放置區(qū)域還具有表示用于識別素材數(shù)據(jù)的識別值的識別坐標(biāo)軸，并且 所述聲音生成控制部分基于圖標(biāo)圖像在識別坐標(biāo)軸上的位置以及與圖標(biāo)圖像相關(guān)聯(lián)的特征量信息，從與包含圖標(biāo)圖像被放置的時(shí)間位置的時(shí)間范圍相關(guān)聯(lián)設(shè)置的數(shù)據(jù)庫中獲取素材數(shù)據(jù)。
9.如權(quán)利要求I所述的聲音生成控制裝置，其中圖標(biāo)圖像是對應(yīng)干與圖標(biāo)圖像相關(guān)聯(lián)的特征量信息的設(shè)計(jì)。
10.如權(quán)利要求I所述的聲音生成控制裝置，其中圖標(biāo)放置區(qū)域還具有用于定義特征量信息的特征量定義軸，并且 所述顯示控制部分在圖標(biāo)放置區(qū)域中定義了與圖標(biāo)圖像相關(guān)聯(lián)的特征量信息的特征量定義軸上的位置處放置并顯示圖標(biāo)圖像。
11.如權(quán)利要求I所述的聲音生成控制裝置，其中所述顯示控制部分根據(jù)輸入的指令沿著時(shí)間軸改變顯示在圖標(biāo)放置區(qū)域中的圖標(biāo)圖像的長度，并且 所述聲音生成控制部分執(zhí)行控制以使得基于素材數(shù)據(jù)的聲音生成的狀態(tài)根據(jù)圖標(biāo)圖像的長度而變化，其中所述素材數(shù)據(jù)是基于圖標(biāo)圖像而獲取的。
12.如權(quán)利要求I所述的聲音生成控制裝置，其中圖標(biāo)圖像根據(jù)由特征量信息指示的特征量而變化。
13.如權(quán)利要求I所述的聲音生成控制裝置，其中所述聲音生成控制部分從位于所述聲音生成控制裝置外部的數(shù)據(jù)庫中獲取素材數(shù)據(jù)。
14.如權(quán)利要求13所述的聲音生成控制裝置，還包括提供在所述聲音生成控制裝置外部的識別部分，其用于從與包含圖標(biāo)圖像被放置的時(shí)間位置的時(shí)間范圍相關(guān)聯(lián)設(shè)置的數(shù)據(jù)庫中存儲的特征量信息中，識別出與和圖標(biāo)圖像相關(guān)聯(lián)的特征量信息匹配的特征量信息，并且 其中所述聲音生成控制部分查詢所述識別部分以識別與和圖標(biāo)圖像相關(guān)聯(lián)的特征量信息匹配的特征量信息，并且根據(jù)所識別出的特征量信息從所述數(shù)據(jù)庫中獲取素材數(shù)據(jù)。
15.如權(quán)利要求1-13中任一項(xiàng)所述的聲音生成控制裝置，還包括識別部分，其用于從與包含圖標(biāo)圖像被放置的時(shí)間位置的時(shí)間范圍相關(guān)聯(lián)設(shè)置的數(shù)據(jù)庫中存儲的特征量信息中，識別出與和圖標(biāo)圖像相關(guān)聯(lián)的特征量信息匹配的特征量信息，并且 其中所述聲音生成控制部分查詢所述識別部分以識別與和圖標(biāo)圖像相關(guān)聯(lián)的特征量信息匹配的特征量信息，并且根據(jù)所識別出的特征量信息從所述數(shù)據(jù)庫中獲取素材數(shù)據(jù)。
16.ー種用于將素材數(shù)據(jù)提供至如權(quán)利要求1-12中任一項(xiàng)所述的聲音生成控制裝置的服務(wù)器裝置，所述服務(wù)器裝置包括 多種類型的數(shù)據(jù)庫； 接收部分，其從聲音生成控制裝置接收類型信息和與圖標(biāo)圖像相關(guān)聯(lián)的特征量信息，其中類型信息表示與包含顯示圖標(biāo)圖像的時(shí)間位置的時(shí)間范圍相關(guān)聯(lián)地設(shè)置的數(shù)據(jù)庫的類型； 識別部分，其參照所述多種類型的數(shù)據(jù)庫中由所述類型信息指示的類型的數(shù)據(jù)庫，以識別出與類型信息一起被接收的特征量信息具有特定關(guān)系的素材數(shù)據(jù)；和 輸出部分，其從所述數(shù)據(jù)庫中取出由所述識別部分識別出的素材數(shù)據(jù)，并將取出的素材數(shù)據(jù)發(fā)送至聲音生成控制裝置。
17.—種系統(tǒng),包括 如權(quán)利要求1-12中任一項(xiàng)所述的聲音生成控制裝置；和 服務(wù)器裝置，所述服務(wù)器裝置包括多種類型的數(shù)據(jù)庫； 接收部分，其從聲音生成控制裝置接收類型信息和與圖標(biāo)圖像相關(guān)聯(lián)的特征量信息，其中類型信息表示與包含顯示圖標(biāo)圖像的時(shí)間位置的時(shí)間范圍相關(guān)聯(lián)地設(shè)置的數(shù)據(jù)庫的類型； 識別部分，其參照所述多種類型的數(shù)據(jù)庫中由所述類型信息指示的類型的數(shù)據(jù)庫，以識別出與類型信息一起被接收的特征量信息具有特定關(guān)系的素材數(shù)據(jù)；和 輸出部分，其從所述數(shù)據(jù)庫中取出由所述識別部分識別出的素材數(shù)據(jù)，并將取出的素材數(shù)據(jù)發(fā)送至聲音生成控制裝置。
18.—種計(jì)算機(jī)實(shí)現(xiàn)的方法，包括 顯示步驟，用于在顯示屏幕上顯示具有時(shí)間軸的圖標(biāo)放置區(qū)域的圖像，并且在圖標(biāo)放置區(qū)域中與時(shí)間軸上的期望時(shí)間位置相關(guān)聯(lián)地顯示圖標(biāo)圖像，其中圖標(biāo)圖像與特征量信息相關(guān)聯(lián)，所述特征量信息表示包括聲音素材波形的素材數(shù)據(jù)的特征； 設(shè)置步驟，用干與圖標(biāo)放置區(qū)域的時(shí)間軸上的期望時(shí)間范圍相關(guān)聯(lián)地設(shè)置要被使用的特定數(shù)據(jù)庫，所述特定數(shù)據(jù)庫是從存儲與特征量信息相關(guān)聯(lián)的素材數(shù)據(jù)的多種類型的數(shù)據(jù)庫中選擇的；和 聲音生成控制步驟，用于基于與圖標(biāo)圖像相關(guān)聯(lián)的特征量信息來從數(shù)據(jù)庫獲取素材數(shù)據(jù)，并且基于所獲取的素材數(shù)據(jù)和圖標(biāo)圖像被放置的時(shí)間位置來生成樂音數(shù)據(jù)，其中所述數(shù)據(jù)庫是與包含圖標(biāo)圖像被放置的時(shí)間位置的時(shí)間范圍相關(guān)聯(lián)地設(shè)置的。
19.如權(quán)利要求18所述的計(jì)算機(jī)實(shí)現(xiàn)的方法，還包括 發(fā)送步驟，其中當(dāng)在終端中執(zhí)行所述聲音生成控制步驟時(shí)，將類型信息以及與圖標(biāo)圖像相關(guān)聯(lián)的特征量信息發(fā)送至服務(wù)器，其中所述類型信息表示與包含顯示圖標(biāo)圖像的時(shí)間位置的時(shí)間范圍相關(guān)聯(lián)設(shè)置的數(shù)據(jù)庫的類型； 由服務(wù)器接收通過所述發(fā)送步驟發(fā)送的類型信息和特征量信息的步驟； 識別步驟，其中服務(wù)器參照所述多種類型的數(shù)據(jù)庫中由所述類型信息指示的類型的數(shù)據(jù)庫，以識別出與類型信息一起被接收的特征量信息具有特定關(guān)系的素材數(shù)據(jù)；和 由服務(wù)器從數(shù)據(jù)庫中取出通過所述識別步驟識別出的素材數(shù)據(jù)，并將取出的素材數(shù)據(jù)發(fā)送至終端的步驟， 其中當(dāng)將在終端中執(zhí)行所述聲音生成控制步驟時(shí)，所述終端從服務(wù)器接收素材數(shù)據(jù)并且基于所接收的素材數(shù)據(jù)以及圖標(biāo)圖像被放置的時(shí)間位置來生成樂音數(shù)據(jù)。
全文摘要
對于由聲音素材組成的樂曲，聲音生成控制裝置允許在給定時(shí)間段內(nèi)容易地改變樂曲的特效。該裝置在顯示屏幕(131)上顯示其中定義有時(shí)間軸的圖標(biāo)放置區(qū)域(ST)，并且根據(jù)輸入指令顯示圖標(biāo)圖像，所述圖標(biāo)圖像與表示聲音素材的素材數(shù)據(jù)的特征量信息相關(guān)聯(lián)。該裝置還根據(jù)輸入指令設(shè)置特征量數(shù)據(jù)庫的類型，其中素材數(shù)據(jù)和素材數(shù)據(jù)的特征量信息沿著時(shí)間軸彼此關(guān)聯(lián)。然后，該裝置參照在時(shí)間軸上與圖標(biāo)圖像具有對應(yīng)關(guān)系的類型的特征量數(shù)據(jù)庫，來識別與對應(yīng)于圖標(biāo)圖像的特征量信息相似的素材數(shù)據(jù)，并且在與圖標(biāo)圖像在時(shí)間軸上的位置對應(yīng)的定時(shí)以及以對應(yīng)于所識別的素材數(shù)據(jù)的內(nèi)容可聽見地生成聲音。
文檔編號G10H1/00GK102654998SQ20121005366
公開日2012年9月5日 申請日期2012年3月2日 優(yōu)先權(quán)日2011年3月2日
發(fā)明者神谷泰史, 臼井旬 申請人:雅馬哈株式會社