論文鏈接：https://arxiv.org/abs/2603.04806

協(xié)作式講故事（Collaborative Storytelling）是一種被廣泛應(yīng)用于兒童語言教育與文化教學(xué)的實踐形式，用于提升兒童的語言表達能力與理解水平。在協(xié)作式講故事過程中，由教師或家長作為協(xié)調(diào)者的角色，提供待學(xué)習(xí)的目標(biāo)詞匯（通常為單語種或雙語種）及基礎(chǔ)的故事框架，通過提問、反饋等方式，引導(dǎo)兒童使用學(xué)習(xí)的語言圍繞故事細節(jié)進行補充和情節(jié)改編，并輪流作為Storyteller進行故事續(xù)寫（1個兒童作為Storyteller續(xù)寫故事并補充細節(jié)，其它兒童作為Storylistener傾聽故事并進行內(nèi)容理解），最終共同形成結(jié)構(gòu)完整故事作品。

協(xié)作講故事尤其對于跨語言學(xué)習(xí)具有重要的作用，已成為跨語言學(xué)習(xí)的重要模式。首先，在跨語言學(xué)習(xí)中，與單純的概念學(xué)習(xí)相比，協(xié)作式講故事能夠通過情境模擬、角色扮演和語言互動等多種形式啟發(fā)兒童對于語言結(jié)構(gòu)、文化背景及實際應(yīng)用的認知、反思和靈活運用，從而實現(xiàn)語言能力與跨文化理解的綜合提升。其次，在跨語言的協(xié)作講故事過程中，兒童通過扮演Storyteller和Storylistener的角色，輪流協(xié)作共同創(chuàng)作與講述故事，促進協(xié)作與互動，推動故事的發(fā)展，呈現(xiàn)出典型的配對式沉浸式學(xué)習(xí)效果。相較于傳統(tǒng)的多人活動，配對式協(xié)作式講故事的沉浸式學(xué)習(xí)更有效促進兒童之間的平等互教與相互支持，增強語言輸入的真實感和互動的主動性，進而提升語言習(xí)得與跨文化交流能力。

然而，相比單語言場景，跨語言協(xié)作式講故事也面臨著新的問題，最為典型的是兒童參與度不足。協(xié)作式講故事主要適用于需要提升口語語言能力的中小學(xué)生群體，尤其是處于皮亞杰認知發(fā)展理論中具體運算階段（7-11歲）的兒童。該階段兒童的認知發(fā)展尚處于具體思維階段，抽象思維能力尚未成熟，因而在語言互動過程中容易出現(xiàn)語用理解偏差、話題中斷以及互動策略不足等問題。同時，跨文化差異進一步加劇了這些困難，導(dǎo)致兒童在理解同伴意圖時存在障礙，進而削弱了彼此之間的溝通意愿。這使得跨語言協(xié)作式講故事非常依賴于協(xié)調(diào)者的引導(dǎo)和協(xié)調(diào)。然而，有效的引導(dǎo)和協(xié)調(diào)是非常具有挑戰(zhàn)性的工作。一方面，協(xié)調(diào)者需要基于預(yù)設(shè)的目標(biāo)詞匯和故事框架，實時完成話題引導(dǎo)、提問設(shè)計等多項任務(wù)，對協(xié)調(diào)者的知識、經(jīng)驗和能力等提出了較高要求；另一方面，協(xié)調(diào)者與兩位兒童之間會存在不同程度的文化、代際等的代購，導(dǎo)致協(xié)調(diào)者在與兒童的溝通過程中遇到障礙。上述多方面約束使得很多教師和家長時常難以扮演好協(xié)調(diào)者的角色，最終導(dǎo)致兒童難以充分的參與到協(xié)作式講故事的任務(wù)。

這一背景啟發(fā)我們思考如何設(shè)計用于輔助協(xié)調(diào)者的跨語言協(xié)作式講故事工具，既減輕協(xié)調(diào)者負擔(dān)，同時有效促進兒童在在線跨語言互動中的參與度。

圖1 協(xié)作式講故事流程

• F1：兒童在語言文化和興趣偏好上的顯著差異削弱了互動的驅(qū)動力，協(xié)調(diào)者期望輔助工具支持對兒童的特征配置與匹配以支持協(xié)作互動。

• F2：兒童表達的自主性與開放性增加了協(xié)調(diào)者引導(dǎo)的不確定性，協(xié)調(diào)者期望輔助工具能夠生成故事框架及相關(guān)的啟發(fā)性和針對性的問題，以促進表達和互動。

• F3：由于跨語言協(xié)作中協(xié)調(diào)者-兒童與兒童-兒童中存在顯著的語言和文化理解障礙，協(xié)調(diào)者期望輔助工具能生成多模態(tài)素材來作為上下文和背景信息輔助理解。

• F4：在協(xié)作式講故事過程中，某一方的發(fā)言機會時常被弱化，協(xié)調(diào)者期望智能工具在提供故事框架、輔助提問以及多模態(tài)素材生成等功能的同時，結(jié)合兒童的共性和個性特征，協(xié)調(diào)雙方發(fā)言以確保參與度的平衡。

• F5：協(xié)調(diào)者系統(tǒng)記錄和追蹤兒童在協(xié)作式講故事過程中的表現(xiàn)較為困難，期望輔助工具能自動生成反饋報告，并將結(jié)果轉(zhuǎn)化為后續(xù)個性化配置。

基于上述發(fā)現(xiàn)，我們針對基于多模態(tài)大模型的輔助協(xié)調(diào)者協(xié)作式講故事過程工具設(shè)計提出了以下5個設(shè)計目標(biāo)：

• D1：支持協(xié)調(diào)者配置與動態(tài)更新兒童個性化異同特征（F1）

• D2：提供共性與個性共同驅(qū)動的協(xié)作式講故事輔助

  • D2-1：基于兒童共性特征的目標(biāo)詞匯驅(qū)動型故事框架生成（F1，F(xiàn)2，F(xiàn)4）

  • D2-2：基于兒童個性特征的多元化提問生成（F1，F(xiàn)2，F(xiàn)4）

  • D2-3：基于兒童個性特征和互動語境的理解輔助多模態(tài)內(nèi)容生成（F1，F(xiàn)3，F(xiàn)4）

• D3：圍繞協(xié)作式講故事過程提供互動記錄和基于回顧的個性化配置優(yōu)化建議（F1，F(xiàn)5）

• D4：保證協(xié)調(diào)者對于系統(tǒng)的可控性（F1-F5）

圖2 SparkTales框架圖

SparkTales系統(tǒng)整體架構(gòu)如圖2所示，由以下五個核心模塊組成：

• 配置模塊：該模塊支持協(xié)作者根據(jù)協(xié)作式講故事目標(biāo)選擇目標(biāo)詞匯，并根據(jù)活動中參與兒童的具體情況，配置其相關(guān)特征信息，包括語言水平、文化背景、年齡、性別和性格等基礎(chǔ)信息，以及主題、內(nèi)容特色以及互動方式等偏好信息。

• 個性特征總結(jié)模塊：根據(jù)系統(tǒng)中配置的兒童特征，對每位參與兒童進行個性化特征的提取與總結(jié)，形成個性化特征，突出其在偏好、能力和行為等方面的個體差異性，為后續(xù)生成強調(diào)個體特色的內(nèi)容提供支持。

• 共性特征總結(jié)模塊：基于配置的兒童特征，利用兒童特征指南，通過完全匹配、部分匹配和推理推斷等方式，深入挖掘兩位兒童之間在興趣、表達方式等偏好方面的共性特征，生成共性特征，為后續(xù)共享任務(wù)中內(nèi)容的生成提供有力支持。

• 協(xié)作式講故事模塊：基于個性化特征和共性特征，為協(xié)作式講故事活動生成故事框架、多元化提問和輔助理解內(nèi)容，幫助coordinator有效引導(dǎo)兒童持續(xù)表達，協(xié)作完成故事的填空、改編與續(xù)寫任務(wù)，促進故事情節(jié)的連貫發(fā)展，最終生成完整的最終協(xié)作式故事書作為成果。

• 回顧與反饋模塊：在協(xié)作式講故事活動結(jié)束后，系統(tǒng)自動生成基于兒童參與度及其特征反饋的總結(jié)報告，為協(xié)作者提供活動質(zhì)量的評估參考，支持其反思兒童的參與表現(xiàn)與自身的實踐過程。同時模塊對兒童在活動中表達的基礎(chǔ)信息和偏好特征進行匯總，并與配置中的數(shù)據(jù)進行對比分析，生成更新建議及相應(yīng)解釋。協(xié)作者可根據(jù)建議自主決定是否采納更新，從而支持協(xié)作式講故事活動的持續(xù)優(yōu)化與個性化調(diào)整。

圍繞設(shè)計目標(biāo)，我們設(shè)計了度量標(biāo)準(zhǔn)對SparkTales進行了廣泛的評估，以探索以下三個研究問題：

• RQ1: 協(xié)調(diào)者是否認為SparkTales功能完備、高效且易于使用？

• RQ2: SparkTales能否提升兒童的參與度？

經(jīng)過分析，我們將SparkTales共性與個性動態(tài)結(jié)合機制的核心優(yōu)勢總結(jié)如下：

• 準(zhǔn)確性表現(xiàn)突出：教師一致強調(diào)總結(jié)模塊在概括兒童特征上的精準(zhǔn)性，這不僅保證了生成內(nèi)容能夠滿足每位兒童的個性化需求，也提升了在配對式互動環(huán)節(jié)中內(nèi)容的準(zhǔn)確性和適宜性。這些反饋表明，高準(zhǔn)確性的特征總結(jié)為教師提供了可靠依據(jù)，使問題設(shè)計和素材呈現(xiàn)既精準(zhǔn)又符合互動需求，從而顯著提升了協(xié)作式講故事的整體質(zhì)量與效率。

• 實現(xiàn)個性化與共性化的平衡：個性化總結(jié)與共性總結(jié)在差異化回應(yīng)與整體活動節(jié)奏之間形成互補，使協(xié)作式講故事既關(guān)注每位兒童的個性，又兼顧參與的兩位兒童共性特征，從而保持整體流程的連貫與順暢。這些反饋顯示，個性化與共性化的平衡是支持教師有效組織協(xié)作式講故事的核心優(yōu)勢。

• 功能支撐充分：兩個總結(jié)模塊提供了穩(wěn)定的語義基礎(chǔ)，使內(nèi)容生成任務(wù)具備系統(tǒng)化、可依賴的支撐能力。這些評價顯示，系統(tǒng)在組織活動方面提供了實質(zhì)性和充分的功能幫助，使協(xié)作式講故事過程能夠順利推進，也提升了兒童參與的積極性。

• 易用性支持活動即時操作：個性化與共性化特征總結(jié)以清晰、結(jié)構(gòu)化的方式呈現(xiàn)，使教師在活動中能夠快速理解和應(yīng)用，從而支持實時操作和即時決策。這些反饋顯示，總結(jié)模塊的高可讀性和操作便捷性顯著降低了教師的認知負荷，使他們能夠在活動中迅速做出判斷并高效組織內(nèi)容。

基于本研究的核心目標(biāo)，我們需要評估SparkTales在協(xié)作式講故事過程中對兒童言語投入的影響。參考親子共讀領(lǐng)域的相關(guān)文獻，我們通過分析兒童對活動中問題的回答來衡量其言語投入水平，具體包括：問題數(shù)、產(chǎn)出性、詞匯多樣性、話題相關(guān)性、準(zhǔn)確性和可理解性。結(jié)果如圖3所示。

圖3 兒童參與度評估

綜上所示，在SparkTales輔助協(xié)調(diào)者開展的協(xié)作式講故事過程中，大部分指標(biāo)均體現(xiàn)出兒童語言參與度的顯著提升，其表達能力在語言產(chǎn)出量、詞匯豐富度、話題相關(guān)性、回答準(zhǔn)確性以及可理解性等方面都有所增強。同時，SparkTales能夠根據(jù)兒童不同的語言能力水平，結(jié)合共性與個性特征，靈活調(diào)整問題設(shè)置與引導(dǎo)方式，從而不僅促進了兒童的積極表達，也提供了更具針對性和支持性的互動環(huán)境。