本公開涉及游戲，并且更具體地涉及被呈現(xiàn)用于渲染以供圖形處理器和編碼器單獨(dú)處理的文本和圖像信息（例如，背景場(chǎng)景）的分離，使得在服務(wù)器與客戶端設(shè)備（例如，游戲流式傳輸服務(wù)）之間的低連接時(shí)段期間，文本信息可以在很少或沒有壓縮的情況下被遞送，而圖像信息可以經(jīng)歷額外壓縮以滿足較低帶寬。此外，可以構(gòu)建人工智能模型以標(biāo)識(shí)命令緩沖器中的哪些命令用于渲染文本以及哪些命令用于渲染圖像。此外，文本信息的分離提供了使用人工智能對(duì)文本信息或圖像信息的更定向的操作。
背景技術(shù)：
1、視頻游戲（game）和/或游戲（gaming）應(yīng)用及其相關(guān)行業(yè)（例如，視頻游戲業(yè)）非常流行，并且代表了全世界娛樂市場(chǎng)的很大百分比。視頻游戲使用各種類型的平臺(tái)（包括游戲控制臺(tái)、臺(tái)式或膝上型計(jì)算機(jī)、移動(dòng)電話等）在任何地方和任何時(shí)間玩。
2、視頻游戲可從后端服務(wù)器流式傳輸。諸如在云游戲配置中，其中視頻游戲在后端服務(wù)器處執(zhí)行，并且視頻游戲的游戲玩法（play）通過網(wǎng)絡(luò)流式傳輸?shù)娇蛻舳嗽O(shè)備。在視頻游戲的游戲玩法期間，除了被呈現(xiàn)為圖像幀序列的背景場(chǎng)景之外，還可以存在提供有用信息或游戲生成的文本或插入和/或覆蓋背景場(chǎng)景的其他文本的用戶界面。以這種方式，玩家能夠接收以除音頻之外的各種格式呈現(xiàn)的與視頻游戲的游戲玩法相關(guān)的信息。例如，聽力受損的玩家在玩視頻游戲時(shí)依賴于隱藏式字幕。在其他示例中，由于各種原因（諸如更少的分心、更快地理解游戲環(huán)境等），許多玩家主動(dòng)關(guān)閉音頻并玩僅具有隱藏式字幕的視頻游戲。
3、在后端服務(wù)器和客戶端設(shè)備之間的低連接性時(shí)段期間，對(duì)被傳送到客戶端設(shè)備的數(shù)據(jù)執(zhí)行增加的壓縮。該信息包括圖像幀、用戶界面和/或用戶界面中提供的文本。也就是說，對(duì)所有數(shù)據(jù)執(zhí)行壓縮。一方面，由于增加的壓縮而導(dǎo)致的一段時(shí)間內(nèi)圖像幀的分辨率降低通常不會(huì)降低玩家體驗(yàn)，因?yàn)橥ǔＴ谕嬗螒蚱陂g呈現(xiàn)的故事情節(jié)和動(dòng)作保持不受影響。然而，另一方面，降低的文本分辨率可能損壞玩家體驗(yàn)，因?yàn)橥婕铱赡軣o法解密文本。因此，通過文本提供的信息在低連接性時(shí)段期間被壓縮得如此之多，以至于該信息對(duì)玩家無用。
4、正是在這種背景下，出現(xiàn)了本公開的實(shí)施例。
技術(shù)實(shí)現(xiàn)思路
1、本公開的實(shí)施例涉及從渲染流水線提取文本以分離圖像幀中的文本的渲染和場(chǎng)景的渲染，其中對(duì)經(jīng)渲染場(chǎng)景進(jìn)行編碼，其中原始文本和經(jīng)編碼場(chǎng)景被單獨(dú)地流式傳輸?shù)娇蛻舳嗽O(shè)備，使得文本以比文本與場(chǎng)景一起編碼的情況更高的分辨率流式傳輸，尤其是當(dāng)經(jīng)歷服務(wù)器和客戶端設(shè)備之間的低連接性時(shí)。此外，可以構(gòu)建人工智能模型以識(shí)別命令緩沖器中的哪些命令用于渲染文本以及哪些命令用于渲染圖像。文本信息的分離使用僅針對(duì)文本信息或圖像信息的人工智能來提供更隔離的操作。
2、在一個(gè)實(shí)施例中，公開了一種方法。該方法包括在服務(wù)器上執(zhí)行視頻游戲以生成多個(gè)繪制調(diào)用以供一個(gè)或多個(gè)圖形處理單元（gpu）執(zhí)行以渲染圖像幀。該方法包括標(biāo)識(shí)用于渲染圖像幀中的文本的一個(gè)或多個(gè)繪制調(diào)用的第一命令集。該方法包括標(biāo)識(shí)用于渲染圖像幀中的場(chǎng)景的一個(gè)或多個(gè)繪制調(diào)用的第二命令集。該方法包括執(zhí)行第一命令集以渲染文本。該方法包括執(zhí)行第二命令集以獨(dú)立于渲染文本來渲染場(chǎng)景。該方法包括通過對(duì)經(jīng)渲染的場(chǎng)景進(jìn)行編碼來生成經(jīng)編碼場(chǎng)景。該方法包括將文本和經(jīng)編碼場(chǎng)景單獨(dú)地流式傳輸?shù)娇蛻舳嗽O(shè)備。
3、在另一實(shí)施例中，公開了一種存儲(chǔ)用于實(shí)現(xiàn)方法的計(jì)算機(jī)程序的非暫時(shí)性計(jì)算機(jī)可讀介質(zhì)。該計(jì)算機(jī)可讀介質(zhì)包括用于在服務(wù)器上執(zhí)行視頻游戲以生成多個(gè)繪制調(diào)用以供一個(gè)或多個(gè)圖形處理單元（gpu）執(zhí)行以渲染圖像幀的程序指令。該計(jì)算機(jī)可讀介質(zhì)包括用于標(biāo)識(shí)用于渲染圖像幀中的文本的一個(gè)或多個(gè)繪制調(diào)用的第一命令集的程序指令。該計(jì)算機(jī)可讀介質(zhì)包括用于標(biāo)識(shí)用于渲染圖像幀中的場(chǎng)景的一個(gè)或多個(gè)繪制調(diào)用的第二命令集的程序指令。該計(jì)算機(jī)可讀介質(zhì)包括用于執(zhí)行第一命令集以渲染文本的程序指令。該計(jì)算機(jī)可讀介質(zhì)包括用于執(zhí)行第二命令集以獨(dú)立于渲染文本來渲染場(chǎng)景的程序指令。該計(jì)算機(jī)可讀介質(zhì)包括用于通過對(duì)經(jīng)渲染的場(chǎng)景進(jìn)行編碼來產(chǎn)生經(jīng)編碼場(chǎng)景的程序指令。該計(jì)算機(jī)可讀介質(zhì)包括用于將文本和經(jīng)編碼場(chǎng)景單獨(dú)地流式傳輸?shù)娇蛻舳嗽O(shè)備的程序指令。
4、在又一實(shí)施例中，公開了一種計(jì)算機(jī)系統(tǒng)，其中，該計(jì)算機(jī)系統(tǒng)包括處理器和存儲(chǔ)器，存儲(chǔ)器耦合到處理器并且其中存儲(chǔ)有指令，該指令如果由計(jì)算機(jī)系統(tǒng)執(zhí)行，則使計(jì)算機(jī)系統(tǒng)執(zhí)行一種方法。該方法包括在服務(wù)器上執(zhí)行視頻游戲以生成多個(gè)繪制調(diào)用以供一個(gè)或多個(gè)圖形處理單元（gpu）執(zhí)行以渲染圖像幀。該方法包括用于渲染圖像幀中的文本的一個(gè)或多個(gè)繪制調(diào)用的第一命令集。該方法包括標(biāo)識(shí)用于渲染圖像幀中的場(chǎng)景的一個(gè)或多個(gè)繪制調(diào)用的第二命令集。該方法包括執(zhí)行第一命令集以渲染文本。該方法包括執(zhí)行第二命令集以獨(dú)立于渲染文本來渲染場(chǎng)景。該方法包括通過對(duì)經(jīng)渲染的場(chǎng)景進(jìn)行編碼來生成經(jīng)編碼場(chǎng)景。該方法包括將文本和經(jīng)編碼場(chǎng)景單獨(dú)地流式傳輸?shù)娇蛻舳嗽O(shè)備。
5、通過以下結(jié)合附圖的詳細(xì)描述，本公開的其他方面將變得顯而易見，附圖通過示例的方式示出了本公開的原理。
1.一種方法，包括：
2.根據(jù)權(quán)利要求1所述的方法，
3.根據(jù)權(quán)利要求2所述的方法，還包括：
4.根據(jù)權(quán)利要求1所述的方法，還包括：
5.根據(jù)權(quán)利要求1所述的方法，還包括：
6.根據(jù)權(quán)利要求1所述的方法，其中，所述文本是以下中的一個(gè)：
7.根據(jù)權(quán)利要求1所述的方法，還包括：
8.根據(jù)權(quán)利要求7所述的方法，其中，所述用戶界面包括以下中的一個(gè)：
9.根據(jù)權(quán)利要求1所述的方法，還包括：
10.根據(jù)權(quán)利要求1所述的方法，還包括：
11.一種非暫時(shí)性計(jì)算機(jī)可讀介質(zhì)，存儲(chǔ)有用于執(zhí)行方法的計(jì)算機(jī)程序，所述計(jì)算機(jī)可讀介質(zhì)包括：
12.根據(jù)權(quán)利要求11所述的非暫時(shí)性計(jì)算機(jī)可讀介質(zhì)，還包括：
13.根據(jù)權(quán)利要求11所述的非暫時(shí)性計(jì)算機(jī)可讀介質(zhì)，其中，在所述方法中，所述文本是以下之一：
14.根據(jù)權(quán)利要求11所述的非暫時(shí)性計(jì)算機(jī)可讀介質(zhì)，還包括：
15.根據(jù)權(quán)利要求11所述的非暫時(shí)性計(jì)算機(jī)可讀介質(zhì)，還包括：
16.一種計(jì)算機(jī)系統(tǒng)，包括：
17.根據(jù)權(quán)利要求16所述的計(jì)算機(jī)系統(tǒng)，所述方法還包括：
18.根據(jù)權(quán)利要求16所述的計(jì)算機(jī)系統(tǒng)，其中，在所述方法中，所述文本是以下之一：
19.根據(jù)權(quán)利要求16所述的計(jì)算機(jī)系統(tǒng)，所述方法還包括：
20.根據(jù)權(quán)利要求16所述的計(jì)算機(jī)系統(tǒng)，所述方法還包括：