本發(fā)明涉及人工智能，特別涉及一種lora訓(xùn)練專屬模特的方法、裝置、設(shè)備和介質(zhì)。
背景技術(shù)：
1、隨著互聯(lián)網(wǎng)的快速發(fā)展，圖像處理技術(shù)日趨成熟，為了高效地繪制和處理擁有個性化特征的數(shù)字圖像作品，出現(xiàn)了大量的人工智能技術(shù)輔助人類完成圖像繪制工作，圖像自動生成技術(shù)受到越來越多的關(guān)注和研究。生成質(zhì)量已經(jīng)滿足諸多不同產(chǎn)業(yè)對于內(nèi)容生產(chǎn)的需求。特別是在肖像生成場景下，用戶希望可以借助圖像生成技術(shù)，在保持自身人臉特征的前提下，自動生成特定的圖像。
2、現(xiàn)有通過lora訓(xùn)練人物專屬模特，往往存在著以下幾個問題：1、數(shù)據(jù)集不完善，沒有完整套圖用以訓(xùn)練；2、標(biāo)簽不規(guī)范，數(shù)據(jù)集不統(tǒng)一；3、生成人像效果差，模型過擬合，人像失真；4、生成人像與訓(xùn)練數(shù)據(jù)一致性不強(qiáng)，清晰度；5、模型泛化性差，結(jié)合其它使用場景模型未能達(dá)到預(yù)期效果等等諸多問題。
技術(shù)實現(xiàn)思路
1、本發(fā)明要解決的技術(shù)問題，在于提供一種lora訓(xùn)練專屬模特的方法、裝置、設(shè)備和介質(zhì)，顯著增強(qiáng)了生成人物圖像的一致性，確保了模特特征的穩(wěn)定性和連貫性，大幅提升了圖像的清晰度，使得細(xì)節(jié)表現(xiàn)更加精準(zhǔn)和生動。
2、第一方面，本發(fā)明提供了一種lora訓(xùn)練專屬模特的方法，包括下述步驟：
3、步驟1、獲取一設(shè)定模特的圖片數(shù)據(jù)，并進(jìn)行數(shù)據(jù)清洗，得到清洗數(shù)據(jù)，所述圖片數(shù)據(jù)包括人臉特寫圖；
4、步驟2、若清洗數(shù)據(jù)中的圖片數(shù)量大于設(shè)定閾值，則進(jìn)入步驟3；若清洗數(shù)據(jù)中的圖片數(shù)量小于等于設(shè)定閾值，則將所述清洗數(shù)據(jù)進(jìn)行數(shù)據(jù)增強(qiáng)，得到增強(qiáng)數(shù)據(jù)，所述增強(qiáng)數(shù)據(jù)中的圖片數(shù)量大于設(shè)定閾值，進(jìn)入步驟3；
5、步驟3、將增強(qiáng)數(shù)據(jù)或清洗數(shù)據(jù)中的每一張圖片進(jìn)行處理，保證每一張圖片的長邊為設(shè)定值，得到訓(xùn)練數(shù)據(jù)；
6、步驟4、將訓(xùn)練數(shù)據(jù)中的圖片通過多模態(tài)模型進(jìn)行格式化打標(biāo)簽，形成標(biāo)簽文件；
7、步驟5、設(shè)置訓(xùn)練輪數(shù)、學(xué)習(xí)率以及訓(xùn)練圖像像素，之后將訓(xùn)練數(shù)據(jù)與標(biāo)簽文件輸入，進(jìn)行模型訓(xùn)練，得到專屬模特模型。
8、第二方面，本發(fā)明提供了一種lora訓(xùn)練專屬模特的裝置，包括：
9、清洗數(shù)據(jù)模塊，獲取一設(shè)定模特的圖片數(shù)據(jù)，并進(jìn)行數(shù)據(jù)清洗，得到清洗數(shù)據(jù)，所述圖片數(shù)據(jù)包括人臉特寫圖；
10、增強(qiáng)數(shù)據(jù)模塊，若清洗數(shù)據(jù)中的圖片數(shù)量大于設(shè)定閾值，則進(jìn)入處理數(shù)據(jù)模塊若清洗數(shù)據(jù)中的圖片數(shù)量小于等于設(shè)定閾值，則將所述清洗數(shù)據(jù)進(jìn)行數(shù)據(jù)增強(qiáng)，得到增強(qiáng)數(shù)據(jù)，所述增強(qiáng)數(shù)據(jù)中的圖片數(shù)量大于設(shè)定閾值，進(jìn)入步驟3；
11、處理數(shù)據(jù)模塊，將增強(qiáng)數(shù)據(jù)或清洗數(shù)據(jù)中的每一張圖片進(jìn)行處理，保證每一張圖片的長邊為設(shè)定值，得到訓(xùn)練數(shù)據(jù)；
12、打標(biāo)模塊，將訓(xùn)練數(shù)據(jù)中的圖片通過多模態(tài)模型進(jìn)行格式化打標(biāo)簽，形成標(biāo)簽文件；
13、訓(xùn)練模塊，設(shè)置訓(xùn)練輪數(shù)、學(xué)習(xí)率以及訓(xùn)練圖像像素，之后將訓(xùn)練數(shù)據(jù)與標(biāo)簽文件輸入，進(jìn)行模型訓(xùn)練，得到專屬模特模型。
14、第三方面，本發(fā)明提供了一種電子設(shè)備，包括存儲器、處理器及存儲在存儲器上并可在處理器上運(yùn)行的計算機(jī)程序，所述處理器執(zhí)行所述程序時實現(xiàn)第一方面所述的方法。
15、第四方面，本發(fā)明提供了一種計算機(jī)可讀存儲介質(zhì)，其上存儲有計算機(jī)程序，該程序被處理器執(zhí)行時實現(xiàn)第一方面所述的方法。
16、本發(fā)明提供的一個或多個技術(shù)方案，至少具有如下技術(shù)效果或優(yōu)點：
17、本發(fā)明不僅顯著增強(qiáng)了生成人物圖像的一致性，確保了模特特征的穩(wěn)定性和連貫性，還大幅提升了圖像的清晰度，使得細(xì)節(jié)表現(xiàn)更加精準(zhǔn)和生動。此外，本發(fā)明改進(jìn)訓(xùn)練策略和參數(shù)調(diào)整，增強(qiáng)了模型在多樣化場景下的泛化能力，使得模型能夠適應(yīng)更廣泛的應(yīng)用需求，提高了模型的實用性和靈活性。
18、上述說明僅是本發(fā)明技術(shù)方案的概述，為了能夠更清楚了解本發(fā)明的技術(shù)手段，而可依照說明書的內(nèi)容予以實施，并且為了讓本發(fā)明的上述和其它目的、特征和優(yōu)點能夠更明顯易懂，以下特舉本發(fā)明的具體實施方式。
1.一種lora訓(xùn)練專屬模特的方法，其特征在于：包括下述步驟：
2.根據(jù)權(quán)利要求1所述的一種lora訓(xùn)練專屬模特的方法，其特征在于：所述步驟2具體為：若清洗數(shù)據(jù)中的圖片數(shù)量大于設(shè)定閾值，且清洗數(shù)據(jù)包括：人臉特寫圖、半身圖以及全身圖，則進(jìn)入步驟3；否，則將所述清洗數(shù)據(jù)進(jìn)行數(shù)據(jù)增強(qiáng)，得到增強(qiáng)數(shù)據(jù)，所述增強(qiáng)數(shù)據(jù)包括：人臉特寫圖、半身圖以及全身圖，其數(shù)量比例為2:1:1；所述增強(qiáng)數(shù)據(jù)中的圖片數(shù)量大于設(shè)定閾值，進(jìn)入步驟3。
3.根據(jù)權(quán)利要求1或2所述的一種lora訓(xùn)練專屬模特的方法，其特征在于：所述數(shù)據(jù)增強(qiáng)包括：生成模特圖，所述生成模特圖具體為：
4.根據(jù)權(quán)利要求1所述的一種lora訓(xùn)練專屬模特的方法，其特征在于：所述步驟4具體為：將訓(xùn)練數(shù)據(jù)中的圖片通過多模態(tài)模型進(jìn)行格式化打標(biāo)簽，形成標(biāo)簽文件，所述格式化的格式為：性別、皮膚、眼神、發(fā)型、嘴型、表情、配飾、服飾以及背景。
5.一種lora訓(xùn)練專屬模特的裝置，其特征在于：包括：
6.根據(jù)權(quán)利要求5所述的一種lora訓(xùn)練專屬模特的裝置，其特征在于：所述增強(qiáng)數(shù)據(jù)模塊具體為：若清洗數(shù)據(jù)中的圖片數(shù)量大于設(shè)定閾值，且清洗數(shù)據(jù)包括：人臉特寫圖、半身圖以及全身圖，則進(jìn)入處理數(shù)據(jù)模塊；否，則將所述清洗數(shù)據(jù)進(jìn)行數(shù)據(jù)增強(qiáng)，得到增強(qiáng)數(shù)據(jù)，所述增強(qiáng)數(shù)據(jù)包括：人臉特寫圖、半身圖以及全身圖，其數(shù)量比例為2:1:1；所述增強(qiáng)數(shù)據(jù)中的圖片數(shù)量大于設(shè)定閾值，進(jìn)入步驟3。
7.根據(jù)權(quán)利要求5或6所述的一種lora訓(xùn)練專屬模特的裝置，其特征在于：所述數(shù)據(jù)增強(qiáng)包括：生成模特圖，所述生成模特圖具體為：
8.根據(jù)權(quán)利要求5所述的一種lora訓(xùn)練專屬模特的裝置，其特征在于：所述打標(biāo)模塊具體為：將訓(xùn)練數(shù)據(jù)中的圖片通過多模態(tài)模型進(jìn)行格式化打標(biāo)簽，形成標(biāo)簽文件，所述格式化的格式為：性別、皮膚、眼神、發(fā)型、嘴型、表情、配飾、服飾以及背景。
9.一種電子設(shè)備，包括存儲器、處理器及存儲在存儲器上并可在處理器上運(yùn)行的計算機(jī)程序，其特征在于，所述處理器執(zhí)行所述程序時實現(xiàn)如權(quán)利要求1至4任一項所述的方法。
10.一種計算機(jī)可讀存儲介質(zhì)，其上存儲有計算機(jī)程序，其特征在于，該程序被處理器執(zhí)行時實現(xiàn)如權(quán)利要求1至4任一項所述的方法。