快手公佈圖生視頻模型專利

天眼查知識產權信息顯示，近期，快手關聯公司北京達佳互聯信息技術有限公司申請的“圖生視頻模型生成方法、視頻生成方法及裝置”專利公佈。

摘要顯示，本專利所述生成視頻方法包括：輸入樣本圖像和樣本文本描述信息至預設文生視頻模型；基於空間模塊對樣本圖像和樣本文本描述信息進行空間特徵提取處理，得到第一樣本特徵處理結果；基於時序自注意力模塊對第一樣本特徵處理結果進行處理，得到第二樣本特徵處理結果；以及基於運動適配器模塊對第一樣本特徵處理結果進行運動信息控制，得到第三樣本特徵處理結果；根據第二樣本特徵處理結果和第三樣本特徵處理結果生成預測視頻數據；根據預設視頻數據和樣本視頻數據更新空間模塊和運動適配器模塊的參數，得到圖生視頻模型。本公開能夠控制生成視頻的運動信息，且降低對系統資源的消耗。