原標題：未來工具使用指南-AIGC知識分享會
二手沒貴項目上線半月有余，這段時間，在我們分享過項目案例的各個平臺上，常有一些朋友私信想了解更多項目中關于AIGC方面的細節內容，所以我們干脆弄了個AIGC知識分享會，主講是美術baseAI藝術家貳毛和技術base跳跳糖實驗室余博士；希望能從美術和技術兩個方面聊一聊AIGC在實際案例中的應用。知識和技術在未來獲取門檻會越來越低，擁抱未來樂于分享，希望給對AIGC感興趣的行業內外的朋友們一些靈感和幫助。
點擊圖片查看大圖
一、二手玫瑰《我要開花AIGC版》AI視頻工作流
@貳毛
1、主題風格設定
在開始工作前我們需要拆解二手玫瑰樂隊的藝術風格，將其與京東家電家居雙十一營銷理念相結合，創造一個既能體現樂隊特色又能展現京東家電家居產品的視頻。
我們確定了四個視覺方向的關鍵詞：
復古未來主義：融合復古元素與未來感，整支視頻創造出獨特的視覺效果。
華麗古典油畫：用細膩的藝術手法質感展現人物服裝夸張且荒誕，提升視覺吸引力。
賽博朋克：科技與反烏托邦的元素，強調家電家居的未來感，更加吸引人。
超現實：創造出超越現實的藝術風格，具有延展性和包容性，讓視頻風格統一。
2、主題背景環境生成——mid journey
基于以上主題風格，我們使用mid journey生成基礎圖片，這里不推薦單獨生成背景環境，帶人物的環境更易保持人物和環境一致性。我們在這一階段生成1000多張圖，最后精選70張用于視頻制作。
3、二手玫瑰全員人物虛擬形象生成——mid journey
使用mid journey的換臉插件，抽卡幾十次，生成最接近藝人的圖片，感覺mid journey對東亞人的面部描繪還是略顯生硬，我們后面為人物增加了墨鏡、護目鏡等配飾，弱化AI人物形象的呆板。
4、虛擬二手合唱我要開花——D-ID
將京東雙十一版《我要開花》上傳后臺，使mid journey生成的虛擬人物開口唱歌，它的嘴型與可以與音頻完美匹配，再加以微表情，讓人物更加生動。
5、讓2D面也充滿空間感——LeiaPix
將2D的照片轉換成3D的照片，用在五位成員的單獨照片上，輕微的晃動延伸了空間，同時強化了鏡頭的呼吸感。
6、客戶看了直拍手“產品還能這樣展示”？——mj無限擴圖功能
使用mj的擴圖功能輸出三十多張序列幀，最后用剪輯軟件串在一起，形成zoom out的動畫效果，在無限的穿梭中展示京東家電家具產品。操作過程中我們發現越到后面生成的圖暗黑風格越明顯，所以我們加入了“孟菲斯風格“關鍵詞，用明艷的色調調和暗黑的風格。
7、流動的花海 沉醉視覺體驗——PixaMotion
在視頻進入“我要開花”的高潮部分，我們想要在這里展示一種區別于前面視覺內容的全新畫面，強化高潮的視覺沖擊力，這里使用了一種局部動態的應用軟件，讓背景中的花朵像花海一樣流動，湍流不息，創造出令人沉醉的視覺體驗。
8、一起進入家電家居的瞬息宇宙——Stable Diffusion
“瞬息全宇宙”相信大家都不陌生，是目前各類廣告片中應用最多的一種AI呈現效果。我們在家居環境的背景上，通過快速的動畫變化展示換新家的概念。執行時“瞬息全宇宙”的效果會導致藝人的臉不斷閃爍變化，所以我們分出了前景和后景，只將背景環境做瞬息全宇宙，后期在剪輯的時間軸上再把人物合在前景。
視覺創意革命：平面廣告中的AI應用
作為平面設計師出身的AI藝術家@貳毛 老師 對平面廣告中的AI應用也有持續的研究，她認為在這場AI帶來的視覺創意革命中，設計師可以迅速測試和迭代不同的視覺風格，這有助于開發獨特和創新的設計概念，以天貓視覺符號“貓頭”為例，在固定命題不變（超級符號，3c產品等）的前提下，可借助Stable Diffusion迅速測試不同藝術風格，降低試錯成本。同時在效率提升方面，AI工具在可以短時間內生成大量圖像，尤其面對緊迫的截止日期是可以大幅提高工作效率；另外，一些重復性的設計任務可以交給AI去做，讓設計師有更多的時間專注于創意工作。
通過sd快速制作不同材質的字體、logo或者圖形，比起C4D等軟件能更快的看到效果。
使用mj制作的呼吁公眾關注抑郁癥群體的公益海報，知名IP形象蜷縮在真空的密封袋里。
以《指環王》鐵王座為另靈感，使用sd將職業形象與職業相關工具結合。
以蘋果logo為例在有固定命題的前提下，使用sd測試大量不同的藝術風格。
實操得出的挑戰和難點
技術復雜性：AI視頻制作工具具有高度的技術復雜性，需要掌握相關的技術知識和技能，理解不同的AI功能、操作軟件界面，以及調整適當的參數。
創意限制：雖然AI可以生成獨特的視覺內容，但它們的創造力是基于訓練數據和算法的限制。所以在一些情況下，AI生成的內容不能完全符合用戶的創意期待。
一致性和質量控制：在視頻制作中保持視覺調性一致和連續性是一個挑戰。所以AI生成的每個片段或場景都需要額外的編輯和調整（PS），以確保整體視頻的質量和流暢風格統一。
資源和成本：高質量的AI視頻可能需要昂貴的軟件和強大的計算資源。比如買會員和租服務器等等。
用戶期望：由于AI在視頻制作領域相對較新，用戶對其能力的期望可能與實際產出有差距。教育和管理期望值是一個重要的環節。
二、藝術與技術的融合，視覺背后的程序支持
@跳跳糖-余博士
如果說二毛老師在視覺層面編織了許多奪目的畫布，那么余博士則在技術層面將畫布絲滑的編織起來。
1、AI動畫的精準控制——AE鏡頭控制
“利用MotionBro和AE2SD插件，我們能夠將AI視頻生成的工作流程無縫集成到After Effects中。這不僅允許我們對AI視頻鏡頭進行影視級別的精細操作，還能夠順暢地銜接到影視剪輯流程中，從而實現更高效、更專業的視頻制作。”
2、AI動畫的精準控制——攝像機反求
“攝像機反求技術，通過分析已拍攝的視頻素材并運用視覺空間定位技術，能夠準確地反推出攝像頭在現實空間中的具體位置和方位。利用MotionBro和AE2SD插件，這一技術能將攝像頭參數有效地傳輸至AI視頻制作工具。這一流程不僅增強了AI動畫與現實世界坐標的融合，還極大地提升了動畫制作的真實感和互動性。”
3、AI動畫的精準控制——音頻
“節奏和音頻在AI視頻制作中扮演著關鍵角色。在After Effects中，我們可以使用表達式來程序化地提取音頻素材的關鍵信息，如音量和聲道。這些數據經過精確計算后，可以直接影響和調整攝像機參數。這種技術允許攝像機的運動節奏與音頻的節奏保持一致，從而創造出與音樂完美同步的視覺效果。這不僅增強了視頻的觀感，還為觀眾提供了一種更為沉浸和動態的觀看體驗。此外，這種方法也為視頻編輯和動畫設計師提供了更大的創意自由度和表達力，使他們能夠創作出更加富有創意和感染力的作品。”
「彩蛋-其他強大有趣的AI技術」
1、AI視頻解說
“借助TTS語音合成及Whisper高質量語音識別技術，我們上傳一段視頻并給到一些提示此后，AI可以自動為這段視頻配上講解的音頻，例如我們給到AI一場足球直播的畫面，要求它以足球評論員賀煒的風格來講解，同時將賀煒過往的解說資料喂給它，AI就可以自動生成文案、同時匹配音頻，再運用上我們前面講到的讓虛擬人物開口說話的D-ID，一支“超低成本”的體育解說視頻就完成了。”
2、ComfyUI的Workflow
“作為StableDiffusion的節點編輯界面，ComfyUI為復雜而有效的圖像和視頻生成邏輯提供了一種直觀的可視化工作流形式。通過節點編輯，設計師能夠直觀地看到各個處理步驟，從而實現對AI生成的圖像和視頻的精細化控制。這不僅極大地拓展了設計師的視野，還提升了他們在創作過程中的效率和創造性。雖然ComfyUI在設計界非常流行，它的界面和功能設計對新用戶來說可能有一定的學習門檻。然而，一旦掌握，它的強大功能和靈活性能顯著提升內容創作的品質和創新度。對于追求高效和精準控制的專業人士來說，ComfyUI是一個不可或缺的工具。”
三、人機協同：預見創意生產力的爆炸
AIGC的應用讓《二手沒貴》實現了無置景無演員的演出，所有需要的只是樂隊成員的肖像圖。從瞬息宇宙到充滿時尚感的炫酷家電， 在這支片子中AI技術的使用占到了95%，HAPPYDRUG以AI為生產力為京東家電家居呈現了一條真正fancy的AI廣告。相信這對于品牌方及供應商、甚至整個國內廣告行業都是一次突破性的成果。
縱使AI技術如此強大，但如果不由人類的大腦指出方向、做出選擇，AI不過是程序世界錯綜的一組代碼。引用知乎作者的一句話“AIGC可以輕松的把一副麥田的照片變成梵高的風格，但你永遠不可能從計算機那里看到心靈的悲傷和生命的熱情這二者的沖突和解決”。
生產力的爆炸從來都是由人決定的。
轉載請在文章開頭和結尾顯眼處標注：作者、出處和鏈接。不按規范轉載侵權必究。
未經授權嚴禁轉載，授權事宜請聯系作者本人，侵權必究。
本文禁止轉載，侵權必究。
授權事宜請至數英微信公眾號(ID: digitaling) 后臺授權，侵權必究。
評論
評論
推薦評論
全部評論（12條）