高 锐

中北大学艺术学院,山西太原030051

1 引言

AIGC 技术能够帮助动画师们快速地设计角色、生成场景,甚至编写剧本,以达到节省时间、降低成本的目的。随着AIGC 技术的逐渐成熟,其在动画领域的应用是大势所趋,而随技术诞生的挑战也愈发严峻,包括但不限于其局限性、知识产权问题等。在这种背景下,探讨AIGC 技术的潜力、应用及挑战成为一个亟待研究的课题。

元宇宙(Metaverse)作为一种将虚拟世界与现实世界紧密结合的新兴技术概念,正以翻天覆地的速度改变着我们的生活方式。AIGC技术在动画领域的成功应用为元宇宙的实现提供了可能,推动了元宇宙概念逐渐走向现实。因此,研究AIGC 技术对动画行业及元宇宙的影响具有重要的理论与实践意义。

本文旨在通过分析AIGC 技术在动画领域的成功应用案例——动画短片《犬与少年》来阐述AIGC技术在动画制作过程中的优缺点及其潜力应用和挑战。同时,本文将探讨AIGC 技术如何为元宇宙的实现提供可能性,以及在元宇宙中的具体应用前景。通过深入研究这一主题,希望为动画行业和元宇宙的发展提供有益参考。

2 AIGC技术的基本原理与应用案例

随着人工智能(AI)技术的飞速发展,人工智能生成内容(Artificial Intelligence Generated Content,AIGC)技术逐渐在各方面崭露头角。2023 年1 月30 日,一部名为《犬与少年》的动画短片引起了广泛关注。该作品采用AIGC 技术,大大降低了制作成本和时间,同时提高了作品的视觉质量。这一成功案例使得AIGC 技术在动画行业及元宇宙领域受到广泛关注,为笔者的研究提供了一个有意义的切入点。

2.1 AIGC基本原理

AIGC技术是指利用人工智能生成和优化内容的一系列方法和技术。它结合了计算机视觉(CV)、自然语言处理(NLP)、生成式对抗网络(GAN)等多个AI技术,通过对大量数据的学习和模式识别,实现对各种类型内容的自动生成和优化[1]。计算机视觉技术使AI 系统能够理解和解析图像信息,从而实现对图像内容的自动生成;自然语言处理技术让AI 系统能够理解和生成人类语言,为动画制作提供文字描述、对话和剧本等内容;生成式对抗网络技术则是一种训练AI 系统通过竞争学习生成逼真内容的方法,常用于生成图像、动画和音频等[2]。

以Runway 公司和Wonder Studio 为例,二者分别代表了AIGC 技术在动画领域的不同应用。Runway利用文本生成视频(Text-to-video)AI模型Gen-2,用户可以输入描述,系统自动生成任何风格的对应视频。而Wonder Studio 则专注于人工智能在影视制作中的应用,利用AI 技术自动分析并捕捉真人表演,为CG角色制作动画并将灯光和CG 角色匹配到实拍场景,大大提高了电影制作的效率和质量。

2.2 实例分析

《犬与少年》是AIGC 技术辅助商业化动画片的首个发行级别作品,由日本奈飞(Netflix JP)、日本WIT STUDIO 和微软小冰公司日本分部(rinna)联合制作。日本WIT 工作室是一家知名的动画制作公司,制作多部受欢迎的作品;微软小冰公司则致力于人工智能技术的研究与应用。而本片导演是牧原亮太郎,他在片中负责故事和图画创作。

图1 《犬与少年》剧照

2.2.1 影片简介

《犬与少年》讲述了一位少年和一只可爱的机器狗偶然相识、相知的故事,他们的情谊跨越时空。影片的背景场景包括白雪皑皑的富士山、海边的小村庄、飘坠花瓣的樱花树和颜色浓烈的绿草地等,展现了一部典型、风格温馨的日本动画。

在这部作品中,绝大部分场景绘制工作是由人工智能完成的,而人物和动物角色——少年和机器狗则是通过传统的动画片制作方式,即手绘的方式完成。这种结合了人工智能和传统动画制作技术的作品,展示了动画产业在技术创新方面的尝试和发展。

2.2.2 创新表现

在《犬与少年》这部动画短片中,AI 技术的运用在背景绘制和背景音乐生成方面展现出了显着的创新成果。

首先,该作品采用了一种名为“原始人工智能”的定制系统进行该片的背景绘制,该系统通过利用制作I.G 的Netflix 原创公司的背景艺术数据集进行训练。在这一协作式的背景艺术创作过程中,动画师首先向AI系统提供提示和布局,接着AI生成相应的图像,最后由动画师加以调整并与其他元素融合。这一迭代过程为团队提供了实现动画中所需场景外观和感觉的高效方式。此创新方法还为AI在未来项目中对角色设计等其他方面的贡献提供了潜力。

其次,在背景音乐生成方面《犬与少年》的制作过程中采用了名为“M”的AI 代码,为主题曲“ainouta”(情歌)的创作提供了协助。通过分析大量现有音乐作品,理解各种模式、结构和风格,该组AI 代码可以生成多个主题选项。之后,人类作曲家对这些AI 生成的选项进行改进,为动画创造了一个具有凝聚力和吸引力的主题。这种合作方式展示了如何将人工智能融入传统音乐作曲工作流程,激发新想法和创新表达。

通过在背景绘制和背景音乐生成方面引入AI技术,《犬与少年》展现了动画制作领域的创新表现。这些创新应用不仅提高了工作效率,降低了成本,还充分发挥了动画师和音乐制作人的创造力。在此后的第2.3 节中,我们将继续探讨如何将这些技术与动画制作相结合,以期在未来的动画产业中实现更多令人兴奋的突破。

2.2.3 存在的不足

AIGC技术的应用虽然极大地缩短了《犬与少年》制作周期和降低了制作成本,但在实际应用方面也存在一定的局限性。其一,在人物和动物角色设计方面,AI 生成的图像质量与手绘相比仍有一定差距,其质量相对粗糙;其二,《犬与少年》中的少年和机器狗角色仍然采用了传统的手绘方式。在故事编排和剧情发展方面,AI 暂时无法完全替代人类创作者的创意和想象力,本片中,故事情节仍然由人类导演和编剧负责创作。总的来说,《犬与少年》展示了AIGC 技术在动画制作中的潜力和优势。尽管这一技术仍有待发展完善,但它无疑为动画电影产业带来了创新和可能性。该片在多家视频网站正式发行也意味着人工智能技术在动画制作领域逐渐开始商业化落地。

2.3 AIGC在动画领域的应用潜力

《犬与少年》中AI 被用于背景的绘制、音乐的创作,但AIGC 技术在动画领域的应用不止于此,包括但不限于以下几个方面:

(1)角色或场景设计

AI 绘画可以很便捷地帮助创作者设计出想要的角色。AI 可以大幅减少动画绘图的时间,并按照指示在3分钟内生成100张图片(4K 分辨率),在单位时间内,AI 生成草图的数量可以轻松超过人工手绘的极限。截至目前,在画师中运用较为广泛的模型有三款:DALL·E 2,由OpenAI 开发,具有“Inpainting”特性,适合寻找灵感;Midjourney,生成的图像风格独特,具有插画感;Stable Diffusion,一个开源的AI 绘画工具,快速生成能力令人惊叹。

(2)角色建模

通过AI技术,如英伟达(NVIDIA)的GauGAN360,可以自动生成或优化角色的外观、动作和表情等,减少动画师在角色设计和建模方面的工作量。一个应用实例是用AI 生成的游戏角色,如游戏《赛博朋克2077》(Cyberpunk 2077)中大量的NPC 角色均由AI 生成[3]。此外,MetaHuman Creator 是一个基于云端的应用程序,可以快速创建逼真的虚拟人物模型,广泛应用于游戏和动画制作[4]。

(3)场景构建

AIGC 技术如Promethean AI 可以辅助动画师完成复杂的场景构建,包括自动生成逼真的背景、物体和光影效果等。GET3D 是NVIDIA 最新发布的模型,通过2D 图像训练后,该模型可生成具有高保真纹理和复杂几何细节的3D 形状。比如,椅子腿上的各种轮子,汽车的车轮、灯和车窗,动物的耳朵、角,摩托车的后视镜,车轮胎上的纹理[5]等。ControlNet的模型则将AI 绘画水平推向了新高峰,利用ControlNet 工具,同样可以实现生成3D 模型。此外,AI 还可以用于生成逼真的天气和自然现象,如雨、雪、火等,为动画作品增添更多生动的细节。这些效果可以通过AI 模拟,以提高场景真实感,同时节省动画制作过程中的时间和资源。

(4)剧本生成与对话编辑

利用自然语言处理技术,AI 系统可以生成剧本和对话内容,协助编剧和动画师完成故事创作,如OpenAI 的GPT-3。2016 年 的 短 片《阳 春》(Sunspring),其剧本便由AI生成。在这方面,还有基于AI的文字冒险游戏AI Dungeon,可以根据玩家输入内容自动生成故事情节[6]。此类技术在动画领域的应用,有望帮助创作者更高效地探索创意和故事线索。

(5)音频处理

通过AI 技术,可以自动生成音乐、音效和语音,为动画作品提供丰富的音频内容,如OpenAI 的Jukebox。举一个AI 生成音乐的案例,如AIVA(Artificial Intelligence Virtual Artist)所创作的音乐。此外,谷歌的Magenta 项目利用AI 生成音乐以及Adobe 的VoCo技术,可以根据现有音频合成逼真的语音[7]。

毋庸置疑,AIGC 技术能够在多个方面提高动画制作的效率与质量。《犬与少年》的问世体现了该技术在动画制作领域取得的初步成功,更为元宇宙概念的实现提供了可能。

2.4 AIGC技术在元宇宙建设中的应用前景

元宇宙(Metaverse)是一个虚拟的、数字化的共享空间,其中包含了多个相互连接的3D 虚拟世界。元宇宙中,用户可以与他人互动、娱乐、学习和工作。随着互联网和虚拟现实技术的发展,元宇宙逐渐成为一个热门话题。通过之前对AIGC 在动画领域的应用分析,我们可以发现AIGC 技术在元宇宙建设中具有巨大的潜力,主要体现在以下几个方面:

(1)虚拟世界的创建:AIGC技术可以协助开发者自动生成丰富、多样的虚拟环境,包括地形、建筑、植被等,大大降低了虚拟世界创建的难度和成本。MetaHuman Creator 允许开发者快速创建逼真的人类角色,缩短制作时间。前文提到的NVIDIA 的GauGAN也可以根据用户输入生成自然场景,为虚拟世界提供更多可能性。

(2)角色生成与定制:AIGC技术可以为用户提供更加丰富、个性化的虚拟角色定制选项,包括面部特征、服装、动作等。通过AI 技术生成的角色更加真实、多样,提升了用户在元宇宙中的沉浸感[8]。元宇宙概念大火后,Ready Player Me 便提供了一种便捷的方式,让用户可以快速创建并自定义虚拟角色(数字替身),链接至不同的元宇宙平台。

(3)智能NPC 与交互:借助AIGC 技术,元宇宙中的非玩家角色(Non-player Character, NPC)可以具备更高的智能程度,与用户进行更加自然、真实的交互。这将为用户提供更加丰富的虚拟世界体验,增强元宇宙的吸引力[9]。目前颇受关注的OpenAI 的Chat-GPT,以及微软New Bing 都能用于生成有趣且具有一定深度的NPC对话。

(4)内容生成与推荐:AIGC技术可以实现大量元宇宙内容的自动生成,包括任务、剧情、活动等。同时,AI 系统还可以根据用户的兴趣和行为进行个性化推荐,为用户提供更加精准、有趣的内容体验[10]。以AI Dungeon 为例,这款游戏利用AI 技术生成个性化的冒险故事,根据用户的输入和选择提供不同的剧情走向,为元宇宙中的个性化内容生成提供了一种实践方案。另外,使用推荐系统技术,如协同过滤和深度学习,可以帮助用户在元宇宙中发现感兴趣的活动和体验,从而提高用户粘性和满意度。

(5)虚拟经济与创新商业模式:AIGC技术有助于开发新的虚拟商品和服务,推动元宇宙中的虚拟经济发展。此外,AI 技术还可以为元宇宙创新商业模式提供支持,例如通过智能合约实现虚拟资产的交易与管理。比如,Decentraland 这一基于区块链技术的虚拟世界平台,用户可以购买、出售和交换虚拟土地、建筑等资产,AIGC技术可以帮助设计独特的虚拟物品,增加其价值。此外,艺术家可以利用AIGC 技术创作独特的虚拟艺术品,并通过非同质化代币(Non-Fungible Token,NFT)进行交易,为元宇宙中的创作者提供收入来源。

综上,AIGC 技术在元宇宙建设中具有广泛的应用前景,有望为元宇宙的发展提供强大的技术支持,推动元宇宙成为一个更加丰富、有趣、智能的虚拟空间。随着AIGC 技术的不断进步,我们有理由相信,它将在未来的元宇宙建设中发挥越来越重要的作用,为用户带来更加精彩的虚拟体验。

3 AIGC技术面临的挑战

随着AIGC 技术的飞速发展,我们必须关注这一领域所面临的各种挑战。从技术进步到伦理问题,再到市场竞争与合作,了解这些挑战有助于我们更好地探讨AIGC 技术的发展趋势,以确保未来的技术应用能够更加安全、高效且创新。本节中我们将深入探讨AIGC 技术所面临的一系列挑战,以期为读者提供更全面的视角。

(1)技术成熟度问题。虽然AIGC 技术在动画制作和元宇宙领域展示出巨大潜力,但目前该技术仍处于发展阶段。实际应用中,AIGC 技术可能会遇到一些技术瓶颈和局限,例如生成质量的波动、算法稳定性和实时性等问题[11]。这些问题需要进一步研究和解决,以便在实际应用中取得更好的效果。

(2)数据质量与可用性。AIGC 技术的核心是基于大量数据进行训练和生成。因此,数据质量和可用性对于AIGC 技术的发展至关重要[12]。然而,高质量数据的采集、整理和标注是一个耗时且昂贵的过程。此外,数据隐私和版权问题也可能对AIGC 技术的发展造成一定影响[13]。

(3)人工智能伦理问题。随着AIGC 技术的广泛应用,关于人工智能伦理的问题也逐渐浮现。例如,AIGC 技术可能导致动画行业的部分人员失业,以及在元宇宙中引发虚拟世界与现实世界的边界模糊等问题[14]。这些伦理问题需要社会各界共同关注和讨论,以确保AIGC技术健康可持续发展。

(4)法律法规与监管。随着AIGC 技术在动画行业和元宇宙领域的广泛应用,相关法律法规和监管也成为必然的挑战。各国政府和监管部门需要制定相应的政策和标准,以确保AIGC 技术的合规、安全和可控。同时,企业也需要关注法律法规变化,确保其在AIGC技术应用过程中遵守相关规定。

(5)技术竞争与市场竞争。AIGC 技术作为一个新兴领域,各大企业纷纷加入竞争,寻求市场份额。在这种背景下,技术竞争和市场竞争将变得愈发激烈。为了在竞争中保持领先地位,企业需要不断投入研发,优化技术,提高服务质量,降低成本,并关注行业动态和市场需求。

AIGC 技术虽然具有巨大的潜力,但在实际应用中仍面临诸多挑战。技术成熟度、数据质量与可用性、人工智能伦理问题、法律法规与监管以及技术竞争与市场竞争等方面都需要关注和努力。只有不断克服这些挑战,AIGC 技术才能在动画行业及元宇宙领域实现更广泛、更深入的应用,为人类社会带来更多的价值和效能。

4 结论

本文通过对AIGC 技术在动画行业和元宇宙领域的潜力、应用及挑战进行深入分析,得出了以下结论:AIGC 技术具有广泛的应用前景和巨大的发展潜力,可以为创意产业开辟全新的可能性,推动艺术、文化和技术的发展。然而,AIGC 技术同时也面临着伦理、技术和市场方面的挑战。为应对这些挑战,我们需要加强伦理监管、促进技术研究与创新以及开发多样化的市场应用。未来,AIGC技术必然在动画制作、元宇宙建设以及其他领域面临更为广泛的应用。随着技术的不断发展,我们有理由相信AIGC 将带来更多创新、高效和多样化的解决方案。然而,我们也必须关注AIGC 技术带来的社会影响和伦理问题,确保其可持续发展和负责任应用。AIGC技术为我们提供了一个全新的视角,展现了未来创意产业的无限可能。我们期待着这一领域的进一步发展,及其为人类带来的诸多惊喜和挑战。❖