一场AI技术的革命正在席卷而来，ChatGPT与大模型的出现不仅引发了一场软件工程革命，它更将根本性地改变软件开发的流程和方式。
围绕着「前夜·AIGC 软件工程变革」的主题，QCon 全球软件开发大会（广州站）于5月26日-27日隆重举行。作为AI技术的持续践行者，三维家受邀出席大会并发表演讲，与字节跳动、阿里云、科大讯飞、商汤科技等国内外知名科技企业技术负责人同台，分享三维家在垂直行业3D大模型方面的思考与实践。
QCon全球软件开发大会是由极客邦科技旗下InfoQ中国主办的综合性技术盛会，每年在伦敦、北京、纽约、圣保罗、上海、旧金山等地召开。QCon内容源于实践并面向社区，演讲嘉宾依据热点话题，面向5年以上工作经验的技术团队负责人、架构师、工程总监、开发人员，分享技术创新和实践。
此次大会来到AI+云工业软件企业三维家的发祥地广州，三维家图灵实验室AI负责人王胜受邀发表题为《从通用智能到家居设计领域大模型 三维家的思考和实践》演讲。作为在 AIGC 生成方向积累多年的技术专家，王胜以家居领域大模型为主要研究方向，包括 3D 场景智能生成、智能渲染以及矢量几何数据结合机器学习等，此前参与合作撰写的论文曾入选全球计算机视觉三大顶级会议之一的ECCV 2022。
三维家图灵实验室AI负责人王胜
会上，他以家居行业实际落地场景为例，探讨了大模型修炼的道与术，并分享如何利用家居垂类大模型为行业带来降本增效的实际价值。
深度解决行业需求 三维家垂类大模型将为行业带来哪些价值？
当前，“百模大战”的竞争渐趋白热化，除了对标OpenAI、文心一言的通用大模型，面向金融、教育、医疗等领域的垂类大模型也如雨后春笋般“涌现”。业内人士普遍认为，垂类大模型面向产业侧会产生广阔的市场需求，有了落地应用，有利用于形成数据飞轮与场景飞轮。
王胜分享到，通用大模型主要展现通用文本生成、知识问答、数学解答等能力，而如三维家一样的面向家居设计领域的垂类大模型，则要求在具备通用能力的同时，掌握设计领域的专业知识和技能。不同于通用大模型大多面向NLP、CV等单一维度，垂类大模型有望在多模态上挖掘更深，需要输出多维度的数据信息，对更新知识库内容的频率要求也更高。
家居家装是一个专业性较强的领域，王胜表示，从导入户型图到生成一张设计效果图，三维家将其分拆为多个环节，从硬装布置到定制柜体，再到软装饰品布置、智能渲染、智能灯光，三维家在各环节都运用了AI技术来优化功能体验，最终实现一键全屋布置，几分钟内出高清效果图，设计效率有了量变到质变的飞速跃迁。
王胜认为，在家装设计领域，大模型面临的难点包括如何提高泛化能力，如何快速适配不同场景，还需要考虑如何将行业知识与AI技术相结合，跨越行业know how与AI技术之间的鸿沟。同时，在大模型应用上如何降低训练研发成本，也是值得思考的问题。
目前，三维家拥有全球最大的真实产品数字家装数据集，具备2800万+覆盖全国小区的户型数据、8100万+软硬装、家具家电、材质饰品素材库、16.3亿以上的设计方案库，涵盖效果图、全景图、动画等；更拥有全球首个真实定制柜体数据集，包含数千万参数数据。三维家的行业知识库已达1TB以上，并且持续更新中。
丰富且真实的数字家装数据库，让三维家有能力生成、整合真实感极强的三维场景模型，可适配在家居、办公空间、商业空间等设计场景。
在做模型训练时，动辄上百亿的参数，如何加快训练速率？王胜分享了三维家的一些举措，其中，三维家运用到目前很火的lora技术，其优势在于低秩适应、可扩展性、高效性、语言适应性和推理速度快等。
同时，三维家采用ZeRo-3 +Flash Attention技术帮助训练提速，能够有效打破GPU显存墙，进一步扩展可训练模型规模。
在模型选择上，三维家采用自研LLM大模型，对比OpenAI需要上传所有数据且模型闭源，LLM大模型可开源、可支持内部部署，运行速度更快，对垂直领域的微调效果更好。王胜表示，将通用数据结合垂直行业数据进行训练，其效果会更加突出。
更高效、更智能 AI技术如何成为真正的生产力工具？
王胜还从智能客服、AI渲染、多模态大模型智能设计等几个层面阐述了三维家的技术和应用。其中在AI渲染中，三维家运用到ControlNet技术，在扩散模型的基础上控制生成条件，约束空间中墙体、门窗、家具等变量，让AI生成效果图更加精美、合理。
在AI技术的加持下，三维家软件对空间效果图的灯光、装饰、质感、外景等进行重绘，让最终效果图更具质感和真实感。
索菲亚「浮洛」系列利用AI自动生成真实商品布置
目前，超过17000家知名家居企业、家装公司在使用三维家AI技术赋能设计，例如上市家居企业索菲亚正利用三维家AI自动生成真实商品布置，实现商品方案快速配置全屋空间，所有家具柜体自适应户型、空间、风格搭配。华为智能家居则利用三维家技术为用户设计个性化的智能照明系统。
据了解，深度植入AIGC技术的三维家云设计将逐渐开放生成式AI功能，设计师只需打开业主户型或样板间，调节场景构图，即可利用AI生成优质的光感效果图。AI还会提出有趣的建议，如在空间中添加绿植、装饰，或是替换沙发、颜色等，为设计师提供无限的创作灵感。
另外，三维家还推出基于真实柜体数据的定制家居大模型，可根据尺寸输入、对话文本生成参数化的定制衣柜、橱柜设计，生产合理的柜体方案，可直接对接生产，将大大缩减复杂易出错的柜体设计时间。
大模型在未来的家居设计领域中还将有多大的想象空间？王胜认为，AI让许多过去需要手动生成、调整的工序变得智能，效率实现了质的飞跃。未来，AI或将化身企业、个人必不可少的“小助手”，成为真正的生产力工具。
结语
在不久前召开的2023中国投资年会上，投资人将垂直领域大模型，掌握行业数据、懂行业know-how的项目列为重点投资布局的领域之一。
三维家深耕家居领域十年，对行业的深入洞察和技术积累让其在这场大模型的“中场战事”里已具备先发优势，未来，三维家还有望将版图拓展至更多轻工制造领域，掀开智能制造的新篇章，前景值得期待。
免责声明：市场有风险，选择需谨慎！此文仅供参考，不作买卖依据。
