厦门网讯(记者 彭菲)批量导入图片,由AI自动完成抠图、生成带有场景的商品图,图片还能适配不同电商平台的尺寸要求——美图设计室为电商企业和个体户破解设计作图的痛点。技术研究和应用升级还在继续,美图公司作为项目单位之一,参与“面向人机交互与协同的多模态大模型关键技术研究及产业化应用”。
这是我市2024年未来产业领域市重大科技计划项目之一,于去年12月立项,目前正在紧锣密鼓地推进研发。
“一个人就是一支团队”,半小时完成设计
“将前沿AI技术转化为低成本、高可用的AI生产力工具。”美图相关负责人这样介绍项目的核心价值。当前,多模态大模型在人机交互与协同中存在模态信息对齐偏差、内容可控性不足、生成内容质量不高等问题。该项目拟融合强化学习、自监督学习、增量学习等先进技术,深入研究多模态大模型关键技术与模型训练方法,简而言之,就是让大模型更聪明。项目的研发周期为两年。据介绍,项目的技术成果将应用于智慧设计、智慧交通等领域,未来还有望拓展至智慧医疗、辅助诊断等对人机交互与协同要求高的场景中。
美图研发人员举了这样一个例子,传统电商设计是“人力密集型”行业,从拍摄、设计,到产品上架,需要几天时间和大量金钱成本,依托智慧设计模型,仅需一台手机或电脑,只要半小时的时间,商家通过输入文字、图像的交互方式,就能轻松完成整个设计作图流程,还能智能调整和优化设计方案。一个人就是一支团队,设计行业正在向“AI驱动型”转变。
制作AI商品图的产品,服务200万电商卖家
过去两三年,美图积极拥抱AI,产品业务破圈突围,近年来先后推出美图设计室、开拍、WHEE、美图云修、奇觅、MOKI等AI生产力工具。以美图设计室为例,2023年上半年,大量非电商行业的普通人涌入图文带货赛道,制作AI商品图的产品火了,引来一大批用户。到2024年,这款产品已在美图的产品推介中占据C位。目前,美图设计室服务的电商卖家数量达到200万。据报道,在义乌,每10个电商企业或个体户中,就有一个在用这款产品。
这背后凝聚着团队的智慧与汗水。美图研发人员表示,AI生成的试衣、试鞋图必须高度还原鞋服等产品细节,如鞋服的褶皱、材质,对光影呈现也有比较高的要求,研发之初也曾经历过生成图片不精准、不可控的问题。为此,研发人员反复针对服装、鞋子训练专属模型,结合人体姿态预估、3D人体重建、深度打光技术等提升AI换装、AI试鞋的效果。此外,还结合背景生成技术、高精度人体分割技术,实现户外、室内、棚拍、城市街景等不同场景的自由选择。
在此基础上,聚焦义乌、广州、泉州等电商集中城市,美图设计室推出“小微电商AI助力计划”,后续将启动“电商AI设计课程”,帮助电商提升AI设计技能和订单转化。
名词解释
多模态大模型
简单来说,多模态大模型就是一种能够理解和处理多种类型的机器学习模型。而类型也被叫作模态,包括文本、图片、音频、视频等。
相关新闻
科学城的春日“约会”
举办专场对接会,助力科技成果转化
本报讯(文/图 记者 洪萱茹 通讯员 郭燕妮)3月14日,“技术源头掘金”——2025中国科学院理化技术研究所科技成果专场对接会在厦门科学城I号孵化器举办。此次活动旨在搭建一个科技成果对接与转化的平台,助力前沿科技成果从实验室走向生产线,落地在厦门产业链上。中国科学院理化技术研究所(以下简称“理化所”)研究团队带来了13项高质量科技成果转化项目,促成了近20项对接合作意向。
理化所成果转化处处长和晓楠介绍理化所的科研成果转化情况。在项目路演环节,5个优中选优的成果转化项目依次亮相。从海洋塑料污染解决方案到打破国际垄断的绿色高效内烯烃异构化技术,从高端装备基础零部件深冷处理改性技术到高分辨率高灵敏度牙医片集成开发,再到高补强低增稠白炭黑(纳米二氧化硅粉体)的研制,体现出理化所科研团队的开拓精神和创新能力。
厦门市科学技术局副局长黄颖表示,此次科技成果对接会是厦门科学城今年春天的第一场“约会”。厦门与理化所合作基础扎实,厦门热忱期待深化与理化所等中国科学院系统研究所的科技和产业交流合作,共同探索支持科技成果转化的新机制新模式,携手在推动科技创新和产业创新深度融合上闯出新路。在未来发展中,厦门将始终秉持开放合作、互利共赢的理念,定期举办“技术源头掘金”系列活动,搭建与国内外高水平高校院所的常态化交流合作平台,支持更多像理化所微球团队一样的创新团队来厦门创新创业。
活动由厦门市科学技术局(厦门科学城管委会办公室)、厦门市同安区政府、中国科学院理化技术研究所及中科海锐(厦门)科技研究院有限公司共同主办的。