首页 >>  正文

lora模型网站

来源:baiyundou.net   日期:2024-09-20

文|李睿、真梓

上传商品图片,选择场景、图片尺寸、数量,在不到一分钟的时间内完成3D数码、小家电、日用品等类型商品图。这是灵动AI推出的AIGC产品“灵动AI商品图”的主打场景。

过去,传统商品场景图的制作常采用3D渲染或影棚拍摄方式。制作一套20张的商品场景图,需要一个多工种设计团队至少耗费3天时间,花费成本超2万元。对比之下,使用“灵动AI商品图”这类生成工具,单人即可完成商品图的制作,单次生成消耗的算力成本不到1元。

灵动AI创始人雷海波,之前是中国头部视觉设计社区“视觉中国”创始人。2014年,雷海波创立了D2C创新产品孵化及智能设计平台「太火鸟」。但2023年生成式AI的来临,让雷海波改变了自己的创业旅程。

Diffusion Model来袭,GAN不过就加入

AI生成图片,GAN方案是早前主流。2018年到2020年间,雷海波也将GAN引入其公司「太火鸟」旗下的D2C创新产品孵化平台,帮用户一键生成硬件产品的草图、效果图、仿真3D图。

但在2022年年中,伴随DALL-E2、Midjourney等基于Diffusion Model的大模型崛起,图像生成的效果前所未有的逼真。算法生成的图像在质量、创造性方面也明显优于GAN,震惊了整个创意产业。

拥有20多年设计经验的雷海波也是其中一员。

在初尝Diffusion Model的效果后,雷海波发现,这一算法的效果在很多场景下几乎不逊于专业设计师。为进一步验证这一发现,他在一个月内用Midjourney生成了1.2万张图,加入了Midjourney 在Discord上的“一万俱乐部”。

最后,这位专业人士不得不承认,Diffusion已经完全超越人类的表现。

“第一是效率,第二是生成的效果。它把初级设计师和有10年功力的资深设计师的能力拉平。”雷海波觉得,一个没有任何设计能力的非专业人士,只要会写提示词,用Diffusion生成的效果已经超过资深设计师的水平。“这在设计界是公认的。”他补充。

但同时,认清现实意味着,太火鸟基于GAN的技术路线几乎要推倒重来。已在“一万张俱乐部”中验证过答案的雷海波,决定“打不过就加入”,灵动AI也就此成立。

雷海波表示,灵动AI以生成式AI为核心,打造从视觉设计行业大模型到创新应用的设计平台,目标是重塑专业的“营销+设计”工作流程。

在他看来,灵动AI相比很多AI初创公司拥有自己的先天优势,“太火鸟过去的所有技术、数据积累和资产,包括三十多项GAN时代的算法专利以及海量设计资源,都可以直接移植到新公司中进行利用。”雷海波介绍,通过汲取太火鸟的经验和资源,灵动AI在两个月内就研发出生成内容技术和产品矩阵。

“灵动AI商品图”背后:Lora模型+专业模型

AIGC产品“灵动AI商品图”是灵动AI的产品代表。雷海波表示,这是业内首个工业级AI商品图生成工具,该产品正在与京东智能新品孵化平台合作,为商家提供AIGC“营销+设计”服务。

在演示中,用户可以通过“灵动AI商品图”,进行简单的选择对固定商品输出多种场景的商品场景组图,复杂的图像处理和场景生成工作均由系统承担。

在技术层面,雷海波介绍,“灵动AI商品图”集成了多个特定的风格场景,并依托Diffusion Model训练出LORA模型和多个达到1亿级参数规模的专用AI模型。未来,公司还计划打造灵动AI视觉设计大模型。

其中,专用AI模型还承担了文生图的“控制”功能。

众所周知,将AIGC应用进工作流,需要解决内容的一致性、可控性问题。针对这一行业难题,灵动AI研发了C-VAE商品主体生成控制和C-BG背景生成控制专用模型——它们和动态视觉专用模型、内容理解以及美学评估专用模型一起组成了专业模型序列。

此外,智能审美评价系统也是雷海波眼中的“技术壁垒”。雷海波告诉36氪:“这个智能审美评价系统是灵动AI自研的一套美学评估模型,由后台自行完成,用户感受不到它。”他进一步介绍,美学评估模型,综合考虑了许多视觉设计的专业规范,从整体审美、商品材质与场景的适配度、整体色彩的协调性、光影明暗、商品与场景的风格契合度、构图的合理性等上百个评价维度对生成图像进行打分。这一模型的效果是帮助用户筛选、呈现效果最优的图片。

模型架构之外,雷海波还认为,“没有任何团队拥有我们这样量级的设计类数据集”。目前灵动AI已经拥有1000万设计数据集和1亿+工业产品设计数据集。

相比Midjourney、Stable Diffussion等通用视觉大模型,“灵动AI商品图”希望在简单易用性与专业生成效果之间取得平衡,以模块化的场景图模版代替传统视觉大模型流行的文生图。“纯粹的文生图对普通用户来说门槛较高,因为描述出一个专业的商品图场景需要专业的提示词表达,而大多数普通商家并不具备相关能力。另外这种方式不利于批量的商品图生成。”雷海波解释。

在演示中我们还看到,即便GAN的高光已经过去,但在“灵动AI商品图”主页所演示的效果图中,雷海波还是隐藏了一些智能硬件时代留下的痕迹。例如,他将Nest智能温控器、Misfit可穿戴等当年著名的产品“藏”进生成模型所生成的商品场景组图样例中,以此来致敬与太火鸟同期的智能硬件时代。

效果示例

从静到动,完善视觉大模型场景

视觉模型的应用场景,不止于图像生成,还有视频生成。

在视觉大模型范畴,图片是目前形态最多的产品,视频是“皇冠上的那颗明珠”。在这二者之间,动态图形(Motion Graphic )是目前的兵家必争之地,Motion Graphic 也是一个很热门的设计专业。

“我们第二个产品方向是动态生成模型,主要是面向营销物料的元素级动态生成。”雷海波向36氪透露,灵动AI正从静态生成向动态生成领域拓展,希望打造AI原生「动态视觉」生成式设计平台。

此前灵动AI与孟京辉导演发起的斯芬克斯全球首届元宇宙戏剧节合作,协助老狼、黄磊等艺术家完成了AIGC动态宣传海报创作。同时也和小米、京东、安踏等客户进行了AIGC共创合作。

效果示例

产品之外,雷海波还介绍,灵动AI的核心团队来自视觉中国、THN、百度和京东等头部科技企业。他表示,这支团队的成员具备参与THN工业设计平台和智能设计引擎、百度文心一格视觉大模型以及京东商城文生图视觉大模型的开发经验。

下一步,灵动AI计划在年底推出10亿参数专注工业产品设计领域的垂类大模型,在此基础上开发面向具体行业的定制化应用,为广告、品牌、媒体等创意产业提供更加专业化、精细化的AIGC方案。

","gnid":"96557a160cc3a54cc","img_data":[{"flag":2,"img":[{"desc":"","height":"1416","s_url":"https://p0.ssl.img.360kuai.com/t016b7ce110aed64e90_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t016b7ce110aed64e90.gif","width":"2622"},{"desc":"","height":"1146","s_url":"https://p0.ssl.img.360kuai.com/t01ee6cafff6615b82e_1.gif","title":"","url":"https://p0.ssl.img.360kuai.com/t01ee6cafff6615b82e.gif","width":"1000"}]}],"original":0,"pat":"art_src_3,fts0,sts0","powerby":"hbase","pub_time":1692153120000,"pure":"","rawurl":"http://zm.news.so.com/5215018f9f02e3ec7ad8c5827ceaeaa0","redirect":0,"rptid":"fea7adf1dbddce2d","rss_ext":[],"s":"t","src":"36氪新媒体","tag":[{"clk":"ktechnology_1:视觉中国","k":"视觉中国","u":""}],"title":"前视觉中国创始人再创业,「灵动AI」推出AI工业级商品图设计工具|Tech 100

隗利禄3039NB - lot和LoRa真正的差别是什么?
刁婕山18545517308 ______ 不同的商业模式首先,我们需要明确的是,LoRa和NB-IoT最基本的运营模式截然不同.NB-IoT是运营商代理建设的网络,业主无需考虑基站部署.NB-IoT可以在通信基站本身的基础上进行改造,不需要很多的工作量就可以进行组网.那么操作...

隗利禄3039LoRa模块低功耗模式是怎样实现的? -
刁婕山18545517308 ______ 一种基于Lora无线模块的低功耗无线网络的实现方法,该无线网络由发送源及多个节点组成,每一个Lora无线模块自行维护一个计时器,节点进入休眠模式时,计时器开始计时;到达计时器预设时间后,节点被唤醒并进入CAD检测模式;节点在CAD模式下检测信号,如果检测到信号则进入工作模式,执行下一步,如果没有信号则进入休眠模式;节点根据接收到的数据判断出该信号是否是发给自己的,如果是则进入正常数据接收模式,完成与发送源的数据交互;否则,节点重新设置计时器的休眠时间后,进入休眠模式.本发明利用Lora无线模块CAD模式下能耗低的特点,对接收到的数据进行判断分析来切换工作状态,从而实现低功耗的目的.

隗利禄3039LoRa网关一般有哪些接口 -
刁婕山18545517308 ______ 南京仁珏LORA网关GW1 提供RJ45接口,POE供电;外部天线接口有4G天线接口,LORA天线接口.

隗利禄3039致远电子LoRa组网透传模块支持几种协议标准? -
刁婕山18545517308 ______ 四信LoRa模块传输距离远,传输可靠(2-11.5km),抗干扰能力强,运用新型扩频技术,内嵌自组网透明传输协议、抄表协议(水表、气表、热表),还针对LoRa联盟集成了CLAA协议和LoRaWAN协议.

隗利禄3039lora比ZigBee相比有哪些优点 -
刁婕山18545517308 ______ Yooooo,题主好啊.Lora相对Zigbee而言的话,优点就是功耗低、传输距离广、信号穿透性强、灵敏度高.大多数协议或多或少依赖无线网格(mesh)组网,有些依赖整体系统来达到合理地传输距离,不过这无法使用电池供电.LoRa采用点对点通信方式,实现远距离传输的目的,我们无需网格化网络.实际上,我们需要一个“轻量级”协议,适用于长期以电池供电的方式.这个协议就是OpenRF协议.

隗利禄3039LoRa与NB - IoT有什么区别
刁婕山18545517308 ______ NB-IoT方面,运营商比较有话语权,他们代建网络,业主不需要考虑基站部署很省心,但网络质量取决于运营商,业主无法控制,而且数据必须经过运营商,业主需要和运营商对接获取经营数据,保密性存在问题,运营数据也不可控.另一方面,NB-IoT基于国内现成的基站进行改造即可,构建网络非常容易.LoRa就正好相反,业主(企业)可以自主把控网络质量,对于网络覆盖可快速优化补充;还可以自主运营,把运营数据掌握在自己手中,根据业务需要扩展网络,特别自由.不过,LoRa基站建设比较糟心,要为基站选址、供电,还有很多麻烦事.

隗利禄3039LoRa模块具有哪些优势? -
刁婕山18545517308 ______ 四信 LoRa模块 F8L10D具有长距离通信,低功耗,高灵敏度,组网容量大、组网灵活、低成本,易嵌入、接口全,二次开发方等优点.

隗利禄3039如何评价LoRa这项应用于低功率长距离场景的物联网传输技术
刁婕山18545517308 ______ 低功耗,远距离,有非常广泛应用.如智慧农业、工厂自动化制造生产、智能电表、智能建筑等等.(1)频段LoRa工作在Sub-1G频段.多是企业们以LoRa联盟的形式联合在一起,共商共建,无需申请便可以建立网络设备.相对来说,不仅网络...

隗利禄3039lora上行链路和下行链路的区别 -
刁婕山18545517308 ______ 上行链路:LoRa终端设备实时(需要根据当地射频法规,比如美国的FCC标准,包括信道占用时间、发射功率等,就需要按照要求,不能实时发送数据了)发送数据,LoRa网关设备解析转发数据,所有范围内的基站均能收到此数据包,即广播发送;下行链路:LoRa网关设备发送数据,LoRa终端分时接收数据,根据LoRa协议1.0规定,终端设备可工作在CLASS A/B/C三种模式,区别在于接收数据的时间窗口大小不同,A最小,B次之,C最大,但是依然是半双工模式,即发送数据的时候不能接收数据,A,B,C的功耗也依次递增.可以实现单播数据帧.如果不考虑协议规定,则任何时候可收发数据,只需考虑半双工模式即可

(编辑:自媒体)
关于我们 | 客户服务 | 服务条款 | 联系我们 | 免责声明 | 网站地图 @ 白云都 2024