清华系多模态大模子公司成都汽车第三方调研公司，又拿钱了！

生数科技，师出清华朱军团队，是国内最早布局多模态大模子的团队之一。

市集音讯传来，这家公司刚刚完成新一轮数亿元融资。本轮融资由启明创投领投，达泰本钱、鸿福厚德、智谱AI、老鞭策BV百度风投和卓源亚洲继续跟投。

生数方面的说法是，本轮融资将主要用于多模态基础大模子的迭代研发、诈欺家具窜改及市集拓展。

此前，生数依然在文生图、文生3D模子、文生视频方面都有磋议后果对外释出。

2022年9月，生数科技独创成员就建议了基于Transformer的网罗架构U-ViT，这与Sora和Stable Diffusion3背后经受的Diffusion Transformer架构DiT，在架构念念路与实验旅途上透顶一致。

对此，生数科技CEO唐家渝示意：

咱们累积了完竣高效的工程化教唆，领有在大限度GPU集群上竣事高效兼容、低成本的模子检修教唆，合座上来讲，咱们追逐Sora笃定比追逐GPT-4节略许多。

本年一定能达到Sora目下版块的效果，很难说是三个月如故半年（笑），但这件事咱们的信心还口角常足的。

2022年已建议类DiT架构U-ViT

在扩散模子方面，生数科技团队是国内最初开启该标的磋议的团队，后果波及主干网罗、高速推理算法、大限度检修等全栈技巧标的。

2022年9月，生数独创成员建议了基于Transformer的网罗架构U-ViT时，U-ViT就在千万至数亿参数目级范围内考证了极强的可彭胀性（scaling up）。

这项责任在CVPR 2023发表，早于DiT。

2023年3月，团队又开源了大家首个基于Diffusion Transformer架构（U-ViT）的多模态扩散大模子UniDiffuser，在参数目和检修数据限度上与Stable Diffusion径直对皆。

从架构上来看，UniDiffuser比最近公开论文的Stable Diffusion3（经受DiT架构）特出了一年。

此外，除了单向的文生图除外，Unidiffuser援助更通用的图文任务，玩忽竣事图生文、图文结伙生成、图文改写等多种功能。

抓续进行Scale up

在结伙化架构的念念路下，生数科技抓续进行Scale up。

在图文模子的检修中，其模子参数目从最早开源版的1B不休彭胀至3B、7B、10B及以上，使得模子在好意思学性、多元作风、语义衔尾等方面竣事快速健硕的擢升。

同期在此基础上，通过拓展空间维度和时候维度，徐徐竣事3D生成和视频生成模子的检修。

依托底层U-ViT架构的窜改尝试，限度2023年9月，生数科技推出了基于结伙的多模态多任务框架的产业级通用基础大模子（闭源版），全链路自主检修、自主研发，青岛物业神秘顾客在图像生成、3D生成、视频生成等多项任务中位居前方。

目下的后果是，生数的3D生成，依然可竣事高精度与最快10秒级的模子生成。

此外，生数团队还推出大家首个4D动画生成、可控3D场景裁剪等责任。

而视频生成方面，也已竣事短视频的裁剪与生成智商，在画面好意思不雅度、连贯性方面竣事了破裂。

近期将要点破裂长视频生成智商

在营业化落处所面，依托于MaaS（模子即干事）智商，生数科技在2B、2C端同期发力。

一方面以API的形式向B端机构径直提供模子智商，另一方面打造垂类诈欺家具，按照订阅等形式收费。

目下公司已与多家游戏公司、个东说念主结尾厂商、互联网平台等B端机构开展配合，绽开模子干事，提供AIGC个性化体验、定制化试验分娩等方面的智商。

客岁，面向艺术规划、游戏制作、影视动画、草率文娱等创意边界，生数科技上线了两款器用家具：

视觉创意规划平台PixWeaver

3D钞票创建器用VoxCraft

而学术层面上，团队于ICML、NeurIPS、ICLR等东说念主工智能顶会发表接洽论文近30篇，其中建议的免检修推理算法Analytic-DPM、DPM-Solver等破裂性后果，得到ICLR了得论文奖，并被OpenAI、苹果、Stability.ai等机构经受，并被DALL·E 2、Stable Diffusion等花样经受。

那么，接下来的路是什么？

谈到对异日的计较，生数科技恒久坚抓“原生多模态”标的。

一边，是对家具端抓续迭代；

另一边，则是在基础模子层面抓续优化，主若是擢升语义衔尾、可控性、好意思不雅度方面的生奏效果。

其实，Sora出现前，生数里面主要聚焦于短视频，但当今公司会干涉更多资源在长视频上，架构、数据使用调优方面，团队依然作念过不少探索，也踩过许多坑（许多当今都依然料理了）。

但OpenAI砸大钱捧出一个Sora，考证了这条路的正确性，也撤销了团队的许多畏惧，“目下的视频生成长度在4-5秒傍边，咱们近期将要点破裂长视频生成智商……尤其长视频画面的连贯性，咱们还在作念一系列攻克责任”。

— 完 —成都汽车第三方调研公司