当前位置:首页 > 芯闻号 > 美通社全球TMT
[导读]北京2026年5月6日 /美通社/ -- 全球领先的市场研究公司益普索近日发布合成数据增强技术解决方案,通过与斯坦福大学合作自主研发的表格扩散模型与SURE四维评估框架,帮助品牌在样本量不足、细分群体数据稀缺的场景下,依然获得可靠的数据洞察,驱动更明智的商业决策。 合成数据增强...

北京2026年5月6日 /美通社/ -- 全球领先的市场研究公司益普索近日发布合成数据增强技术解决方案,通过与斯坦福大学合作自主研发的表格扩散模型与SURE四维评估框架,帮助品牌在样本量不足、细分群体数据稀缺的场景下,依然获得可靠的数据洞察,驱动更明智的商业决策。

合成数据增强,简单来说,就是通过学习原始数据的内在规律,生成新的"虚拟样本",从而扩大数据量、增强分析能力。这项技术正在成为益普索市场研究实践的重要组成部分——尤其是在样本量不足、细分群体数据稀缺的场景下。

一个形象的比喻:一个学生收到了一份来源不明的复习资料,他不知道这份资料内容是否准确(质量未经检验),不知道具体考试题目(具体应用场景),却声称"这份资料能让我成绩提高10%"——这听起来是不是很离谱?

更值得关注的是:如果将合成数据简单等同于真实独立样本进行统计检验(业界称之为"天真检验"),错误率可能高达75%-80%。这意味着品牌有极大的概率基于虚假的"显著结论"做出错误决策,损失可能远超节省的调研成本。

益普索三大核心能力构建技术壁垒

一、独家表格扩散模型:站在学术前沿

传统合成数据多采用生成对抗模型(GAN),但在处理复杂的表格型市场研究数据时存在明显局限。

益普索携手业界与学界伙伴——包括与斯坦福大学持续合作——已研发出更适用市场研究数据的新技术,即益普索表格扩散模型(Ipsos Tabular Diffusion。同时,我们构建了用于评估数据质量四维完整性框架SURE,并打造了益普索合成数据工作平台,使这些方法得以应用于日常运营,实现数据增强能力的标准化与产品化。

益普索的测试结果表明,使用该模型生成的合成样本更真实、可靠,代表性强,既保留了真实数据的整体趋势,还可有效还原样本的稀有分布特征。

益普索合成数据增强:深入探讨市场研究中合成数据的应用边界及质量控制


二、SURE四维评估框架:让每一步都有实证支撑

合成数据仅"看起来像"真实数据是不够的,更需要在实际应用中体现价值。益普索自主研发的SURE四维评估框架,从以下四个核心维度进行系统性评估:

S — Statistical Similarity(统计相似性)

合成数据在统计意义上是否忠实于原始真实数据?我们采用Jensen-Shannon散度、主成分分析(PCA)、核密度估计(KDE)等系列技术,从全局和关键决策维度进行多层次比对验证。高保真度意味着:如果原始真实数据存在某种规律,合成数据也会捕捉到这一规律。

U — Utility(效用性)

合成数据是否真正有用?基于统计学原理,用数学公式计算真实数据集本来有多少信息,再测算我们生成的合成数据含有多少真正新增的有用信息。并通过等效样本量(ESS)评估确保统计推断的正确性。这一步至关重要:它能识别出"看起来不错"但实际上信息含量极低的合成数据,避免品牌基于虚假显著性做出错误决策。

R — Rarity & Novelty(稀有性与新颖性)

合成数据的核心价值在于"生成真实中存在但样本未覆盖的新组合",而非简单复制已有样本。通过样本间距离分析、最近邻冗余检查、覆盖率指标等方法,来量化合成数据的信息拓展范围。通过分布熵与潜在空间弥散度来量化多样性,确保模型生成的是对现实的拓展,而非简单复刻。

E — Expert Validation(专家验证)

即使所有统计指标都通过,合成数据仍需经过领域专家的"人工检验"。专家负责判断:数据和由此得出的洞察,在现实中是否可信、合乎情理且具备可行性。这一步是机器无法替代的人类智慧,确保合成数据能通过真实世界的检验。

益普索合成数据增强:深入探讨市场研究中合成数据的应用边界及质量控制


三、专业合成数据工作台:标准化与产品化的完美结合

为保障数据合成的质量与稳定性,益普索自主研发了合成数据工作台(The Ipsos Synthetic Data Workbench),将前沿技术与标准化流程深度整合。

核心功能包括:

  • 针对规则化问卷结构设计的专属生成方法
  • 能够融合多源关联数据集的先进技术
  • 适用于小样本的轻量化快速学习模型
  • 确保输出自洽性的通用插补方案

同时,工作台内置完整的数据清洗与优化工具包,包括变量格式标准化、逻辑矛盾修正、异常值处理、子群平衡加权、特征优化等,确保训练模型的数据集具有最佳结构和最强代表性。

"我们不做空泛的效果承诺。合成数据不是万能的,但用对了确实很强大。我们的职责是帮助客户明确:何时合成数据真正产生价值,在何时并无助益。这是对客户负责,也是对行业负责。"

合成数据增强:审慎,透明、以实证为基

益普索在长期实践中总结出以下关键结论:

关于训练数据量:

训练数据集需至少包含300-500个样本,才能得到可靠的增强数据。若低于这一阈值,建模误差可能超过抽样误差本身,合成数据反而可能引入更多不确定性。在这种情况下,传统的加权或插补方法反而更可靠。

关于有效样本量:

1000个真实样本加500个合成样本,其有效样本量并非1500个,而是介于1000与1500之间。这是因为合成数据违反了传统统计检验中"独立、等概率抽样"的前提,每个合成样本都源自基于原始数据训练的模型,而非完全独立的观测。

益普索在实际合成数据操作中,采用以下四个结合了SURE框架的步骤:

01数据评估——该数据适用于合成吗?在建模前,评估数据的适用性、质量与代表性;

02数据准备——清洗、对齐、优化。统一数据格式,解决不一致性,确保数据达到可直接建模的状态;

03数据建模与生成。应用扩散模型合成与符合SURE标准的数据增强算法;

04数据验证与完整性检查。依据SURE框架的保真度、效用性与风险标准对合成数据输出进行检测,以确认其稳健性。

益普索倡导人类智能(HI)与人工智能(AI)的独特融合,以此驱动创新,为客户提供具有深远影响力、以人为本的洞察。这一理念深深融入其所有的人工智能解决方案中,其中也包括合成数据增强技术。通过HI与AI的有机结合,益普索为客户提供更安全、更快速并且扎根人类情境的深度洞察,创造相关性与价值。

本站声明: 本文章由作者或相关机构授权发布,目的在于传递更多信息,并不代表本站赞同其观点,本站亦不保证或承诺内容真实性等。需要转载请联系该专栏作者,如若文章内容侵犯您的权益,请及时联系本站删除( 邮箱:macysun@21ic.com )。
换一批
延伸阅读

May 7, 2026 ---- 根据TrendForce集邦咨询最新晶圆代工产业研究,全球成熟制程面临供给与需求格局转变,不仅八英寸产能利用率与代工价格已止跌回升,十二英寸成熟制程也有望因TSMC规划减产而带动转单,且...

关键字: 晶圆代工 AI IC

May 6, 2026 ---- 根据TrendForce集邦咨询最新AI产业研究,由于多数北美主要云端服务供应商(CSP)近日再度上修2026年资本支出指引,以回应强劲的AI需求,TrendForce集邦咨询上调全年美...

关键字: AI 数据中心 谷歌

在芯片设计行业中,IP核(IP Core)或称硅IP、半导体IP或设计IP是指预先设计的、经充分验证和可重复使用的电路单元的源代码或者功能块(或称内核),芯片设计公司从IP提供商购买相关IP产品后,由设计师将其集成在整个...

关键字: 半导体 IP SoC

依托德国足球培训计划与朱拉隆功大学奖学金,赋能泰国青少年体育梦想 曼谷2026年5月6日 /美通社/ -- 泰国领先的数字基础设施服务提供商AIS资讯服务有限公司(Advanced Info Service Publi...

关键字: AI SPORT ACAD 生态系统

明尼苏达州梅普尔格罗夫, May 05, 2026 (GLOBE NEWSWIRE) -- EarthDaily Analytics (简称“EarthDaily”) 今日宣布,六颗 EarthDaily Conste...

关键字: 卫星 HD AI COM

明尼苏达州梅普尔格罗夫, May 06, 2026 (GLOBE NEWSWIRE) -- EarthDaily Analytics (EarthDaily) 今日宣布,该公司已中标美国国家侦察局 (NRO) 项目,将...

关键字: 光学 HD AI COM

春节过后,全球半导体行业展会密集启幕。华兴万邦先后实地走访德国2026嵌入式世界展(EW26)、巴塞罗那世界移动通信大会(MWC)、2026玄铁RISC-V生态大会、第十四届电子信息博览会(CITE 2026)、香港春季...

关键字: AI SoC RISC-V

营业收益同比增长是营业收入同比增长的2倍

关键字: AI 数据中心 半导体

英飞凌发布2026财年第二季度运营成果:增长前景乐观,上调全年业绩指引。AI 热潮持续增强。汽车业务订单回暖。自第四季度起启用调整后的事业部架构

关键字: AI 数据中心 电源
关闭