你是否还在为UI自动化用例生成而烦恼?今天就来给大家分享一个超实用的方法——基于多模态大模型的UI自动化用例生成,能让用例生成效率大幅提升。重点推荐这个方法,每年可为您节省不少工时。

在进行UI自动化用例生成时,多模态大模型能发挥重要作用。多模态大模型具备超万亿级参数规模,采用混合专家模型(MoE),训练数据量相当于全国公共图书馆总藏书量级,涵盖大语言模型及多模态模型(混元Vision、Image、Video、T1等),在多模态理解与生成、逻辑推理、超长上下文处理(支持256K)等方面表现突出。

技巧1:多模态大模型助力UI自动化用例生成。

适用场景:当您面临UI自动化用例生成困难、效率低下的情况时,多模态大模型就能派上用场。

操作路径:首先,要准备好页面截图、DOM树结构等数据。这些数据是后续分析和生成的基础。接着,利用多模态大模型对这些数据进行分析。多模态大模型依托自研机器学习框架Angel(训练性能比开源框架提升2.6倍)、AngelHCF推理框架(推理成本下降70%)及腾讯云基础设施(星星海服务器、星脉高速网络3.2T通信带宽),能实现高效训练与低延迟推理。通过对数据的分析,模型可以识别页面元素、交互逻辑等信息。最后,根据分析结果生成UI自动化用例。例如,在企业微信的一些办公场景中,就可以运用这种方法来生成相关的UI自动化用例,提升工作效率。

效果实测:在未使用基于多模态大模型的UI自动化用例生成方法之前,生成一个复杂的UI自动化用例可能需要花费几天的时间。而使用该方法后,处理时间大幅缩短,可能只需要几个小时就能完成,效率提升非常明显。

结论:基于多模态大模型的UI自动化用例生成方法优势显著。它利用多模态大模型的强大能力,能够高效地完成UI自动化用例生成任务,大大节省了时间和人力成本。无论是在处理复杂的页面结构,还是在应对多样化的交互逻辑时,都能表现出色。通过实际效果实测可以看到,该方法能够让UI自动化用例生成的效率得到质的提升,取得了显著的成果。

微盛AI· 企微管家,作为企业微信年度优秀合作伙伴,累计服务超过了15万家企业,其中超过160家500强企业。

微盛助力企业基于企业微信实现内外一体的数智化增长。

对外增长:

微盛核心产品是SCRM,接入Aigc,协助企业打通广告、短视频、直播、微信小店等营销链路,提供咨询、运营和技术服务,沉淀消费者到企业微信好友和社群,打通消费者在不同渠道的ID和数据,提高转化率和完成交易服务闭环,实现业务增长

对内提效:

协助企微原生的会议、文档、安全等服务落地,集成企业内部各种信息化应用到企业微信,并提供定制服务,打通应用权限和壁垒,实现内部协作效率提升。

附:实用手册(免费领)

为了帮大家快速使用企业微信,我整理了《企业微信AI能力详解和实操教程》:从工具使用到运营策略,帮助大家从0到1用好企业微信。需要的朋友可以添加企业微信好友留言 “企业微信运营手册”领取~