Facebook软件测试新招:用AI模拟多用户行为,接入真实后端代码

智东西
优质科技领域创作者  来自北京

编 | 温淑

智东西1月14日消息,近日,Facebook公司研究团队设计出一款用户社区网络模拟器,可以模拟真实用户在平台中的交互行为,比如模拟恶意用户试图骗取目标用户的照片、敏感信息等。

通过一系列模拟结果,研究人员可以及时发现和解决漏洞,维护系统安全,提升用户体验。

这项研究已经发表在Facebook Research网站上,论文题目为《WES:真实设施中基于Agent的用户交互仿真(WES:Agent-based User Interaction Simulation on Real Infrastructure)》。

区块链2020白皮书:资本回归理性,金融、互联网、物流抢着用 | 智东西内参

一、更真实的软件测试方法:WES技术,多代理模拟用户交互

在推出产品更新之前,软件公司要进行大量的测试。传统的测试方法是推出测试版本,观察单个用户的使用情况,以此检查用户体验、产品响应情况等。这些方法能满足正常体量公司的测试需求,但对于脸书这样拥有25亿用户的巨头来说就不够了。

据统计,Facebook平台上25%的问题是在用户交互的时候出现的,在单个用户使用时很难暴露出来。

为了解决这一问题,Facebook研究人员利用网络模拟技术(WES,Web-Enabled Simulation),设计出一个虚拟的用户社区WW,让WW直接与Facebook平台进行交互。

WES是一种基于多代理方法模仿用户行为的技术,可以同时模拟成百上千个用户在不同场景下的行为,有助于工程师在部署更新时发现和解决漏洞。

把WES比做一个游戏,代理就像是游戏中的不同玩家。代理各自以不同“玩法”模拟用户行为,比如从基于规则的系统中直接获取行为模式、通过学习获取行为模式、在受到示例监督的情况下模拟,在不受监督的深度学习环境下模拟等等。

WES模型有以下4个特点:

1、训练机器人,培养行为偏好

最简单的情况下,机器人只能探索软件平台,从预定义的一组操作和观察中随机选择。经过训练后,它们可以表现出不同的行为偏好。更智能的机器人会调用算法或机器学习模型做决策。研究人员也可以对机器人建模,使它们协同完成某个任务。

2、机器人与真实用户之间有隔离

机器人程序必须适当地与真实用户隔离,以免其与真实用户之间发生意外交互。这种隔离可以通过平台的“沙盒(sandbox)”副本实现,也可以通过约束实现,比如部署平台自己的隐私机制。

区块链2020白皮书:资本回归理性,金融、互联网、物流抢着用 | 智东西内参

▲WES系统的基础设施。真用户与机器人在同一个平台上,但它们之间有一个概念上的隔离层

3、可通过自动机制为未来版本提前建模

在推出新的隐私机制之前,WES可被用于测试用户对新机制的反应。可以调整机器人与底层平台的交互机制,为即将推出的机制建模。

该模型不需要实现所有的细节,通过设定参数还可以进行A/B测试,为工程师探索未来版本提供了一种灵活的方法。

4、模拟社交测试,反映社交错误

机器人进行交互能反映出潜在的社交错误。为了使这些社交错误更容易被找到,研究人员会进行分层测试。

二、(半)自动探索平台,还能反馈最佳方案

利用WES技术,研究人员搭建了能(半)自动探索Facebook平台的WW模型。

系统设计上,WW由两个总体子系统构成,分别是通用框架类(general framework classes)和每个用例类(per-use-case classes)。前者是仿真平台的核心,对每个用例保持不变;后者会对每个用例进行定制。

区块链2020白皮书:资本回归理性,金融、互联网、物流抢着用 | 智东西内参

▲系统设计

采用强化学习算法(Reinforcement Learning)训练机器人的模拟行为,使其拥有不同行为偏好。

区块链2020白皮书:资本回归理性,金融、互联网、物流抢着用 | 智东西内参

▲强化学习

为了避免机器人与真实用户发生交互,研究人员直接调用了Facebook后端代码。WW模型与底层平台被设计为各自独立,平台不受WW模型的控制。

也就是说,研究人员可以修复WW模型发现的漏洞,但WW本身无法修改平台代码。

另外,平台拥有更高的权限。WW不能决定平台的行为,但平台可以选择终止模拟,或为不同的模拟分配不同的资源。数据库中心的社交图也在不断变化。

当模拟场景结束后,WW模型会自动调整不同的参数,比如机器人的隐私设置或对他们行为的约束。每次调整后,WW会评估哪种参数组合能到达最理想的社区行为,然后向开发者推荐最佳版本。

三、更有效暴露安全问题

测试时发现和修补漏洞这一步做得越好,更新后软件的安全度就越高。相比于传统的单元测试或端到端测试,用WW模型发现漏洞的可操作性更高。

首先,WW是与真实用户相互隔离的。研究人员可以训练它来执行潜在的隐私侵犯行为,而不用担心真实用户受到影响。

其次,WW与Facebook的真实后端代码进行交互,暴露出的漏洞很可能也会对真实用户造成威胁。

另外,WW发现不良行为后,还能利用自动机制设计方法设计解决方法,为研究人员提供参考。

因此,可以说WW为开发人员提供了一种在新的抽象级别上进行测试的选择。

区块链2020白皮书:资本回归理性,金融、互联网、物流抢着用 | 智东西内参

结语:WW模型能发现更多漏洞,提升平台安全性

脸书研究人员设计的用户社区网络模拟器可以更有效地发现软件的漏洞,有较好的可靠性、完整性和隐私性。

在论文中,研究人员还列出了一系列留待解决的问题,表示将进行更深一步的研究。通过未来的改进,WW模型的性能还将提高,为用户带来更好的使用体验。

打开APP阅读更多精彩内容

资讯网商城网站建设流程推广营销一般多少钱网站设计策划网站网站建设的介绍商丘市网站建设交通设施起名算命先生准的绿松石店铺起名seo优化适合你梦婷名字解释和意思和寓意给女生起名字姓苏特工绍特电影天堂德国主帅弱点 电影天堂周公解梦是真是假长沙网络seo优化排名传媒公司 起名大全我想起个名字啊国内周易起中国周易起名网夏邑县简介成都精品网站建设胡萝卜品牌起名陈杰艺术签名大门起名网站设计网络创新珠宝seo 深圳山区适合种植什么果树三国演义读后感500字校园名字怎么起名字少年生前被连续抽血16次?多部门介入两大学生合买彩票中奖一人不认账让美丽中国“从细节出发”淀粉肠小王子日销售额涨超10倍高中生被打伤下体休学 邯郸通报单亲妈妈陷入热恋 14岁儿子报警何赛飞追着代拍打雅江山火三名扑火人员牺牲系谣言张家界的山上“长”满了韩国人?男孩8年未见母亲被告知被遗忘中国拥有亿元资产的家庭达13.3万户19岁小伙救下5人后溺亡 多方发声315晚会后胖东来又人满为患了张立群任西安交通大学校长“重生之我在北大当嫡校长”男子被猫抓伤后确诊“猫抓病”测试车高速逃费 小米:已补缴周杰伦一审败诉网易网友洛杉矶偶遇贾玲今日春分倪萍分享减重40斤方法七年后宇文玥被薅头发捞上岸许家印被限制高消费萧美琴窜访捷克 外交部回应联合利华开始重组专访95后高颜值猪保姆胖东来员工每周单休无小长假男子被流浪猫绊倒 投喂者赔24万小米汽车超级工厂正式揭幕黑马情侣提车了西双版纳热带植物园回应蜉蝣大爆发当地回应沈阳致3死车祸车主疑毒驾恒大被罚41.75亿到底怎么缴妈妈回应孩子在校撞护栏坠楼外国人感慨凌晨的中国很安全杨倩无缘巴黎奥运校方回应护栏损坏小学生课间坠楼房客欠租失踪 房东直发愁专家建议不必谈骨泥色变王树国卸任西安交大校长 师生送别手机成瘾是影响睡眠质量重要因素国产伟哥去年销售近13亿阿根廷将发行1万与2万面值的纸币兔狲“狲大娘”因病死亡遭遇山火的松茸之乡“开封王婆”爆火:促成四五十对奥巴马现身唐宁街 黑色着装引猜测考生莫言也上北大硕士复试名单了德国打算提及普京时仅用姓名天水麻辣烫把捣辣椒大爷累坏了

资讯网 XML地图 TXT地图 虚拟主机 SEO 网站制作 网站优化