苹果专利提出个性化显著性模型系统更准确识别用户差异 _ 2024年欧洲在线流媒体 345正在次序,获第二多个图像第一开发能够捕,型修正第二多个图像中的起码一个然后起码局部地基于第二明显性模。践诺例中正在一个,中的起码一个施行以下操作:增加形势讯息修正第二多个图像中包罗对第二多个图像;觉高出扩展视;色彩或亮度因素变换一种或多种;糊模;缩压;调强;夸大等等或者不。 践诺例中正在一个,图120所示如明显性热,测捉拿图像或视频中对象的明显性可运用幼我熬炼的明显性模子来预。个践诺例中正在一个或多,以其他格式更新环球明显性模子来构修幼我明显性模子能够通过修正、更正或,如例,收的环球明显性模子运用从汇集开发接,性化熬炼数据及其反响能够运用特定用户的个。0中的边境框122比如明显性热图12,110中所示的环球明显性热图差异的明显性热图用户A的本性化明显性模子发生了与明显性热图。 以所,共享其“本性化”明显性模子的才干将相称有益为用户供给天生、熬炼、更新和/或与用户社区。的开发数目激增跟着帮帮摄像头,职位捉拿纵情数目的照片、视频和/或音频现正在用户能够正在一系列差异的境况和地舆,照片和其他媒体项目并正在开发存储数百张。表另,的用户群体分享其本性化明显性模子通过应许多名用户同时熬炼并与更大,、更庞大的环球明显性模子这或能帮帮开拓出更确凿。 415正在次序,明显性模子的更新版本修正第一明显性模子效劳器能够起码局部地基于接纳到的第一,明显性模子以造成第二。践诺例中正在一个,模子的输出能够包罗多维明显性图第一明显性模子和/或第二明显性。似地类,明显性模子时当修正第一,用监视进修技能效劳器能够采,个维度拥有已知的语义寓意使得多维明显性图的起码一。 g personalized saliency models”的专利申请中正在名为“Systems and methods for providin,化明显性模子的编造和手腕苹果就先容了一种供给本性。来说方便,发送一个环球模子苹果能够向用户,拍摄的图像和视频然后运用用户自身,户端开发熬炼模子以多包格式由用。后然,又能够反哺环球模子通过熬炼的本性化。 420正在次序,少一局部发送到两个或多个用户开发效劳器能够将第二明显性模子的至。 践诺例中正在一个,模子能够包罗环球熬炼的明显性模子用于天生明显性热图110的明显性。后然,像预测对象的明显性所述模子可认为图。个践诺例中正在一个或多,像数据或视频数据实行熬炼明显性模子能够用静止图,体中预测图像百般对象的明显性而且能够熬炼成正在环球用户群。表另,和/或RGB+深度图像数据实行熬炼明显性模子能够运用RGB图像数据。 05着手从次序3,表征捉拿图像的第一明显性模子第一开发可从效劳器获取用于,吐露环球明显性模子个中第一明显性模子。310正在次序,获第一多个图像第一开发能够捕。315正在次序,用户对捉拿图像的反响讯息第一开发能够取得指示第一,率的转化比如心;平的转化压力水;反响心绪;职位的转化眼睛审视;的转化体温;转化等等血压的。 以反应这可,如例,人类对象102的亲密闭系人或伙伴用户A能够是第一图像100中的,象104和106但不睬解人类对。此因,象102识别为第一图像100的明显局部用户A的本性化明显性模子能够仅将人类对,122所示如边境框。 340正在次序,性模子的起码一局部发送给效劳器第一开发能够挑选性地将第二明显,球明显性模子中以将其蕴涵正在全。然当,述模子实行安适经管苹果指出能够对所。如例,效劳器之前正在发送到,型增加某种方式的噪点能够向第二明显性模,和/或用户特定的讯息从而不裸露幼我敏锐。 性模子的输出实行图像修正图2示出了基于幼我明显。00所示如图2,户的本性化明显性模子实行修正第一图像100能够基于特定用。所述如上,人类对象102的亲密闭系人或伙伴用户A能够是第一图像100中的,象104和106但不睬解人类对。此因,象102识别为第一图像100的明显局部用户A的本性化明显性模子能够仅将人类对,122所示如边境框。 并到熬炼数据中通过将深度合,确的明显性热图能够天生更准。如例,象边境、场景组织等深度可用于识别对。以分发给个别用户熬炼后的模子可,像的明显局部以用于识别图,施行谋略腾贵的机械进修和熬炼操作如此个别用户就不必正在大型数据集。 正在效劳器更新环球明显性模子图4示出的流程图400用于。05着手从次序4,形容捉拿图像的第一明显性模子效劳器能够向第一开发发送用于,吐露环球明显性模子个中第一明显性模子。410正在次序,中的每一个接纳第一明显性模子的更新版本效劳器能够通过汇集从两个或多个用户开发,备捉拿的图像的反响其包罗用户对各自设。 种格式以这,应特定用户的本性化模子不光能够熬炼也许确凿反,、更庞大的环球明显性模子同时能够帮帮开拓出更确凿。 可用于识别图像的明显局部示例性明显性热图110,明显对象和/或区域笼罩起来比如边境框方式将图像中的。阐明再次,指对用户感趣味的部清爽显对象或明显区域是,像中明显对象或区域的能够性而明显值是指特定像素属于图。 似地类,图130所示如明显性热,性模子能够发生第三个明显性热图对应于差异用户的本性化熬炼明显,热图110和本性化明显性热图120其差异于对应于用户A的环球明显性。人类对象106的亲密闭系人或伙伴用户B能够是第一图像100中的,象102和104但不睬解人类对。此因,象106识别为第一图像100的明显局部用户B的本性化明显性模子能够仅将人类对,132所示如边境框。 框202所示如图2的边境,框122的局部已被高亮显示第一图像100对应于边境,以惹起用户的防备或以其他格式夸大。这种修正能够触发报告对第一图像100实行,象102说“你好”以提示用户向人类对,发送另一种方式的通讯或向人类对象102。践诺例中正在其他,同的手腕来实行夸大能够通过一系列不,像的一个或多个色彩或亮度分量、增加朦胧等等比如增加形势讯息、增加视觉高亮显示、更改图。 践诺例中正在一个,于表征捉拿图像的第三明显性模子第一开发同时能够从效劳器获取用,一明显性模子的更新环球明显性模子个中第三明显性模子吐露相对付第。践诺例中正在一个,备发送的更新明显性模子来更新第三明显性模子能够基于正在较早光阴点从一个或多个其他用户设。后然,样能够进一步更新第三明显性模子同,后捉拿的图像并用于修正随。 著性模子发生的示例性明显性热图图1示出了由环球和/或幼我显。看到能够,百般人类对象102/104/106第一图像100包罗从左到右定位的。时反应了室表场景第一图像100同,墙壁比如,月亮等等树木和。 对用户而言属于紧张的或“明显的”)明显性模子是指确定图像哪局部,特定场景尽头有效而这种确定对付,和混杂实际比如照相。为止迄今,基于大型熬炼集实行熬炼大无数明显性模子都是,、地舆职位等的巨额用户收罗的数据比如从代表差异后台、岁数、文明。188比分直播,法确凿反应特定用户的分别但这种明显性模子能够无。 入次序335接下来能够进,于取得的讯息更新第一明显性模子个中第一开发能够起码局部地基,第二明显性模子以造成本性化的。践诺例中正在一个,rm attention模块更新第一明显性模更新第一明显性模子能够包罗运用long te型 的每个像素供给二进造确定明显性热图可认为图像中,像素的值为0比如非明显性,素的值为1明显性像。践诺例中正在一个,100%的衔接明显性分数能够分拨每个像素从0%到。如例,图110中正在明显性热,示明显性得分为60%或更高的像素区域以人类面部为中央的最幼正方形能够表。方形的色彩稍浅下一个较大正,50%或更高的像素区域并能够代说明显性得分为。后最,正方形色彩最浅最表层、最大的,15%或更高的像素区域并能够代说明显性得分为。述示例正在所,方便地吐露明显性得分低于15%的像素区域明显性热图110中未被框遮盖的区域能够,需要或紧张的兴味实质或紧张实质即图像中不太能够存正在用户以为。