摘要：本申请公开了一种用于气质美学设计咨询 的全息增强现实系统。该系统包括头戴式显示 器，用于将光投射到所述用户的眼睛中，所述显 示器的一部分是透明的并且在所述用户穿戴着 所述头戴式显示设备时被设置在所述用户的眼 睛前方的一位置处，使得所述透明部分将来自所 述用户和
发明专利名称
用于气质美学设计咨询的全息增强现实系统
(57)摘要
本申请公开了一种用于气质美学设计咨询 的全息增强现实系统。该系统包括头戴式显示 器，用于将光投射到所述用户的眼睛中，所述显 示器的一部分是透明的并且在所述用户穿戴着 所述头戴式显示设备时被设置在所述用户的眼 睛前方的一位置处，使得所述透明部分将来自所 述用户和所述头戴式显示器的前方的环境的一 部分的光透射到所述用户的眼睛，以提供所述用 户和所述头戴式显示器的前方的所述的所述一 部分的视图；用户传感器，用于为感测所述用户； 环境传感器，用于感测所述用户的周围环境；处 理电子设备，与所述显示器、所述用户传感器以 及所述环境传感器通信。本申请解决了美容咨询 用户体验不佳的技术问题。通过本申请提高美容 方案和建议的准确性、实时性。
1.一种用于气质美学设计咨询的全息增强现实系统，其特征在于，用于将光投射到用
户的眼睛以在所述用户的视野中显示增强现实图像内容，所述系统包括：
头戴式显示器，用于将光投射到所述用户的眼睛中，所述显示器的一部分是透明的并 且在所述用户穿戴着头戴式显示设备时被设置在所述用户的眼睛前方的一位置处，使得所 述透明部分将来自所述用户和所述头戴式显示器的前方的环境的一部分的光透射到所述 用户的眼睛，以提供所述用户和所述头戴式显示器的前方的一部分的视图；
用户传感器，用于为感测所述用户；
环境传感器，用于感测所述用户的周围环境；
处理电子设备，与所述显示器、所述用户传感器以及所述环境传感器通信，所述处理电 子设备用于：
分析多个图像中的美容咨询者；
分析多个图像中的咨询属性；
基于所识别的咨询属性为检测到的美容咨询者选择类别；
基于类别选择动作，以使所选择的动作被执行；
所述分析多个图像中的美容咨询者包括：分析所述多个图像中的美容咨询者的生理数 据、皮肤数据、健康数据；
所述美容咨询者选择类别包括：美容方案咨询、美容建议咨询、美容效果咨询；
所述所选择的动作包括：生成打印美容建议，显示播放美容前后效果对比、生成美容方 案报告。
2.根据权利要求1所述的增强现实系统，其特征在于，所述环境传感器包括深度传感 器、地理定位传感器、接近传感器或GPS。
3.根据权利要求1所述的增强现实系统，其特征在于，所述用户传感器包括一个或多个 相机。
4.根据权利要求1所述的增强现实系统，其特征在于，所述处理电子设备还用于，确定 用户意图，并基于感测到增加的美容咨询而改变对所述用户的视野内的真实或虚拟对象的 用户感知。
5.根据权利要求1所述的增强现实系统，其特征在于，还包括：远程数据储存库。
6.根据权利要求1所述的增强现实系统，其特征在于，所述处理电子设备还用于， 接收传感器收集数据；
将所述数据应用于初始美容咨询方案预测模型；
继续从一个或多个传感器收集附加数据；
基于所述附加数据更新初始预测模型以产生修订的美容咨询方案预测模型。
7.根据权利要求1所述的增强现实系统，其特征在于，所述环境传感器在使用时，光源 被配置成发射多个波长的光，其中，所述系统被配置成基于所述用户的要成像的特征来改 变所发射的波长。
8.根据权利要求1所述的增强现实系统，其特征在于，所述头戴式显示器是光纤扫描显 示器，所述光纤扫描显示器包括光纤，所述光纤被配置成图样投射光，以在所述用户的眼睛 中形成图像。
9.根据权利要求1所述的增强现实系统，其特征在于，所述头戴式显示器包括：在用户
佩戴的头盔中提供的并且配置为用户能够在接收远程诊疗的同时观看到的平视显示器。
10.根据权利要求1所述的增强现实系统，其特征在于，所述头戴式显示器包括：在用户 佩戴的护目镜中提供的并且配置为用户能够在接收远程诊疗的同时观看到的平视显示器。
用于气质美学设计咨询的全息增强现实系统
技术领域
[0001] 本申请涉及增强现实、医疗美容领域，具体而言，涉及一种用于气质美学设计咨询 的全息增强现实系统。
背景技术
[0002] 美容咨询，是指通过与美容师进行沟通诊疗的过程。
[0003] 发明人发现，美容咨询大多基于沟通内容，无法根据咨询者的实际需求提供美容 方案或建议。
[0004] 针对相关技术中美容咨询用户体验不佳的问题，目前尚未提出有效的解决方案。
发明内容
[0005] 本申请的主要目的在于提供一种用于气质美学设计咨询的全息增强现实系统，以 解决美容咨询用户体验不佳的问题。
[0006] 为了实现上述目的，根据本申请的一个方面，提供了一种用于气质美学设计咨询 的全息增强现实系统，用于将光投射到用户的眼睛以在所述用户的视野中显示增强现实图 像内容，。
[0007] 根据本申请的用于气质美学设计咨询的全息增强现实系统包括：头戴式显示器， 用于将光投射到所述用户的眼睛中，所述显示器的一部分是透明的并且在所述用户穿戴着 所述头戴式显示设备时被设置在所述用户的眼睛前方的一位置处，使得所述透明部分将来 自所述用户和所述头戴式显示器的前方的环境的一部分的光透射到所述用户的眼睛，以提 供所述用户和所述头戴式显示器的前方的所述的所述一部分的视图；用户传感器，用于为 感测所述用户；环境传感器，用于感测所述用户的周围环境；处理电子设备，与所述显示器、 所述用户传感器以及所述环境传感器通信，所述处理电子设备用于：分析多个图像中的美 容咨询者；分析多个图像中的咨询属性；基于所识别的咨询属性为检测到的美容咨询者选 择类别；基于类别选择动作，以使所选择的动作被执行。
[0008] 进一步地，所述环境传感器包括深度传感器、地理定位传感器、接近传感器或GPS。
[0009] 进一步地，所述用户传感器包括一个或多个相机。
[0010] 进一步地，所述处理电子设备还用于，确定对所述情况的用户意图，并基于感测到 增加的美容咨询而改变对所述用户的视野内的所述真实或虚拟对象的用户感知。
[0011] 进一步地，系统还包括：远程数据储存库， [0012] 进一步地，所述处理电子设备还用于，
[0013] 接收传感器收集数据；
[0014] 将所述数据应用于初始美容咨询方案预测模型；
[0015] 继续从所述一个或多个传感器收集附加数据；
[0016] 基于所述附加数据更新所述初始预测模型以产生修订的美容咨询方案预测模型。
[0017] 进一步地，所述环境传感器在使用时，光源被配置成发射多个波长的光，其中，所
述系统被配置成基于所述用户的要成像的特征来改变所发射的波长。
[0018] 进一步地，所述头戴式显示器是光纤扫描显示器，所述光纤扫描显示器包括光纤， 所述光纤被配置成图样投射光，以在所述用户的眼睛中形成图像。
[0019] 进一步地，所述头戴式显示器包括：在用户佩戴的头盔中提供的并且配置为用户 能够在接收远程诊疗的同时观看到的平视显示器。
[0020] 进一步地，所述头戴式显示器包括：在用户佩戴的护目镜中提供的并且配置为用 户能够在接收远程诊疗的同时观看到的平视显示器。
[0021] 在本申请实施例中用于气质美学设计咨询的全息增强现实系统，用于将光投射到 用户的眼睛以在所述用户的视野中显示增强现实图像内容，采用头戴式显示器、用户传感 器、环境传感器、处理电子设备的方式，通过分析多个图像中的美容咨询者；分析多个图像 中的咨询属性；基于所识别的咨询属性为检测到的美容咨询者选择类别；基于类别选择动 作，以使所选择的动作被执行，达到了提高美容方案和建议准确性的目的，从而实现了美容 咨询时的沉浸感的技术效果，进而解决了美容咨询用户体验不佳的技术问题。
附图说明
[0022] 构成本申请的一部分的附图用来提供对本申请的进一步理解，使得本申请的其它 特征、目的和优点变得更明显。本申请的示意性实施例附图及其说明用于解释本申请，并不 构成对本申请的不当限定。在附图中：
[0023] 图1是根据本申请实施例的用于气质美学设计咨询的全息增强现实系统结构示意 图；
[0024] 图2是根据本申请实施例的用于气质美学设计咨询的全息增强现实系统中处理电 子设备处理流程示意图；
[0025] 图3是根据本申请实施例的用于气质美学设计咨询的全息增强现实系统中处理电 子设备处理流程示意图。
具体实施方式
[0026] 为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的 附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是 本申请一部分的实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人 员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本申请保护的范 围。
[0027] 需要说明的是，本申请的说明书和权利要求书及上述附图中的术语“第一”、“第 二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用 的数据在适当情况下可以互换，以便这里描述的本申请的实施例。此外，术语“包括”和“具 有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的 过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清 楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
[0028] 在本申请中，术语“上”、“下”、“左”、“右”、“前”、“后”、“顶”、“底”、“内”、“外”、 “中”、“竖直”、“水平”、“横向”、“纵向”等指示的方位或位置关系为基于附图所示的方位或
位置关系。这些术语主要是为了更好地描述本申请及其实施例，并非用于限定所指示的装 置、元件或组成部分必须具有特定方位，或以特定方位进行构造和操作。
[0029] 并且，上述部分术语除了可以用于表示方位或位置关系以外，还可能用于表示其 他含义，例如术语“上”在某些情况下也可能用于表示某种依附关系或连接关系。对于本领 域普通技术人员而言，可以根据具体情况理解这些术语在本申请中的具体含义。
[0030] 此外，术语“安装”、“设置”、“设有”、“连接”、“相连”、“套接”应做广义理解。例如， 可以是固定连接，可拆卸连接，或整体式构造；可以是机械连接，或电连接；可以是直接相 连，或者是通过中间媒介间接相连，又或者是两个装置、元件或组成部分之间内部的连通。 对于本领域普通技术人员而言，可以根据具体情况理解上述术语在本申请中的具体含义。
[0031] 需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相 互组合。下面将参考附图并结合实施例来详细说明本申请。
[0032] 如图1所示，用于气质美学设计咨询的全息增强现实系统，用于将光投射到用户 110的眼睛以在所述用户的视野中显示增强现实图像内容，所述系统包括：头戴式显示器 100，用于将光投射到所述用户的眼睛中，所述显示器的一部分是透明的并且在所述用户穿 戴着所述头戴式显示设备时被设置在所述用户的眼睛前方的一位置处，使得所述透明部分 将来自所述用户和所述头戴式显示器的前方的环境的一部分的光透射到所述用户的眼睛， 以提供所述用户和所述头戴式显示器的前方的所述的所述一部分的视图；用户传感器200， 用于为感测所述用户；环境传感器300，用于感测所述用户的周围环境；处理电子设备400， 与所述显示器、所述用户传感器以及所述环境传感器通信，所述处理电子设备用于：
[0033] 步骤S102，分析多个图像中的美容咨询者；
[0034] 步骤S104，分析多个图像中的咨询属性；
[0035] 步骤S106，基于所识别的咨询属性为检测到的美容咨询者选择类别；
[0036] 步骤S108，基于类别选择动作，以使所选择的动作被执行。
[0037] 具体地，在所述处理电子设备400中通过分析所述多个图像中的美容咨询者的生 理数据、皮肤数据、健康数据等，分析出多个图像中的咨询属性，并根据所述所识别的咨询 属性为检测到的美容咨询者选择类别，所述美容咨询者选择类别可以包括：美容方案咨询、 美容建议咨询、美容效果咨询等。基于所述美容咨询者选择的类别选择对应的动作，从而使 得所选择的动作被执行。比如，生成打印美容建议，显示播放美容前后效果对比、生成美容 方案报告等。
[0038] 具体地，所述头戴式显示器100，用于将光投射到所述用户的眼睛中，所述显示器 的一部分是透明的并且在所述用户穿戴着所述头戴式显示设备时被设置在所述用户的眼 睛前方的一位置处，使得所述透明部分将来自所述用户和所述头戴式显示器的前方的环境 的一部分的光透射到所述用户的眼睛，以提供所述用户和所述头戴式显示器的前方的所述 的所述一部分的视图。
[0039] 在本申请实施例中的用于气质美学设计咨询的全息增强现实系统，可以被配置为 帮助美容咨询师进行工作。头戴式显示器采用增强现实系统可以向用户或观看者显示虚拟 内容，同时仍然允许用户看到其周围的世界。优选地，该内容在头戴式显示器上显示，头戴 式显示器将图像信息投射到用户的眼睛。另外，显示器还可以将来自周围环境的光透射到 用户的眼睛，以允许观察该周围环境。
[0040] 当通过头戴式显示器的透明元件直接观看外部世界时，佩戴着头戴式增强现实显 示器的人具有视野，头戴式显示器中的增强现实系统还可以另外向佩戴着头戴式显示器的 用户呈现图像，例如通过将来自调制光源的光投射到用户的眼睛中。这些图像可以被称为 “虚拟”图像，因为这些“虚拟”图像是由显示器产生的，而不是来自外部世界中的对象的光。
[0041] 具体地，用户传感器200，可以被配置为检测关于用户的数据。通过存储与传递给 用户的增强现实内容相关和/或表征该增强现实内容的数据。
[0042] 具体地，环境传感器300，可以被配置为收集关于用户外部的参数的数据。可以检 测用户周围的世界的对象、刺激物、人、动物、位置或其它方面。比如，环境传感器30可以包 括一个或多个相机、高度计、气压计、化学传感器、湿度传感器、温度传感器、外部麦克风、光 传感器、定时装置(例如，时钟或日历)，或其任何组合或子组合。又比如，环境传感300可以 被配置为测量环境的环境光。
[0043] 从以上的描述中，可以看出，本申请实现了如下技术效果：
[0044] 在本申请实施例中，用于将光投射到用户的眼睛以在所述用户的视野中显示增强 现实图像内容，采用头戴式显示器、用户传感器、环境传感器、处理电子设备的方式，通过分 析多个图像中的美容咨询者；分析多个图像中的咨询属性；基于所识别的咨询属性为检测 到的美容咨询者选择类别；基于类别选择动作，以使所选择的动作被执行，达到了提高美容 方案和建议准确性的目的，从而实现了美容咨询时的沉浸感的技术效果，进而解决了美容 咨询用户体验不佳的技术问题。
[0045] 根据本申请实施例，作为本实施例中的优选，该方法包括：所述环境传感器包括深 度传感器、地理定位传感器、接近传感器或GPS。
[0046] 根据本申请实施例，作为本实施例中的优选，该方法包括：所述用户传感器包括一 个或多个相机。
[0047] 根据本申请实施例，作为本实施例中的优选，所述处理电子设备还用于，确定对所 述情况的用户意图，并基于感测到增加的美容咨询而改变对所述用户的视野内的所述真实 或虚拟对象的用户感知。
[0048] 根据本申请实施例，作为本实施例中的优选，系统还包括：远程数据储存库， [0049] 根据本申请实施例，作为本实施例中的优选，所述处理电子设备还用于，
[0050] 步骤S202，接收传感器收集数据；
[0051] 步骤S204，将所述数据应用于初始美容咨询方案预测模型；
[0052] 步骤S206，继续从所述一个或多个传感器收集附加数据；
[0053] 步骤S208，基于所述附加数据更新所述初始预测模型以产生修订的美容咨询方案 预测模型。
[0054] 具体地，可以使用各种传感器技术检测用户对象。例如，可以使用计算机视觉技术 检测对象。例如，显示设备可以分析由面向外的成像系统获取的图像以执行场景重建、事件 检测、视频跟踪、对象识别、对象姿势估计、学习、索引、运动估计或图像恢复等。根据所述数 据应用于初始美容咨询方案预测模型。所述初始美容咨询方案预测模型主要是对初次提取 的数据建立美容方案的预测模型。接着，根据继续从所述一个或多个传感器收集附加数据， 根据收集附加数据更新所述初始预测模型以产生修订的美容咨询方案预测模型，包括但不 限于，输出利用叠加功能比较面部轮廓前后变化；输出皮肤状态、面部泛红及色素沉着前后
变化；输出图表确认体表皮肤分层检测结果前后变化；输出历史记录观察皮肤前后变化。
[0055] 根据本申请实施例，作为本实施例中的优选，所述环境传感器在使用时，光源被配 置成发射多个波长的光，其中，所述系统被配置成基于所述用户的要成像的特征来改变所 发射的波长。
[0056] 具体地，不停的波长于所述用户的要成像的特征来改变所发射的波长，比如，针对 不同皮肤分层反射不同的波长。
[0057] 优选地，所述头戴式显示器是光纤扫描显示器，所述光纤扫描显示器包括光纤，所 述光纤被配置成图样投射光，以在所述用户的眼睛中形成图像。
[0058] 优选地，所述头戴式显示器包括：在用户佩戴的头盔中提供的并且配置为用户能 够在接收远程诊疗的同时观看到的平视显示器。即用户通过佩戴头盔并且使得患者提供接 收远程诊疗的同时观看到的平视显示器。
[0059] 优选地，所述头戴式显示器包括：在用户佩戴的护目镜中提供的并且配置为用户 能够在接收远程诊疗的同时观看到的平视显示器。即用户通过护目镜并且使得患者能够在 接收远程诊疗的同时观看到的平视显示器。
[0060] 显然，本领域的技术人员应该明白，上述的本申请的各模块或各步骤可以用通用 的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成 的网络上，可选地，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储 在存储装置中由计算装置来执行，或者将它们分别制作成各个集成电路模块，或者将它们 中的多个模块或步骤制作成单个集成电路模块来实现。这样，本申请不限制于任何特定的 硬件和软件结合。
[0061] 以上所述仅为本申请的优选实施例而已，并不用于限制本申请，对于本领域的技 术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原则之内，所作的任何修 改、等同替换、改进等，均应包含在本申请的保护范围之内。
图1
图2
图3
来源：小美爱说事
