一种基于HoloLens的存储和匹配系统及方法与流程

计算;推算;计数设备的制造及其应用技术一种基于hololens的存储和匹配系统及方法技术领域1.本发明涉及3d数据存储和分析技术领域，具体是指一种基于hololens的存储和匹配系统及方法。背景技术：2.3d是指三维、三个维度、三个坐标，即有长、有宽、有高，换句话说，就是立体的，是相对于只有长和宽的平面(2d)而言的。经过多年的快速发展与广泛应用，近年3d技术得到了显著的成熟与普及，一个以3d取代2d、“立体”取代“平面”，而3d家具就是其中之一。3.以往我们购买家具必须到家具卖场现场考查，并根据家具的风格和尺寸来考虑是否适合自家的居室，不仅要花费很多时间，而且买回去后也许才发现大小不合适，或者和居室整体风格不搭配。但自从3d家具出现以后，我们只需要在互联网上操作即可，我们可以先选择好与自家居室相似的3d户型，然后再将喜欢的3d家具模型用鼠标拖到户型中，就可以知道这款家具究竟适不适合买回家了，既省时又省力。4.但3d家具是一个新兴的领域，传统的家具涉及到的很多数据，比如产品原材料、厂家信息、尺寸信息，这些数据在互联网都是以图片和文字的形式表现的，对用户来说很难有直观的认识。技术实现要素：5.本发明为了解决上述的各种问题，提供了一种基于hololens的3d大数据智能存储和匹配系统及方法，其直观的为用户展现家具产品的每一个细节。6.为解决上述技术问题，本发明提供的技术方案为：一种基于hololens的存储和匹配系统及方法，包括以下具体操作步骤：7.步骤一：在后台服务器上为每一个产品建立数据库；8.步骤二：在用户通过hololens浏览产品信息的时候，通过网站logo与hololens匹配，使得hololens进入工作模式；9.步骤三：实时捕捉用户手势，结合正在浏览的产品，分析出用户感兴趣的内容；10.步骤四：将分析出的用户感兴趣的内容发送到后台服务器；11.步骤五：后台服务器从数据库中调取相应的数据反馈给hololens，hololens为用户展示他们想要的内容；12.步骤六：用户可以选择虚拟现实模式，将家具实际摆放家庭中的位置来查看效果；13.步骤七：在用户通过hololens与后台服务器交互的过程中，后台服务器会记录用户的每一个交互行为，与原有的产品数据之间建立映射关系，通过智能算法为用户推荐其可能感兴趣的相关产品。14.优选的，步骤一中，数据库的存储包括原材料数据、厂家数据、3d数据。15.优选的，步骤七中，在为用户展示感兴趣的内容时，还根据需要为用户展示原材料产地，及与其他原材料相比的优缺点。16.优选的，步骤七中，智能算法为协同过滤推荐算法。17.优选的，步骤三中，实时捕捉用户手势具体为：映射并计算位于指向动作所指向位置的目标物品,进行一系列迭代中目标区域根据检测出的指向动作的方向而以固定系数扩大或缩小或位移，达到锁定目标的目的。18.本发明与现有技术相比的优点在于：在3d家具这个领域，实现了产品的大数据智能存储和匹配功能；且能给用户以直观的效果感受，能帮助用户更好的选择自己想要的家具风格，以及和自家整体装修相配的家具；并可提供给用户家具的相关价格、材质、品牌等基本信息，并将各个价格、材质和品牌等信息作出比较，供用户直观看到，达到最好的性价比。附图说明19.本发明的上述和/或附加的方面和优点从结合下面附图对实施例的描述中将变得明显和容易理解，其中：20.图1是本发明的操作步骤系统框图。21.图2是本发明的hololens的定位与三维重建系统框图。具体实施方式22.下面详细描述本技术的实施例，实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本技术，而不能理解为对本技术的限制。23.结合附图1，一种基于hololens的存储和匹配系统及方法，包括以下具体操作步骤：24.步骤一：在后台服务器上为每一个产品建立数据库，其存储包括原材料数据、厂家数据、3d数据；25.步骤二：在用户通过hololens浏览产品信息的时候，通过网站logo与hololens匹配，使得hololens进入工作模式；26.步骤三：实时捕捉用户手势，结合正在浏览的产品，分析出用户感兴趣的内容；27.步骤四：将分析出的用户感兴趣的内容发送到后台服务器；28.步骤五：后台服务器从数据库中调取相应的数据反馈给hololens，hololens为用户展示他们想要的内容；29.步骤六：用户可以选择虚拟现实模式，将家具实际摆放家庭中的位置来查看效果；30.步骤七：在用户通过hololens与后台服务器交互的过程中，后台服务器会记录用户的每一个交互行为，与原有的产品数据之间建立映射关系，通过智能算法为用户推荐其可能感兴趣的相关产品。31.步骤七中，在为用户展示感兴趣的内容时，还根据需要为用户展示原材料产地，及与其他原材料相比的优缺点。32.步骤七中，智能算法为协同过滤推荐算法。33.具体的，还可利用基于内容的推荐算法或混合推荐算法来替代。34.步骤三中，实时捕捉用户手势具体为：映射并计算位于指向动作所指向位置的目标物品,进行一系列迭代中目标区域根据检测出的指向动作的方向而以固定系数扩大或缩小或位移，达到锁定目标的目的。35.结合附图2，对于hololens的原理如下：36.hololens能把全息影像和真实环境杂糅在一起，使全息影像像真实物体一样摆放在一个固定位置，并且能像真实物体在视觉上一样近大远小、相互遮挡，让人感觉全息影像就是真实世界的一部分。而要实现这些功能，hololens需要判断全息影像相对于自身以及现实空间的相对位置，这就面临着两个问题：我在哪(定位)和我周围有什么(三维环境重建)。定位与三维重建问题，其实就是slam问题。37.slam中传统的获取深度的方法主要有三种：38.一、基于视差原理的双目视觉方法；39.二、将光通过编码的方式射出打在物体上，由于编码光打在不同物体上的畸变程度不同，从而推断出物体立体信息的结构光方法；40.三、通过对光发射到物体表面并反射回来的时间差计算出物体距离的tof(time-of-flight)方法。41.hololens使用环境感知摄像头捕获真实环境图像并从中提取特征点，之后匹配相邻帧图像的特征点，通过特征点相对位置的变化来反向推出hololens转动的角度和产生的位移，从而计算出hololens的运动。42.由于采用单目视觉或者双目视觉来获取场景每个像素点的深度信息的计算量相当大，并不能在较短的时间内完成，会直接影响hololens的三维重建的实时性，所以hololens另配有深度摄像头(景深摄像头)。hololens的深度头是基于tof原理，可通过计算从投射红外线脉冲到其反射回来的时间与光速的乘积直接获得场景的深度信息。43.在深度相机采集的深度信息后，hololens利用的是richard newcombe发明的kinect fusion理论来对真实环境进行三维重建。kinect fusion的原理为利用深度相机采集的深度信息对三维重建的刻画，可以类比为雕塑，对一个完整的立方体利用其深度信息进行不断的雕刻完善。通过在不同角度获取的深度信息，在不同的角度雕刻立方体使之成为我们想要的样子，完成三维重建。44.三维重建的步骤如下：45.一、将景深摄像头采集的深度信息转换为三维点云，并计算每一个点的法向量；46.二、hololens的定位定姿；kinect fusion算法是通过计算当前三维点云和和由现有模型生成的预测三维点云进行icp匹配，从而得到当前位姿；hololens的深度摄像头是基于tof原理的，其采集的深度信息精度并不高，若是由此来计算hololens位置会使得误差较大，可能会导致全息影像不能稳定的固定在空间中；故hololens使用更为准确的环境感知摄像头来定位，imu中的陀螺仪来定姿，完成这个步骤；47.三、将点云数据依据hololens位姿融合到场景的三维模型中；48.四、利用光线投影算法根据当前帧hololens位姿和现有模型预测当前帧对应的环境点云，并将其提供给步骤二进行icp匹配。49.以上对本发明及其实施方式进行了描述，这种描述没有限制性，附图中所示的也只是本发明的实施方式之一，实际的结构并不局限于此。总而言之如果本领域的普通技术人员受其启示，在不脱离本发明创造宗旨的情况下，不经创造性的设计出与该技术方案相似的结构方式及实施例，均应属于本发明的保护范围。









图片声明：本站部分配图来自人工智能系统AI生成,觅知网授权图片,PxHere摄影无版权图库。本站只作为美观性配图使用,无任何非法侵犯第三方意图,一切解释权归图片著作权方,本站不承担任何责任。如有恶意碰瓷者,必当奉陪到底严惩不贷!




内容声明：本文中引用的各种信息及资料（包括但不限于文字、数据、图表及超链接等）均来源于该信息及资料的相关主体（包括但不限于公司、媒体、协会等机构）的官方网站或公开发表的信息。部分内容参考包括:(百度百科,百度知道,头条百科,中国民法典,刑法,牛津词典,新华词典,汉语词典,国家院校,科普平台)等数据,内容仅供参考使用,不准确地方联系删除处理！本站为非盈利性质站点,发布内容不收取任何费用也不接任何广告!




免责声明：我们致力于保护作者版权，注重分享，被刊用文章因无法核实真实出处，未能及时与作者取得联系，或有版权异议的，请联系管理员，我们会立即处理，本文部分文字与图片资源来自于网络，部分文章是来自自研大数据AI进行生成,内容摘自(百度百科,百度知道,头条百科,中国民法典,刑法,牛津词典,新华词典,汉语词典,国家院校,科普平台)等数据,内容仅供学习参考,不准确地方联系删除处理!的,若有来源标注错误或侵犯了您的合法权益，请立即通知我们，情况属实，我们会第一时间予以删除，并同时向您表示歉意,谢谢!