10 分钟快速上手 MixedRealityCompanionKit:搭建第一个 HoloLens 伴随开发环境【免费下载链接】MixedRealityCompanionKitThis is a MixedRealityToolkit style repository for code bits and components that may not run directly on Microsoft HoloLens or immersive headsets but instead pair with them to build experiences.项目地址: https://gitcode.com/gh_mirrors/mi/MixedRealityCompanionKitMixedRealityCompanionKit是一套面向 HoloLens 的伴随开发工具包它汇集了一批“不直接运行在 HoloLens 上、而是在 PC 端与之配对”的组件帮你完成设备管理、远程全息渲染、实时画面串流、CAD 模型导入等 HoloLens 伴随开发任务。本文以仓库中的 Windows Mixed Reality Commander 为切入点带你用 10 分钟搭建一个可用的 HoloLens 伴随开发环境。 首先认识它MixedRealityCompanionKit 的六大核心能力MixedRealityCompanionKit 采用类似 MixedRealityToolkit 的仓库组织方式把“伴随端”代码集中存放每个模块都可独立构建能力模块目录一句话说明设备伴随管理HoloLensCommander/批量注册管理 HoloLens/Windows PC 设备运行与安装应用全息远程渲染RemotingHostSample/桌面 PC 渲染全息内容实时串流到 HoloLens瞳距自动测量KinectIPD/用 Kinect 测量用户 IPD 并写入 HoloLens低延迟远程观看MixedRemoteViewCompositor/约 150ms 延迟在 PC 上观看 HoloLens 混合现实画面第三方视角SpectatorView/外接相机高清晰度拍摄全息内容CAD 资产自动化Bundler/自动把 CAD 模型转换为 Unity AssetBundle仓库还包含RealtimeStreaming/客户端/服务器实时视频串流、PosterCalibrationSample/全息内容对齐实体海报与UnityScriptAnalyzer/Visual Studio 的 Unity 脚本分析扩展等实用组件根目录 README.md 有完整导航。 准备工作HoloLens 伴随开发环境三件套清单一台Windows 10 开发电脑x86 或 x64Visual Studio 2017Community 版即可 Windows 10 SDK一台开启开发者模式并启用Windows Device Portal的 HoloLens且与电脑处于同一 Wi-Fi 小提示HoloLens 的 IP 地址在“设置 网络与 Internet Wi-Fi”中查看作为伴随设备的 Windows PC 则在“更新与安全 面向开发人员”中查看。 第一步克隆仓库并打开项目在终端中执行git clone https://gitcode.com/gh_mirrors/mi/MixedRealityCompanionKit克隆完成后仓库根目录下可以看到 HoloLensCommander、Bundler、SpectatorView、RemotingHostSample 等模块目录。本快速上手只需要关注HoloLensCommander/。⭐ 第二步5 分钟构建伴随应用 Windows Mixed Reality Commander在仓库所有组件中Windows Mixed Reality Commander对新手最友好也最能体现“伴随开发”思想在 PC 上运行它即可远程管理多台 HoloLens 设备——注册设备、运行应用、安装/卸载、混合现实截取甚至重启设备。构建与运行步骤用 Visual Studio 2017 打开解决方案HoloLensCommander/HoloLensCommander.sln按 CtrlShiftB 构建然后将项目部署到电脑它是通用 Windows 平台应用启动后先点击Set Credentials按钮设置 Device Portal 的默认登录凭据点击Register输入 HoloLens 的 IP 地址完成设备注册在列表中选中设备用左侧面板运行、安装、卸载应用或开始Mixed Reality Capture截取注册成功后列表会显示每台设备的电量、IP 地址和 IPD瞳距数值点击铅笔图标还能直接修改 IPD 第三步按需扩展伴随能力——其余组件速览1️⃣ 全息远程渲染RemotingHostSample想让 PC“重渲染”、HoloLens 只负责显示和输入看这里。RemotingHostSample/提供桌面、UWP、UWP XAML 三种示例HoloLens 上运行官方 Remoting Player 应用后PC 端宿主建立连接、渲染全息内容并实时回传。打开RemotingHostSample/RemotingHostSample.sln填入 HoloLens IP 后按 F5 即可体验。2️⃣ 瞳距自动测量KinectIPDKinectIPD/是为演示、展会等高人流场景设计的亭式工具把 Kinect 2.0 接入 PC 后它会自动发现人脸、提取眼部特征、计算 IPD并可自动写入 HoloLens省去每个人手动调试的麻烦。3️⃣ CAD 模型自动化BundlerBundler/是一条实验性的自动化流水线把 CAD 文件放进监视目录基于 3ds Max 的处理服务会自动抽稀成多级 LOD 并生成 Unity AssetBundleHoloLens 端的 Asset Viewer 直接下载显示。生成的包可通过 Device Portal 的文件管理器上传到设备⚠️ 注意Bundler 依赖 Autodesk 3ds Max 2017最低支持 2015与 Windows 10 / Windows Server 2016、32GB 以上内存的环境建议使用专用机器运行。4️⃣ 实时视频串流RealtimeStreamingRealtimeStreaming/基于 Media Foundation 构建 TCP 实时视频串流框架客户端与服务端分工明确HoloLens 端 Unity 工程负责解码渲染。下面的架构图清晰展示了 C 核心与 Unity 互操作层的分层关系仓库附带 WPF 示例服务器设置端口、分辨率后点击 Start Server 即可开始向 HoloLens 推流5️⃣ 低延迟远程观看MixedRemoteViewCompositorMixedRemoteViewCompositor/提供两种模式低延迟约 150ms混合现实截取MRC伴随观看以及保持 HoloLens 满帧率的完整合成方案。编译Source/目录下的 C 源码后生成的 DLL 会自动复制到示例 Unity 工程的插件目录6️⃣ 全息海报对齐PosterCalibrationSamplePosterCalibrationSample/解决“如何把全息内容对齐到现实物体”的问题在场景中张贴一张校准海报如示例海报Unity 应用通过 C/OpenCV 插件识别海报位置将全息内容锚定到现实世界非常适合团队协作与多设备统一空间。⚠️ 常见坑HoloLens 伴随环境连接不上的 3 个原因Device Portal 未启用或未配对——先在 Commander 中设置默认凭据再注册若在 Windows PC 上启用 Device Portal必须重启电脑后生效。网络不通——HoloLens 与 PC 必须在同一 Wi-Fi 下如果在 Commander 里指定了新的 SSID 而电脑无法访问该网络设备会变得不可达。IP 或端口填写错误——HoloLens 查“设置 网络与 Internet Wi-Fi”伴随 Windows PC 需要 IP 端口默认 50443。 收尾10 分钟回顾克隆了 MixedRealityCompanionKit 仓库认识了六大伴随能力构建了 Windows Mixed Reality Commander注册了第一台 HoloLens 设备掌握了 RemotingHostSample、KinectIPD、Bundler、RealtimeStreaming 等模块的定位下一步建议按模块深入阅读HoloLensCommander/README.md了解 Commander 全部功能、RemotingHostSample/README.md了解远程渲染细节、RealtimeStreaming/README.md了解串流架构。另外注意SpectatorView/为旧版本实现新版 Spectator View 代码已迁移至独立的 SpectatorView 仓库历史版本可在LegacySpectatorView/中查阅。【免费下载链接】MixedRealityCompanionKitThis is a MixedRealityToolkit style repository for code bits and components that may not run directly on Microsoft HoloLens or immersive headsets but instead pair with them to build experiences.项目地址: https://gitcode.com/gh_mirrors/mi/MixedRealityCompanionKit创作声明：本文部分内容由AI辅助生成（AIGC），仅供参考