Hololens là gì

Thành viên nghệ thuật của Microsoft - Alex Kipman đeo mô hình HoloLens 2, một tai nghe năng lượng điện toán ba chiều tất cả cảm biến. Ảnh: Microsoft.

Bạn đang xem: Hololens là gì

Lần đầu khi mọi người đeo HoloLens 2 bên trên đầu, đồ vật sẽ tự động nhận biết chúng: sản phẩm công nghệ đo phần nhiều thứ từ hình dạng đúng chuẩn của bàn tay đến khoảng chừng cách chính xác giữa hai mắt.

Jamie Shotton, một đối tác doanh nghiệp là bên khoa học dẫn đầu nhóm nghiên cứu HoloLens kỹ thuật tại Cambridge, vương quốc Anh đến biết, các phân tích trí tuệ nhân tạo và trở nên tân tiến kích hoạt những năng lực “phiền phức xứng đáng kinh ngạc”, nhưng quan trọng đặc biệt là tạo nên trải nghiệm sử dụng những thiết bị “bản năng”.

Shotton nói: “Chúng tôi ý muốn bạn biết phương pháp sử dụng HoloLens mà không cần phải được dạy cách sử dụng nó. Cửa hàng chúng tôi biết cách tương tác với mọi thứ trong trái đất thực tế, vật dụng chất: shop chúng tôi lựa chọn các vật, thừa nhận nút, và chỉ còn rõ các đồ vật. Shop chúng tôi nhắm mang đến càng nhiều càng tốt, nhằm chuyển điều này trực tiếp thành hiện nay hỗn hợp.”

Microsoft ra mắt HoloLens 2 hiện đang rất được giao đến khách hàng. Tai nghe năng lượng điện toán bố chiều có cảm biến sử dụng AI để cố thế không gian và thời gian, tạo ra một thực tiễn hỗn hòa hợp giữa bé người, vị trí và hầu hết thứ để tạo điều kiện cho trong những xung lực cơ bản nhất của bé người: bàn bạc kiến ​​thức.

Thành viên kỹ thuật của Microsoft - Alex Kipman cho thấy thêm tai nghe xác minh watermark cao nhất của những thiết bị cạnh xuất sắc - công nghệ có khả năng AI có thể thu thập và cách xử lý dữ liệu trong cả khi không có kết nối internet an toàn và tin cậy - và sau đó có thể share một số hoặc toàn bộ dữ liệu đó với intelligent cloud khi kết nối.

Gần đây, Kipman vẫn phác thảo một sơ đồ tổ chức cơ cấu điện toán phổ biến này trên một bảng trắng hiện đại số trong văn phòng và công sở của mình.

Theo ông, “HoloLens là thiết bị phiên bản địa thứ nhất được phát minh ra từ đầu với quả đât quan này.”

Sự phối hợp của AI vào HoloLens 2 với các kỹ năng AI của Azure, gốc rễ điện toán đám mây của Microsoft, được cho phép những người làm việc trực tiếp, học hỏi những kỹ năng nâng cấp sự nghiệp của họ và giúp mọi fan ở phía đối diện Trái đất nói theo một cách khác các ngôn ngữ khác biệt để hợp tác và ký kết với ý thức chia sẻ về sự hiện diện vật lý.

Julia White, Phó chủ tịch tập đoàn tiếp thị Azure của Microsoft cho biết: “Bạn có thể làm đa số điều đích thực thú vị với HoloLens với cloud. Nhưng khi chúng ta thấy hai điều này kết hợp với nhau, nó sẽ chuyển đổi cuộc chơi theo mọi gì mọi fan thực sự rất có thể làm.”

Cung cấp thực tế hỗn phù hợp với AI

Để kích hoạt những tương tác theo phiên bản năng cùng với HoloLens 2, Shotton và những đồng nghiệp của anh ấy đã phát triển, giảng dạy và thực hiện các quy mô AI trên đồ vật theo dõi vận động tay và góc nhìn của mọi tín đồ để họ có thể cảm nhận thấy hình bố chiều nổi trước phương diện họ cùng vươn tay ra để chuyển đổi kích thước hoặc định vị lại nó.

Để xây dựng khối hệ thống theo dõi tay, nhóm nghiên cứu và phân tích đã gây ra một giàn cùng vòm camera hướng về phía trong mà họ đã áp dụng để ghi lại một loạt tay fan khác nhau. Sau đó, đội đã thực hiện xử lý đám mây ngoại đường để xây dựng quy mô 3D có tác dụng đại diện cho toàn bộ các bản thiết kế và hoạt động của bàn tay bé người.

Từ quy mô 3D này, team đã hoàn toàn có thể sử dụng đồ gia dụng họa máy tính để hiển thị hình ảnh thực tế, tổng hợp của bàn tay cùng rất nhãn tổng hợp để gia công cho mô hình khỏe khoắn qua nhiều hình dạng, bốn thế và vận động khác nhau.

Shotton nói rằng: “Bạn rất có thể tạo ra số lượng dữ liệu đào tạo giới hạn max một cách hiệu quả.”

Nhóm nghiên cứu và phân tích đã sử dụng tài liệu này để huấn luyện một mạng lưới nơ ron chặt chẽ, một một số loại thuật toán AI, tương xứng với bộ xử lý trên bo mạch HoloLens, với chạy tác dụng trên mọi khung người đến từ cảm ứng độ sâu của thiết bị.

Khi một quý khách mới áp dụng HoloLens 2, hệ thống sẽ sử dụng mạng thần ghê này để giúp điều chỉnh quy mô 3D được cá nhân hóa đến tay khách hàng, chất nhận được theo dõi thiết yếu xác quan trọng để có thể chấp nhận được tương tác theo bạn dạng năng với hình cha chiều.

Nhóm của Shotton đã triển khai một biện pháp tiếp cận tương tự để thành lập và huấn luyện quy mô theo dõi mắt, chăm chú đến khoảng cách giữa những mắt, hoặc khoảng cách giữa vai trung phong của con ngươi, khác biệt giữa mọi bạn và tác động đến cách một người nhìn sát hoặc xa các đối tượng.

Kết trái là một quy mô theo dõi bằng mắt chất nhận được HoloLens 2 hiển thị đúng chuẩn hình cha chiều trước mặt người tiêu dùng để shop và thao tác thủ công bằng tay và mắt.

Shotton nói rằng: “Nếu không tồn tại tính năng theo dõi bởi mắt, bài toán sắp xếp các hình tía chiều vào thế giới thực - đặc biệt là bàn tay đồ gia dụng lý của bạn - sẽ không thể tại mức độ chính xác quan trọng để có thể chấp nhận được tương tác theo bạn dạng năng.”

AI bên trên edge đến cloud

Các khả năng theo dõi tay và mắt, cùng với những tính năng thông minh khác như simultaneous localization and mapping

cần thiết để sản xuất hình ba chiều xuất hiện thêm được thêm vào quả đât khi một người di chuyển xung quanh, được nhúng vào HoloLens 2 vào chip tùy chỉnh thế hệ vật dụng hai được call là cách xử trí hình tía chiều solo vị, hoặc HPU 2.0.

Kipman hotline lớp nhận thức về kỹ năng AI trên thứ này là AI.

Anh ấy nói rằng: “Nhận thức của fan Viking y hệt như bộ óc của loài trườn sát. Nó đang thực hiện những hoạt động mà óc bạn thực hiện theo phiên bản năng mà bạn không suy nghĩ về tới.”

Đối với mọi người, loại trí sáng ý này giữ mang lại trái tim của họ đập, phổi của bọn họ thở và hai con mắt của họ thực hiện nay kính hiển vi nhằm đo độ sâu của trường, ví dụ. Khi họ khát nước và mong muốn uống một ngụm nước, mắt bọn họ theo phiên bản năng đo khoảng cách đến ly nước mà lại tay họ nâng lên môi.

Nhận thức AI bên trên HoloLens 2 được cho phép mọi người làm việc và liên hệ với hình cha chiều mà không cần lo lắng về điều gì điện thoại tư vấn là độ trễ - thường là hàng trăm mili giây nhằm dữ liệu di chuyển lên cloud, được giải pháp xử lý và trở về edge.

Shotton để ý rằng: “Hàng chục mili giây tạo ra sự khác hoàn toàn đáng kể về nhận thức, ví dụ, khi dấn một nút bên trên hình tía chiều hoặc scroll văn bản trên hình tía chiều bởi mắt. Thời hạn quay vòng đó là rất quan lại trọng.”

Mối đon đả về quyền riêng tư là một nguyên nhân khác để thực hiện tính toán AI toàn bộ trên thiết bị; quét mống mắt mà lại HoloLens 2 tiến hành để xác thực người tiêu dùng là một số loại dữ liệu cá thể mà phần đa người có thể không muốn trình lên cloud.

Xem thêm: Vì Sao Máy Tính Không Tải Được Ứng Dụng Trên Windows 7, Tải Tiện Ích

Tuy nhiên, đối với nhiều loại tài liệu khác, bao gồm một lợi thế để gửi tài liệu lên cloud: khi đó, khách hàng hoàn toàn có thể tận dụng Azure AI và những dịch vụ thực tiễn hỗn thích hợp và kết hợp dữ liệu từ thiết bị của mình với tài liệu từ toàn bộ cấu tạo máy tính phổ biến. Điều đó cho phép tính toán hoặc thừa nhận thức tiên tiến hơn, Kipman nói.

*

Các yếu tắc của HoloLens 2. Ảnh: Microsoft.

Cloud collaboration

Marc Pollefeys, người đứng đầu Microsoft của Mixed Reality và AI Zurich Lab nghỉ ngơi Thụy Sĩ đến biết: Một điểm mạnh chính của điện toán ba chiều thông minh dựa trên đám mây là khả năng share thông tin với những người dân khác tất cả HoloLens hoặc trang bị khác có công dụng tương tự.

Pollefeys đang dẫn đầu một nhóm phát triển các thuật toán thị giác máy tính xách tay cốt lõi đến một thương mại & dịch vụ đám mây thực tiễn hỗn hợp mang tên là Azure Spatial Anchors có thể chấp nhận được hình ba chiều tồn tại, bị khóa trong trái đất thực, cho bất kỳ ai bao gồm mức độ tróc nã cập phù hợp để xem.

Ví dụ, công nghệ anchor không gian chất nhận được người cai quản trong nhà máy sản xuất đặt hình tía chiều kề bên thiết bị trên dây chuyền lắp ráp gồm chứa thông tin vận hành và duy trì quan trọng, thời gian thực mà ngẫu nhiên nhân viên có chứng chỉ với thiết bị có công dụng thực tế các thành phần hỗn hợp đều rất có thể truy cập.

Pollefeys nói rằng: “Nếu tôi chỉ có thể đặt thông tin mà tôi đang thấy lộ diện lại trên vật dụng của mình, chắc rằng không bao giờ đáng để đặt hình ba chiều trên nắm giới, nhưng lại nếu tôi có thể chú thích nhân loại và sau đó bất kỳ ai không giống trong công ty có quyền truy cập tương xứng có thể thấy tất cả thông tin, nó bỗng nhiên có mức giá trị hơn nhiều”.

Để chế tạo ra ra kĩ năng này, Pollefeys với nhóm của ông đã phát triển các thuật toán thị giác máy vi tính AI xử lý tài liệu từ các cảm biến để trích xuất tin tức hình học 3 chiều về môi trường và ghép chúng lại với nhau vào cloud để tạo nên digital twin hoặc phiên bản đồ của quanh vùng quan tâm.

Pollefeys cho rằng, HoloLens luôn xây dựng một sự phát âm biết không gian hoặc 3 chiều về môi trường xung quanh của nó nhằm hoạt động. Azure Spatial Anchors tạo, lọc và share các bạn dạng đồ này trên những thiết bị. Đó là nguyên nhân tại sao các bạn dạng đồ từ những thiết bị độc thân được ghép lại với nhau và được lưu trữ trên cloud.

Pollefeys nói rằng: “Không có ý nghĩa sâu sắc gì khi chỉ có tài liệu đó trên một đồ vật riêng lẻ. Đây là một trong những điều mà tôi tất cả một miếng ghép nhỏ tuổi và ai đó gồm một mảnh dùng ghép nhỏ, và tất cả các thiết bị cùng cả nhà đã che phủ toàn bộ không khí quan tâm.”

Các bản đồ này trở nên um tùm hơn, chính xác hơn và mạnh bạo hơn theo thời hạn khi các thiết bị có khả năng thực tế láo hợp khác biệt - HoloLenses tương tự như điện thoại, máy tính xách tay bảng và máy tính xách tay được trang bị đúng cách - lập bản đồ môi trường thiên nhiên của chúng và chia sẻ dữ liệu cùng với cloud.

Ví dụ, bản đồ ở trong phòng máy chỗ người thống trị để hình bố chiều nổi trên các thiết bị trên dây chuyền sản xuất lắp ráp được tinh chỉnh và điều khiển đều đặn khi ngày càng các công nhân gồm uy tín coi hình bố chiều bởi thiết bị của họ.

Khả năng này cũng cho phép các kịch bản như buổi họp giữa con kiến ​​trúc sư và người tiêu dùng xem và tương tác với phiên bản thiết kế 3d ba chiều của tand nhà, mỗi thiết bị có tác dụng thực tế hỗn hợp nhìn vào phiên bản thiết kế từ mắt nhìn của chính họ khi bọn họ ngồi xung quanh bàn .

Bà White chia sẻ: Azure chứa các dịch vụ dựng sẵn để viết ứng dụng cho những loại yên cầu này bên trên HoloLens và ngẫu nhiên thiết bị thực tế hỗn phù hợp nào khác, bao gồm cả smartphone thông minh và laptop bảng chạy hệ quản lý điều hành iOS với Android.

Bà nói rằng: “Kinh nghiệm hợp tác và ký kết đó ko chỉ dành riêng cho HoloLens. Túi tiền và độ phức hợp và kỹ năng quan trọng để tạo ra một vận dụng làm được điều gì đấy tuyệt vời là rất xa.”

Chẳng hạn, kỹ năng đa thiết bị với nền tảng được cho phép trải nghiệm như Minecraft Earth, phối kết hợp trò chơi video phổ vươn lên là với thực tiễn hỗn hợp theo cách người chơi hoàn toàn có thể xây dựng với đặt các cấu tạo ảo trong quả đât thực để tín đồ chơi khác rất có thể tương tác với chúng ta trên sản phẩm công nghệ của họ.

Theo bà White, tất cả chúng ta đều tham gia vày nó dựa trên việc sử dụng công nghệ đám mây có thể hiểu và lý giải bởi tất cả các sản phẩm công nghệ khác nhau.

Thiết kế công nghệ cho bé người

Kipman đến rằng: Để HoloLens vận động như được hình dung, technology làm gốc rễ cho trải nghiệm cần phải hiểu thế giới theo đều cách tương tự như phương pháp mọi tín đồ làm.

Đó là lý do tại sao Kipman và các cộng tác viên của chính mình trên Microsoft đang phát triển, xúc tiến và tận dụng các chiến thuật AI vào toàn bộ kết cấu máy tính phổ biến, tự silicon vào tai nghe của HoloLens 2 cho Azure AI và các dịch vụ thực tế hỗn hợp.

Trở lại với bảng trắng tiên tiến nhất của mình, Kipman hiện vẫn phác thảo một khoảng nhìn mang đến điện toán xuất hiện khắp nơi đầy đông đảo từ ngữ, hộp, mũi thương hiệu - cùng một hình hình ảnh hai fan bị khóa vào cuộc trò chuyện ở bên cạnh một thiết bị thông minh.

Theo ông, chính là mục tiêu ở đầu cuối của năng lượng điện toán có mặt khắp nơi - để khiến mọi fan tương tác với những người khác theo cách tự nhiên.

Để đi thẳng mang lại vấn đề, anh ta tùy chỉnh một khoảnh khắc tiếp xúc bằng mắt có ý kiến và nói,” Hy vọng, bạn sẽ nhận được rất nhiều hơn từ cuộc nói chuyện này vì chúng ta đang xuất hiện với tôi.”

Anh ấy tiếp tục, “Chúng tôi có thể đã làm điều đó qua năng lượng điện thoại. Chúng tôi có thể đã làm điều ấy qua Skype. Tôi rất có thể đã lưu lại nó và gửi cho chính mình một cuộn băng. Bạn đã không chọn làm điều đó. Các bạn đã chọn để có mặt ở đây với tôi. Tại sao? chính vì đó là cách họ làm những việc của nhỏ người.”

“Một điều ăn hại là chúng ta phải tại chỗ này cùng lúc tôi tại đây và bọn họ phải ở cùng một vị trí. Sức mạnh của công nghệ này là nó cho chúng ta khả năng ráng thế không khí và thời gian.”