Đồng sáng chế của HoloLens Avi Bar-Zeev chia sẻ: Con đường đến với kính AR trong mọi thời tiết

Con đường đến với kính XR trong mọi thời tiết

Trong hơn 30 năm, tôi đã làm việc trên XR, metaverse và điện toán không gian, bao gồm hỗ trợ hoặc tư vấn về 10 dự án tai nghe XR khác nhau. Tôi đã có một may mắn lớn khi sớm đóng góp vào một loạt các dự án, chủ yếu bằng cách chứng minh hoặc từ chối các yêu cầu và xác định trải nghiệm người dùng chính trước khi các nhóm chi 1 tỷ đô la để xây dựng chúng. Trên đường đi, tôi đã học được những bài học về điều gì hiệu quả và điều gì không. Đôi khi, câu trả lời chính xác là "chưa trưởng thành."

Tôi sẽ không tiết lộ bất kỳ thông tin nào mà chủ nhân trước đây của tôi vẫn coi là độc quyền. Tôi sẽ cung cấp các liên kết đến các bằng sáng chế đã xuất bản có thể cung cấp cho chúng tôi một số thông tin chi tiết. Đó là mục đích thực tế của bằng sáng chế, tin hay không tùy bạn. Tất nhiên, tôi sẽ tránh những bằng sáng chế mà tôi nghĩ sẽ mời gọi sự suy đoán.

Điều quan trọng là phải cẩn thận để không lấy bất kỳ điều gì tôi nói hoặc viết làm bằng chứng cho bất kỳ kế hoạch sản phẩm nào của công ty, hoặc thậm chí bất kỳ lời chỉ trích nào đối với nỗ lực của bất kỳ ai. Đây hoàn toàn không phải là ý định của tôi.

Về nền tảng, trải nghiệm XR thực đầu tiên mà tôi xây dựng là CAVE. Vào thời điểm đó, tôi đã vay $ 250, 000 máy tính và máy chiếu khổng lồ, và đầu tư thêm $ 30, 000 vào nguyên liệu thô. Tai nghe VR, 000 trị giá 100 đô la của Disney, được sản xuất vào những năm 90, chưa bao giờ được đưa ra thị trường thương mại. Nó yêu cầu dây cáp treo trên trần nhà để mang trọng lượng, nhưng hàng trăm nghìn người đã thử nó.

Đến tháng 1 năm 2010, tôi hy vọng chúng tôi sẽ sẵn sàng bắt đầu phát triển kính XR dành cho người tiêu dùng sẵn sàng sử dụng. Đã đến lúc tạo ra tiếng vang lớn trong lĩnh vực phát triển chậm chạp này. Thêm vào đó, Google Glass và Magic Leap xuất hiện cùng thời điểm. May mắn thay, một trong những nhiệm vụ mà chúng tôi nhận được tại nhóm ươm tạo của Microsoft là tìm ra những ý tưởng mới cho thế hệ tiếp theo của XBox.

"Hãy tỏ ra hung hăng, thậm chí khiến chúng tôi phải thốt lên rằng 'điều này thật điên rồ'", một giám đốc điều hành Xbox cho biết vào thời điểm đó.

Tôi chắc chắn có những ý tưởng "cấp tiến". Nhóm nhỏ của chúng tôi đã sớm bắt tay vào thực hiện một khái niệm sản phẩm mới "Screen Zero": thay thế tất cả các màn hình bằng một màn hình. Tôi phụ trách thăm dò kỹ thuật và giúp xác định kinh nghiệm trong năm hình thành đầu tiên. Lý do rời đi của tôi không đáng có chỗ trống trong bài viết này. Nhưng sau hơn một nghìn người, HoloLens đã ra mắt vào năm 2016.

Đây là thiết bị đột phá. Nhưng nó vẫn không phải là thiết bị tiêu dùng có thể đeo được trong mọi thời tiết. Không có Magic Leap 2, Snap Spectacles, Varjo hay Quest ngày nay.

Vì vậy, chính xác thì cần những gì để đạt được kính AR có thể đeo cả ngày?

1. Chủ nghĩa tối đa và Chủ nghĩa tối giản

Cách tiếp cận theo chủ nghĩa tối đa, giống như cách mà HoloLens cuối cùng đã áp dụng, đề cập đến việc hợp nhất nhiều cảm biến, thuật toán và sức mạnh vào một hệ thống cao cấp. Khi chúng tôi đã ổn định kỹ thuật và trải nghiệm người dùng, về mặt lý thuyết, chúng tôi có thể thu hẹp nó lại. Nhưng điều đó cần nhiều thời gian hơn và có thể mất đến một thập kỷ để một số thiết bị điện tử nhất định có thể tối ưu hóa điện năng một mình.

Cambria và các thiết bị tương tự cũng theo chủ nghĩa tối đa tương tự, đến mức chúng mô phỏng AR với màn hình VR mờ khổng lồ và nhiều camera, với khả năng kiểm soát chính xác từng pixel đối với sự kết hợp giữa thực tế và mô phỏng. Chủ nghĩa tối đa là tốt nhất cho các ứng dụng cao cấp và R&D cốt lõi. Một số người cho rằng ngay cả khi các ứng dụng công nghiệp hơn, chúng vẫn là công cụ duy nhất hoạt động vào lúc này.

Tuy nhiên, ngay cả những thiết bị đắt tiền nhất trên thị trường hiện nay cũng không thể được đeo cả ngày, và không thể được sử dụng cho các tương tác xã hội thông thường hoặc thậm chí để đi bộ an toàn trên đường phố. Các tính năng theo chủ nghĩa tối đa như hiển thị ảnh ba chiều hoặc trường ánh sáng vẫn chưa hoàn thiện.

Mặt khác, các thiết bị có cách tiếp cận tối giản bao gồm Amazon Echo Frames, Snap Spectacles và Ray-Ban Stories, để kể tên một số thiết bị. Họ chỉ đóng gói công nghệ phù hợp với những hạn chế hiện tại của yếu tố hình thức kính đeo được, thường loại bỏ hoàn toàn màn hình.

Tuy nhiên, kính không có màn hình có thể được coi là XR không?

Nếu nó nâng cao quan điểm tình huống của một người, tôi sẽ nói có. Podcast hoặc kết hợp âm nhạc không phải là XR vì nó vẫn không cảm nhận được bạn hoặc môi trường hiện tại của bạn. Các ứng dụng định vị GPS hơi phù hợp nhưng vẫn chưa đủ. Việc thêm âm thanh không gian và camera cho AI và định vị chính xác chắc chắn được tính là XR, ngay cả khi không có màn hình.

Các phương pháp tiếp cận tối giản có thể bán được nhiều sản phẩm hơn trong thời gian ngắn và chúng thường tập trung vào một khía cạnh cụ thể và biến nó thành giải pháp tốt nhất trong phân khúc. Nếu bạn có thể làm đúng, như Walkman và iPhone, bạn có thể bán được hàng tỷ đô la. Nhưng đừng nghĩ chủ nghĩa tối giản là dễ dàng, vì xét về nhiều mặt, làm tốt rất khó.

2. Phương pháp tốt nhất

Tôi đã hy vọng rằng Screen Zero của XBox là sự kết hợp giữa kính tối giản và bảng điều khiển tối đa. Kính AR nên có kích thước tương tự như kính Oakley hoặc nhỏ hơn. Người dẫn chương trình tiếp theo sẽ thực hiện hầu hết việc nâng nặng tối đa bốn cặp kính trong cùng một phòng.

3. Công thái học, tiêu thụ năng lượng và nhiệt

Tại sao phải tách biệt? Nó phụ thuộc vào mức tiêu thụ năng lượng, hay chính xác hơn: nhiệt.

Tất cả công việc của một máy tính kết thúc dưới dạng nhiệt và những thứ khác có thể bao gồm các photon và / hoặc các ổ đĩa cơ học, chẳng hạn như âm thanh. Nhiệt lượng bao nhiêu? Một cặp kính AR nhẹ có thể tạo ra năng lượng khoảng một watt.

Một điện thoại thông minh điển hình có thể tạo ra khoảng 10 watt và sau đó nóng lên. Máy chủ hoặc PC có thể tiêu thụ năng lượng nhiều hơn 10-100 lần so với điện thoại thông minh và do đó, năng lượng gấp 100-1000 lần so với kính. Hãy nghĩ đến đèn pin LED nhỏ và máy sấy quần áo khổng lồ. Đây là một sự khác biệt rất lớn trong việc tiêu thụ năng lượng.

Để cân bằng mức tiêu thụ năng lượng, chúng tôi cần các giải pháp tương tự như những gì tôi đã làm từ năm 2010, chẳng hạn như kết hợp dữ liệu, kết xuất phân tách, các luồng kết xuất được tối ưu hóa. Đối với các băng thông thấp hơn, hiển thị cong vênh thời gian dựa trên theo dõi mắt hoạt động tốt và khắc phục sự chậm trễ trong giao tiếp.

CPU, camera, màn hình và RAM tiêu tốn rất nhiều năng lượng và tỏa nhiều nhiệt. Vì vậy, bí quyết là sử dụng chúng một cách tiết kiệm trong hầu hết các trường hợp. Hãy nghĩ đến phần cứng tùy chỉnh năng lượng thấp: cảm biến theo ngữ cảnh mới, màn hình tiêu thụ điện năng cực thấp và các thuật toán giúp "đánh thức" một cách thông minh.

Điều này sẽ mất thời gian để giải quyết. Ví dụ: nếu chuột quang và bộ điều khiển máy chủ của bạn không ở chế độ chờ, pin của chúng sẽ hết, vì vậy chúng bắt đầu bằng giải pháp kết nối. Ngày nay, một con chuột quang có thể kéo dài vài tháng với một loại pin nhỏ.

4. Ngoài phòng khách

Để hỗ trợ nhiều trường hợp sử dụng khác nhau, hệ thống AR trong suốt về mặt quang học cần phải chặn ánh sáng một cách lý tưởng từ các môi trường sáng (ngay cả ánh sáng từ cửa sổ hoặc phòng khách), cá nhân hóa tốt hơn và trộn âm thanh không gian với thực tế, điều chỉnh tiêu điểm quang học, chụp và tái tạo ảnh ba chiều ảo của những người khác và nhiều hơn nữa.

Ngay cả khi thiết bị được chia thành bộ phận chính và tai nghe, vẫn còn quá nhiều "thứ" trong đầu chúng ta. Một thách thức lớn về mặt công thái học là loại bỏ các dây đeo khổng lồ mà hầu hết các thiết bị XR vẫn sử dụng khiến tai nghe trông giống như những con bọ ôm mặt.

Bất kỳ loại dây đai nào yêu cầu lực căng sẽ hạn chế sự đa dạng của cơ sở người dùng (xem xét sự thay đổi kích thước đầu và dễ bị rối tóc), và nó sẽ làm giảm khả năng đeo kính. Điều này có nghĩa là thiết bị dùng trong mọi thời tiết phải siêu nhẹ và nhìn chung vừa vặn như kính thông thường.

Để đạt được kích thước của kính Oakley hoặc nhỏ hơn thường có nghĩa là chuyển nhiều hệ thống hơn vào một chiếc kẹp hoặc điều khiển từ xa. Magic Leap đưa ra một clip như vậy. Tôi đã nhận thấy các thiết bị XR sử dụng thiết lập vòng đeo cổ, có nghĩa là treo các thành phần máy tính quanh cổ người tiêu dùng. Với thiết kế tách rời này, càng làm được nhiều công việc riêng biệt thì việc lắp ráp mắt / đầu có thể nhẹ hơn.

Vào năm 2010, cá nhân tôi quan tâm đến bắp tay hơn vì nó là điểm neo và đường ngắn nếu cần. Điều này giữ cho các bộ phận nặng hơn và nóng hơn cách xa đầu và cổ và có nhiều diện tích bề mặt để tản nhiệt. Cảm biến sinh học đặt trên cánh tay cũng có thể phát hiện cử chỉ, tương tự như cách Meta sử dụng thiết bị Control plus Labs để đọc cử chỉ từ cổ tay. Bằng cách này, các nhà thiết kế sản phẩm vẫn có thể nói "không có cáp".

5. Tập trung

Bởi vì một số lượng lớn người lớn cần điều chỉnh thị lực gần và xa, một hệ số dạng có thể đeo cả ngày thường cần phóng đại và tập trung thế giới thực cho chúng ta. Ở mức tối thiểu, điều này có nghĩa là ống kính cần hỗ trợ quang học thông số thị lực tùy chỉnh. Một công ty ống dẫn sóng mà Snap mua lại trước đó đã công bố kế hoạch nhúng quang học liên quan vào ống kính thị lực chức năng, nhưng điều đó thật khó khăn.

Nhưng một thông số tầm nhìn có đủ không? Nhiều người lớn chỉ cần kính để đọc sách hoặc lái xe (viễn thị), có nghĩa là họ cần kính để có thể chuyển sang các trạng thái khác nhau. Vì vậy, chúng ta cần hai hoặc ba cặp kính đắt tiền? Hay kính hai tròng, kính ba tròng bẻ cong ánh sáng cho phù hợp tùy nơi bạn nhìn? (Thực tế, nhưng không lý tưởng)

Một giải pháp mà tôi đang thúc đẩy là điều chỉnh quang học động, cho phép cùng một cặp kính hỗ trợ đọc sách hoặc lái xe, và thậm chí phóng đại chữ in đẹp và các dấu hiệu ở xa. Điều này cũng cho phép nhiều bạn bè dùng thử một cách dễ dàng. Hãy tưởng tượng nếu XBox của bạn chỉ hỗ trợ các trò chơi một người chơi và bạn có hai hoặc ba người bạn trong phòng? Kiểu như một kẻ vô tích sự.

Các phương pháp lấy nét động tốt nhất hiện nay bao gồm Alvarez (trượt cơ học) và ống kính có thể điều chỉnh chứa đầy chất lỏng. Các giải pháp cơ học có xu hướng giảm độ tin cậy. Có một lượng lớn R & D đang tiến hành xếp chồng các màn hình LCD đặc biệt và thay đổi tiêu điểm bằng điện tử. Mega mua lại một công ty để đảm nhận nhiệm vụ.

Sau đó là vấn đề lấy nét hình ảnh ảo dựa trên đường ngắm hiện tại. Avegant và Magic Leap đã chỉ cho chúng ta cách nhanh chóng chuyển đổi giữa hai độ dài tiêu cự, mô phỏng một màn hình hiển thị trường ánh sáng đơn giản, điều này rất quan trọng để điều hướng "vật thể ảo" ở độ dài tiêu cự thích hợp trong sải cánh. Tôi đã xem xét một số cách để quét liên tục độ dài tiêu cự trước đây, nhưng các màn hình thương mại không đủ nhanh trong thực tế.

Theo dõi mắt của bạn có thể hỗ trợ quá trình xử lý, giảm tải tính toán và cung cấp thông tin nhập liệu của người dùng tự nhiên hơn. Tôi rất quen thuộc với vấn đề theo dõi mắt và cảnh báo những người ra quyết định về những rủi ro từ sớm.

Cuối cùng, về mặt kinh doanh, Luxottica kiếm được rất nhiều tiền bằng cách bán kính mắt giá rẻ, giá cao. Nó thống trị thị trường ngày nay, và hầu hết các nhãn hiệu kính mắt mà bạn biết. Các công ty kính XR phải làm việc với họ hoặc chống lại họ, cả hai đều không phải là lựa chọn dễ dàng. Meta đã chọn làm việc với họ để phát triển kính Ray-Ban. Các đối thủ cạnh tranh của công ty bao gồm Warby Parke và những người chơi nhỏ khác. Bạn không thể bán sản phẩm mới tốt nếu không có kênh phân phối và đối tác tốt.

6. Tương phản

Magic Leap 2 cung cấp một cách để làm mờ thế giới tự nhiên một cách có chọn lọc. Tôi đã giải quyết vấn đề này từ năm 2010, nhưng vẫn chưa có giải pháp hoàn hảo. Một loạt kỹ sư quang học đã không cho là cần thiết. Lý do là như sau:

Người ta thường hiểu tại sao màn hình "phụ gia" trong suốt không thể hiển thị "màu đen". RGB {{0}}, 0, 0 cho màu đen, không thực sự thêm bất cứ điều gì và không hiển thị trong ánh sáng hiện có. Tuy nhiên, chúng tôi có thể dễ dàng đánh lừa bạn nhận biết màu đen và bóng tối bằng cách tiếp cận các vùng sáng hơn.

Vấn đề thực sự khó khăn phát sinh khi bạn mang kính XR của mình ra ngoài trời và nhìn vào một bức tường được chiếu sáng bởi ánh sáng mặt trời chói chang, có thể là gần khu vực tối hoặc bóng râm. Một số khu vực có thể sáng hơn 1000 đến 10000 lần so với những khu vực khác. Sự tương phản rõ rệt trong nhà đến mức hình ảnh AR trông cực kỳ đáng sợ. Các kỹ sư quang học thường lập luận rằng để khắc phục điều này, bạn cần phát ra nhiều ánh sáng hơn. Quang học của chúng thường chỉ hiệu quả 1 phần trăm -10 phần trăm, có nghĩa là hầu hết ánh sáng thậm chí không lọt vào mắt bạn và chỉ làm tăng thêm nhiệt. Nhớ lại rằng bạn không thể chỉ thiết kế một hệ thống xung quanh quang học vì nhiệt là một trong những yếu tố hạn chế lớn nhất.

Thực tế là bất kỳ cặp kính AR hoặc kính nhìn xuyên qua video nào đều cần phải tính đến cảnh thực khi thực hiện cải tiến hình ảnh. Trong trường hợp trong suốt, kính thường cần được trừ ánh sáng thực để có được màu sắc cuối cùng mong muốn. Trong trường hợp phối cảnh video, màn hình có thể thay thế toàn bộ pixel, nhưng bất kỳ độ trong suốt nào trong cảnh 3D ảo vẫn cần được trộn với màu nền đọc được từ máy ảnh. Vì vậy, về cơ bản những gì bạn đang nhìn là một máy ảnh năng lượng cao và mạch điện trong suốt hoặc mờ đục. Đây là một hạn chế lớn trong thiết kế vì nó tăng thêm năng lượng và trọng lượng trong khi cản trở mắt.

Nhìn bề ngoài, che bóng có chọn lọc bằng kính trong sẽ ít tốn kém hơn so với việc thêm năng lượng cho màn hình hoặc thêm camera. Năm 2010, tôi đặt một màn hình LCD đơn sắc đơn giản phía trước ống dẫn sóng. Nó hoạt động như mong đợi, hiển thị các vật thể rắn 3D với đường viền màu đen mềm mại. Nhưng nó có nhược điểm là cần hiệu chỉnh động, LCD làm biến dạng ánh sáng thực (chủ yếu là khúc xạ của các dây điều khiển). Nó có dải động kém. Ngoài trời, đôi khi bạn cần độ mờ gần 100%. Ở trong nhà, đặc biệt là trong các tình huống xã hội và khả năng ngoại cảm, bạn muốn minh bạch hơn để nhìn trực tiếp vào mắt mọi người.

Sự phản đối chính đối với cách tiếp cận này là màn hình LCD hoặc các thiết bị điều biến ánh sáng không gian khác thường bị mất nét, cách mắt một inch. Nhưng sự biến dạng là do với màn hình AR trong suốt cộng và trừ phù hợp và một số cảm biến nhanh, công suất thấp, kính râm của bạn có thể chặn ánh sáng mặt trời, ánh sáng chói hoặc đèn pha mà không làm mờ tầm nhìn của bạn ở nơi khác. Bạn có thể làm tối thế giới một cách tinh tế và làm cho những cuốn sách được đề xuất trông lung linh. Với phép trừ (lọc) tiên tiến hơn, kính thậm chí có thể tái tạo màu sắc cho thế giới, nâng cao tầm nhìn ban đêm và thậm chí cung cấp phản hồi sinh trắc học khi bạn cảm thấy bồn chồn hoặc mất tập trung.

Tôi đã làm nhiều thứ demo khác nhau và đã dành một thời gian dài để tìm kiếm một cách tốt hơn. Nhưng chúng đều có những mặt hạn chế nhất định. Tuy nhiên, việc thực hiện Magic Leap 2 cho tôi hy vọng rằng các vấn đề cốt lõi sẽ được giải quyết.

7. Mạng

Máy bộ đàm cũng yêu cầu năng lượng, vì vậy luôn có sự cân bằng trong một hệ thống phân tách. Tương lai hứa hẹn nhất nằm ở việc sử dụng các tần số vô tuyến cao cấp hơn để đạt được công suất thấp hơn và băng thông cao hơn hiện nay. Nhưng thách thức chính là tần số này không thể đi qua da hoặc tường (tốt hơn hoặc xấu hơn). Vì vậy, giải pháp cần phải rất thông minh, vì sóng vô tuyến dội lại và phát ra xung quanh các phòng và mọi người, vì vậy có thể cần sử dụng nhiều máy phát hơn hiện nay. Rõ ràng, điều này làm tăng thêm chi phí và phức tạp.

Đối với thiết bị đeo được cả ngày, nó cũng yêu cầu mạng phải có sẵn trước khi bán các sản phẩm dựa vào đó. Hạn chế này là lý do lớn nhất khiến các doanh nghiệp không bao giờ phát hành giải pháp kết xuất phân tách mà tôi ủng hộ. 5G gần hơn với những gì chúng ta cần, nhưng ít nhất ở Mỹ, điều này chủ yếu giải quyết được vấn đề về độ trễ thấp hơn và nhiều người sử dụng mạng hơn cùng một lúc. Chúng tôi cần nhiều hơn 5G, nhưng đó là một khởi đầu tốt.

Để loại bỏ "máy chủ lưu trữ" ban đầu (hoặc tương tự) trong phòng, đồng thời duy trì hệ số hình thức nhỏ và nhẹ, chúng ta cần một cách để tính toán "cạnh", được kết hợp theo cách không xâm phạm quyền riêng tư của chúng ta. Việc gửi dữ liệu cảm biến sinh trắc học của họ tới bất kỳ giải pháp cạnh hoặc đám mây nào là điều rất đáng quan tâm đối với bất kỳ ai vì nó có thể dễ dàng bị lạm dụng.

8. Máy ảnh

Đặt máy ảnh vào kính là một việc khó. Google Glass đã mắc nhiều sai lầm trong việc chấp nhận của xã hội và bị tấn công trên diện rộng. Nhưng Snap dường như gặp ít vấn đề về vấn đề đó. Đồng thời, Facebook đang nỗ lực nắm bắt các chi tiết về cuộc sống của mọi người, có lẽ là để cung cấp các quảng cáo được cá nhân hóa hơn, cho dù chúng ta có muốn hay không.

Một số máy ảnh tiêu tốn nhiều năng lượng, chẳng hạn như số hóa cảnh 3D và sự che khuất kỹ thuật số của người hoặc vật thể. Để đặt đồ họa 3D đúng cách, bạn cần liên tục theo dõi phần đầu trong không gian, và máy ảnh vẫn là giải pháp hàng đầu. Bằng cách tận dụng cảm biến IMU, chúng tôi đang tăng mức tiêu thụ năng lượng.

Chụp ảnh hoặc quay phim là một trường hợp sử dụng khá phổ biến, đặc biệt nếu nó tự nhiên và tiện lợi hơn các thiết bị khác. Tuy nhiên, do hạn chế về kích thước và nguồn điện, chất lượng của ảnh chụp sẽ thấp hơn so với điện thoại thông minh thông thường. Cung cấp một ánh sáng trắng nhỏ trong khung hình không đủ để giải quyết vấn đề phức tạp về sự chấp thuận của xã hội.

Dễ hình dung hơn là tính năng chính của kính máy ảnh, một phần vì nó không phải chụp ảnh người khác, nhưng quan trọng hơn, nó mở ra trường hợp sử dụng mới quan trọng nhất cho việc đeo kính cả ngày: hiểu tình huống.

9. Kinh nghiệm

Vào năm 2010, nghiên cứu và phát triển mà tôi hy vọng sẽ phát triển nhất là kính AR hỗ trợ khả năng theo dõi mắt và theo dõi cơ thể mạnh mẽ, đồng thời khám phá giao diện người dùng điện toán không gian tự nhiên hơn ngoài "hình chữ nhật trong hình chữ nhật" của PC và chuột. Trong khi phần cứng chắc chắn có những hạn chế của nó, việc sử dụng XR rộng rãi đòi hỏi ai đó phải giải quyết câu hỏi kinh nghiệm về "làm thế nào" để tương tác trong tương lai? "Hộp 3D trong một chiếc hộp" rõ ràng là không. Vì vậy, chúng tôi vẫn còn rất nhiều việc phải làm.

Trong khi Meta đang tập trung nỗ lực VR của họ để vượt qua cái gọi là "Kiểm tra Turing trực quan", kính XR có thể đeo suốt cả ngày cần phải hữu ích hơn những loại kính khác. Nhiều người tưởng tượng các lớp hoặc kênh AR bao trùm thực tế của chúng ta, đánh dấu mọi thứ chúng ta thấy, thêm thông tin, kể những câu chuyện không gian ở dạng 3D và vẽ lại thế giới. Mặc dù điều này có thể là theo yêu cầu, nhưng đó không phải là trải nghiệm hàng ngày mà tôi mong đợi.

Hầu hết thời gian, mọi người muốn cải thiện những gì họ thường làm: giao tiếp, điều hướng, khám phá thế giới xung quanh chúng ta, hiểu và thậm chí thay đổi địa điểm, mua sắm, trải nghiệm nội dung và kiếm tiền từ công việc. Để thành công, kính XR cần phải làm tốt hơn những gì chúng ta làm với điện thoại thông minh hoặc các thiết bị khác.

Đây là điều mà một chiếc điện thoại thông minh không thể làm được. Hãy tưởng tượng một cặp kính trông bình thường có thể tự động điều chỉnh tiêu điểm và chặn ánh sáng có chọn lọc. Họ có thể nói chuyện với bạn một cách chủ động và riêng tư mà bạn không cần phải nhập văn bản hoặc hỏi bằng lời nói. Chỉ riêng điều đó thôi đã là một sản phẩm trị giá hàng tỷ đô la. Những chiếc kính như vậy có thể giúp bạn ghi nhớ mọi thứ hoặc cung cấp các đề xuất đáng tin cậy như một phần trong trải nghiệm hàng ngày của bạn (so với quảng cáo đẩy).

Nghiên cứu quan trọng nhất mà tôi đã thực hiện trong lĩnh vực này là giao tiếp không đồng bộ bằng cách sử dụng kính XR không trực quan. Khả năng thoại và văn bản của điện thoại thông minh ngày nay đã đủ tốt, nhưng họ có biết khi nào bạn đang vật lộn để tập trung không? Họ có thể giúp bạn chuyển đổi ngữ cảnh vào đúng thời điểm để công việc hoặc giải trí luôn trôi chảy không? Đây là cách Kính có thể tỏa sáng ở đâu (giả sử chúng ta có thể tin tưởng vào nhà sản xuất).

Mọi thứ tôi mô tả đều rất khó và công nghệ liên quan hầu như không tồn tại. Nó vẫn chưa đi theo hướng tối giản, nhưng đó là bởi vì chúng tôi chưa ưu tiên nó hơn việc thu nhỏ quang học và tối đa hóa trường nhìn. Nhưng nếu bạn đặt câu hỏi: Loại kính XR nào có thể thành công ở những nơi khác không? Tôi vẫn nghĩ rằng mọi thứ tôi đã liệt kê ở trên sẽ giúp bạn xây dựng một sản phẩm tuyệt vời.