Từ XR Interaction Toolkit sang UI Toolkit và URP: Unity Industry cung cấp sức mạnh cho đào tạo hàng không XR độc đáo

Nghiên cứu điển hình gần đây của chúng tôi về NMY Mixed-Reality có trụ sở tại Frankfurt kể về nền tảng đào tạo nhân viên XR của họ cho Tập đoàn Lufthansa, cung cấp 20.000 buổi đào tạo XR bắt buộc tự động mỗi năm. Kết quả mang lại những khoản tiết kiệm chi phí và thời gian thay đổi cuộc chơi cho Lufthansa, bao gồm tiết kiệm hơn 75% chi phí vận hành đào tạo và 80% cụ thể trên chi phí đi lại của người hướng dẫn.

Đằng sau ROI đáng kinh ngạc đó là câu chuyện về cách NMY phát triển bộ ứng dụng của họ với Unity Industry. Bài báo này khám phá các chi tiết cốt lõi trong quy trình phát triển của họ và cách họ dự định thúc đẩy công nghệ để thực hiện các kế hoạch đầy tham vọng của mình trong tương lai.

Những điểm mấu chốt: Unity Industry cung cấp năng lượng cho việc đào tạo nhân viên hàng không tuân thủ của NMY cho Lufthansa như thế nào

• NMY sử dụng Unity Industry để phát triển, triển khai và nâng cấp một hệ sinh thái độc đáo gồm các khóa đào tạo trải nghiệm nhập vai bắt buộc, tuân thủ các quy định nghiêm ngặt của ngành, cho các vai trò nhân viên khác nhau tại Lufthansa.
• 20,000 buổi đào tạo bắt buộc tự động mỗi năm được hoàn thành trên các ứng dụng của NMY được làm bằng Unity Industry.
• Đào tạo XR mang lại những lợi thế lớn về học tập và kinh tế cho Tập đoàn Lufthansa:
  • Họ có thể huấn luyện nhân viên của mình về cách xử lý các tình huống nguy hiểm, những tình huống không thể dàn dựng bằng hướng dẫn dựa trên tương tự, trong môi trường ảo.
  • Dựa trên dữ liệu của riêng Lufthansa, khuôn khổ đào tạo XR giúp giảm đáng kể chi phí đi lại cho cả nhân viên và người hướng dẫn.
• Nghiên cứu nội bộ và khảo sát khách hàng thực nghiệm của NMY cho thấy điện toán không gian và học tập dựa trên trò chơi đạt hiệu quả học tập cao hơn 4 lần so với các lớp học truyền thống, đọc thủ công hoặc video học tập điện tử 2D.
• Các kết quả mang lại sự tiết kiệm chi phí và thời gian thay đổi cuộc chơi cho Lufthansa, bao gồm tiết kiệm hơn 75% chi phí vận hành đào tạo, và 80% cụ thể về chi phí đi lại của người hướng dẫn.
• Có sáu giai đoạn trong chu kỳ phát triển của NMY với Unity Industry:
  • Nền tảng, thiết lập và kiến trúc mô-đun
  • Sản xuất tài nguyên và nghệ thuật kỹ thuật
  • Thiết kế tương tác và phát triển XR cốt lõi
  • Giao diện người dùng (UI) và bản địa hóa nội dung toàn cầu
  • Tối ưu hóa hiệu suất và phân phối nội dung
  • Tích hợp hệ thống và doanh nghiệp có khả năng mở rộng
• Các tính năng chính của Unity Industry của NMY bao gồm:
  • XR Interaction Toolkit và XR Hands
  • UI Toolkit và gói Localization
  • Unity Package Manager
  • Universal Render Pipeline và High Definition Render Pipeline

Một hệ thống đầu cuối, từ các khóa đào tạo đến chứng nhận tự động

NMY kết hợp chuyên môn về bản sao kỹ thuật số sâu của mình – tạo ra các mô hình 3D có độ chính xác vật lý cao, hiệu suất cao của thiết bị độc quyền – với các mô phỏng dựa trên trò chơi hấp dẫn, trải nghiệm người dùng (UX) tự nhiên và kể chuyện.

Phần mềm XR chủ lực của NMY dành cho Tập đoàn Lufthansa bao gồm đào tạo An ninh Hàng không và đào tạo nghề Nhân viên Bãi Hàng hóa. Các ứng dụng này nhắm mục tiêu đến các tai nghe VR độc lập, máy tính bảng di động và trình duyệt web.

Khóa đào tạo bắt buộc tuân thủ các quy định nghiêm ngặt của ngành do Luftfahrt-Bundesamt (LBA), cơ quan hàng không chính thức của Đức, đặt ra. Nền tảng của NMY cũng cần cung cấp kết quả thi: hệ thống của họ tự động đánh giá các kỳ thi và đồng bộ hóa các chứng chỉ đã vượt qua theo thời gian thực với hệ thống quản lý học tập (LMS) và hệ thống phân công ca làm việc của Lufthansa.

Năm lý do tại sao khóa đào tạo XR của NMY vượt trội hơn các phương pháp tương tự

Theo NMY, đào tạo XR mang lại năm lợi ích thay đổi cuộc chơi đã giúp Lufthansa phần lớn thay thế các khóa học cũ dựa trên tương tự của họ diễn ra trong các mô hình vật lý và máy bay:

1. Trải nghiệm đắm chìm quy mô phòng thực tế:
   1. Chuyển động tự nhiên, quy mô phòng và tương tác không gian không cần bộ điều khiển, đưa quá trình huấn luyện gần hơn với trải nghiệm "holodeck" ngoài đời thực (như phòng Holodeck trong loạt phim truyền hình Star Trek).
   2. Học viên bước vào bản sao kỹ thuật số 1:1 của môi trường làm việc của họ, tạo ra cảm giác hiện diện vật lý mạnh mẽ.
2. Hiệu quả học tập cao với sự tập trung sâu và trí nhớ cơ bắp: Nghiên cứu nội bộ và khảo sát khách hàng thực nghiệm của NMY cho thấy hiệu quả học tập cao hơn 4 lần so với các lớp học truyền thống, đọc thủ công hoặc video học trực tuyến 2D. Những lý do cho điều này bao gồm:
   1. Các Sequences huấn luyện bắt đầu bằng các tín hiệu và đặc điểm trực quan được loại bỏ dần, buộc người học phải thực hiện các quy trình trong một mô phỏng thực tế dựa vào trí nhớ cơ bắp. Điều này có thể dẫn đến khả năng ghi nhớ kiến thức cao hơn và khả năng gợi nhớ nhanh hơn, tự tin hơn trong các tình huống thực tế quan trọng.
   2. Các đội có thể trải nghiệm và giải quyết một cách an toàn các mối nguy hiểm cực đoan ảo, hỏa hoạn và các sự cố thiết bị quan trọng mà về mặt vật lý là không thể hoặc quá nguy hiểm để mô phỏng trên máy bay thật.
   3. Nhìn chung, VR nhập vai thu hút sự chú ý của người học và loại bỏ các yếu tố gây xao nhãng bên ngoài.
3. Tiết kiệm đáng kể chi phí và thời gian, bao gồm giảm 80% chi phí đi lại của người hướng dẫn:
   1. Đối với nhân viên: Giờ đây họ chỉ cần đi lại trong khu vực hoặc khu vực lân cận đến trung tâm XR gần nhất, với sự lựa chọn giữa Brussels, Frankfurt, Munich và Zurich.
   2. Đối với các giảng viên cao cấp: Trước đây, họ phải bay từ trụ sở đến Brussels hoặc Zurich, đặt khách sạn và mất hai ngày năng suất chỉ để thực hiện một kỳ thi kéo dài hai giờ.
   3. Bây giờ, họ làm việc từ trụ sở chính (ví dụ: Frankfurt) và sử dụng NMY System Operator (thông qua bảng điều khiển trên máy tính bảng hoặc máy tính để bàn) để kết nối từ xa cho việc đào tạo. Họ có thể thấy chính xác những gì người tập sự thấy, đánh giá kỳ thi theo thời gian thực và kích hoạt các kịch bản căng thẳng trực tiếp (như khói hoặc lỗi kỹ thuật) chỉ bằng một nút bấm.
4. Sự cộng hưởng của bản sao kỹ thuật số: Một khi một máy bay cực kỳ phức tạp được số hóa, tài nguyên 3D đó sẽ được tái sử dụng trên toàn bộ tập đoàn. Tiếp viên hàng không sử dụng nó cho các cuộc diễn tập an ninh và dịch vụ, trong khi đội ngũ hàng hóa sử dụng nó cho hậu cần mặt đất và xử lý kỹ thuật. Triết lý "xây dựng một lần, triển khai vô tận" này tối đa hóa ROI tài nguyên trên toàn tổ chức.
5. Mức độ tương tác cao của người học: Dựa trên mô hình học tập độc quyền của NMY, các cơ chế tương tác, trò chơi hóa biến việc tuân thủ thường ngày thành một trải nghiệm hấp dẫn. Các khảo sát sau đào tạo nhất quán cho thấy người học thích khóa đào tạo trực quan, thực hành này.

Unity Industry: Nền tảng kỹ thuật cho đào tạo XR doanh nghiệp hàng không

Unity Industry là nền tảng phát triển cốt lõi của NMY, cho phép họ xử lý toàn bộ phổ thực tế hỗn hợp.

Theo Sebastian Demmerle, CEO của NMY, “(Unity Industry) đóng vai trò là động cơ chính thúc đẩy chiến lược phần mềm đa nền tảng của chúng tôi.” Với kiến trúc và công cụ linh hoạt của Unity, chúng tôi có thể đưa các cảnh 3D lớn, phức tạp (như toàn bộ chiếc Boeing 777F hoặc nội thất cabin chi tiết) lên các thiết bị VR di động độc lập cũng như các thiết bị màn hình phẳng, và mở rộng quy mô cũng như duy trì các ứng dụng đào tạo quan trọng về an toàn, độ trung thực cao này cho Tập đoàn Lufthansa.”

Quy trình "xây dựng một lần, triển khai mọi nơi" của Unity cho phép NMY duy trì tính độc lập về phần cứng và chọn thiết bị phù hợp với các ràng buộc vận hành, bảo mật hoặc hậu cần cụ thể của khách hàng. Các nền tảng mục tiêu hiện tại của họ là:

• Standalone và PCVR: Các ứng dụng không gian có độ đắm chìm cao được triển khai trên các tai nghe VR di động cũng như các thiết lập PCVR cao cấp, có dây.
• Các phương án dự phòng cho di động và máy tính để bàn: Xuất các tài sản và logic 3D chính xác một cách liền mạch sang máy tính bảng iOS/Android (điều khiển cảm ứng), ứng dụng máy tính để bàn (chuột/bàn phím) và trình duyệt web.

Xây dựng một hệ sinh thái XR được chứng nhận toàn cầu, quy mô doanh nghiệp đòi hỏi một quy trình sản xuất có cấu trúc và tối ưu hóa. Đội ngũ phát triển của NMY bao gồm 15-20 chuyên gia, với quy trình phát triển chính của họ được chia thành các giai đoạn sau.

1. Nền tảng, thiết lập và kiến trúc mô-đun

Quy trình: Trước khi nhập dữ liệu CAD nặng từ các nhà sản xuất máy bay, NMY đã thiết lập một kiến trúc dự án mạnh mẽ, mô-đun. Bởi vì hệ sinh thái này trải dài từ VR độc lập, PCVR, máy tính bảng và các ứng dụng máy tính để bàn, khả năng tái sử dụng mã nguồn và quản lý phụ thuộc sạch là rất quan trọng.

Đội ngũ kỹ thuật cốt lõi của họ, bao gồm các kỹ sư phần mềm XR và nhà phát triển Unity, viết logic C# điều khiển các Sequences đào tạo và cơ chế tương tác của khách hàng. Bằng cách triển khai các giải pháp khung nội bộ và các hệ thống mô-đun, các kỹ sư của họ cung cấp một nền tảng ổn định, bền vững và đáng tin cậy được thiết kế cho khả năng bảo trì lâu dài.

Các công cụ Unity Industry chính:

• Trình quản lý gói Unity (UPM): UPM cho phép NMY đóng gói các hệ thống độc quyền của họ thành các gói được kiểm soát phiên bản, giúp tính mô-đun chéo dự án, theo Sebastian Demmerle, "dễ dàng như cài đặt một plugin."
• Unity ScriptableObject: ScriptableObjects là một thành phần thiết yếu của kiến trúc dự án vì chúng cho phép sự tách rời lỏng lẻo giữa lớp dữ liệu và các thành phần thực thi trong cảnh.
  • Họ giúp các nhà phát triển của NMY dễ dàng triển khai các mẫu thiết kế như Model-View-Presenter ngay cả trong lớp trừu tượng của một engine 3D. Chúng cũng cho phép họ triển khai một loạt các phương pháp dựa trên tài nguyên như hệ thống sự kiện, kiểu dữ liệu hoặc bộ nhớ biến có thể chia sẻ, giúp giữ cho mã sạch và tránh ngữ cảnh tĩnh.

"Kiến trúc mô-đun và có thể mở rộng của Unity, kết hợp với framework C# .NET mạnh mẽ, làm cho nó trở thành một bộ công cụ cực kỳ linh hoạt," Mark Peter, trưởng nhóm phát triển tại NMY, cho biết. Chúng ta có thể nhanh chóng tạo các bản dựng MVP bằng cách sử dụng các API cấp cao. Khi giải quyết các thách thức phức tạp hơn, chúng ta có thể tận dụng các tính năng cấp thấp mạnh mẽ như Addressables, DOTS (Data-Oriented Technology Stack), trình biên dịch Burst và hệ thống tác vụ C# để mang lại hiệu suất cần thiết. Cuối cùng, điều này cho phép chúng ta triển khai đào tạo hàng không chất lượng cao, đa nền tảng mà không làm giảm tính chân thực, ngay cả trên VR độc lập.

Kiến thức kỹ thuật sâu hơn từ Unity

• Danh sách phát hướng dẫn các mẫu lập trình game
• Giới thiệu các khái niệm, tính năng & mẫu DOTS cho các nhà phát triển Unity nâng cao
• Tạo kiến trúc trò chơi module trong Unity với ScriptableObjects

2. Sản xuất tài nguyên và nghệ thuật kỹ thuật

Quy trình: Các đội ngũ nghệ thuật 3D và nghệ thuật kỹ thuật của NMY tối ưu hóa tất cả các tài sản để đảm bảo môi trường máy bay tỷ lệ 1:1 chạy ở tốc độ khung hình không bị giật trên GPU VR di động. Giai đoạn này cũng bao gồm việc tích hợp các hình đại diện người thật để đóng vai trò là huấn luyện viên hoặc hành khách ảo.

Ngoài việc tối ưu hóa tài nguyên, các nghệ sĩ kỹ thuật của NMY cấu hình shader, nướng ánh sáng và sử dụng Universal Render Pipeline (URP) để duy trì tốc độ khung hình hiệu suất cao. Họ cũng đảm bảo rằng mọi bình chữa cháy ảo, cửa cabin và xe nâng hàng đều di chuyển và phản ứng với độ chính xác vật lý 1:1.

Các công cụ Unity Industry chính:

• Universal Render Pipeline (URP): URP cung cấp các quy trình làm việc cho phép các nghệ sĩ và nghệ sĩ kỹ thuật tạo ra đồ họa tối ưu hóa một cách hiệu quả trên nhiều nền tảng, từ thiết bị di động đến các máy chơi game và PC cao cấp.
• Tính toán Lightmap Baker và xAtlas: Những điều này rất quan trọng cho việc tối ưu hóa môi trường của họ. Họ tích hợp ánh sáng có độ trung thực cao vào các cảnh tĩnh và xử lý việc gộp bản đồ vân bề mặt, giữ mức sử dụng bộ nhớ thấp trong khi vẫn duy trì tính chân thực của ảnh.
• Shader Graph: Các nghệ sĩ kỹ thuật của họ có thể lập trình trực quan các vật liệu động, tùy chỉnh (chẳng hạn như kính tương tác, khói hoặc làm nổi bật các trạng thái nguy hiểm) mà không cần chi phí mã hóa nặng nề.
• Hỗ trợ I/O đường ống: Họ sử dụng các đường ống I/O để kết nối trực tiếp phần mềm hoạt hình nhân vật bên ngoài với Unity, bao gồm bộ đồ chuyển động Rokoko, Character Creator (CC5) và iClone để tạo chuyển động sống động cho các hình đại diện kỹ thuật số.

"Nếu một công cụ cụ thể không tồn tại, kiến trúc mở của Unity cho phép chúng tôi tự phát triển nó và mở rộng nó trên các dự án doanh nghiệp khác," Sebastian Demmerle cho biết.

Kiến thức kỹ thuật sâu hơn từ Unity

• Tạo các shader và hiệu ứng hình ảnh phổ biến với Universal Render Pipeline
• Giới thiệu về URP cho những nhà sáng tạo nâng cao

3. Thiết kế tương tác và phát triển XR cốt lõi

Quy trình: Ở giai đoạn này, các kỹ sư phần mềm xây dựng logic huấn luyện cốt lõi. Mục tiêu chính là loại bỏ sự lo lắng về công nghệ cho người dùng cuối bằng cách đảm bảo các tương tác tự nhiên, trực quan với môi trường ảo trên tất cả các nền tảng được hỗ trợ.

Các công cụ Unity Industry chính:

• XR Interaction Toolkit và XR Hands: Những gói này tạo thành xương sống của khuôn khổ đào tạo của họ. NMY đã triển khai các tương tác tùy chỉnh, dành riêng cho việc huấn luyện và các tương tác bằng tay tự nhiên để phi hành đoàn và nhân viên sân bay có thể vận hành các công cụ ảo, mở cửa, gạt công tắc và cầm bình chữa cháy mà không cần các bộ điều khiển cồng kềnh.
• Vật lý 3D tích hợp của Unity: NMY đã tận dụng công cụ vật lý 3D tích hợp của Unity và High Definition Render Pipeline để tái tạo nội thất cabin, hầm hàng và thiết bị hạng nặng chân thực ở tỷ lệ 1:1.

Kiến thức kỹ thuật sâu hơn từ Unity

• Chiếu sáng và môi trường trong High Definition Render Pipeline
• Tạo danh sách phát game VR Multiplayer
• Tạo trải nghiệm thực tế ảo và hỗn hợp trong Unity

4. Giao diện người dùng (UI) và bản địa hóa nội dung toàn cầu

Quy trình: Các nhà thiết kế UI và tương tác triển khai các giao diện không gian và luồng người dùng bằng cách sử dụng UI Toolkit của Unity. Họ làm việc với cả menu không gian cho tai nghe VR và giao diện cảm ứng 2D có thể mở rộng cho các phiên bản dự phòng trên iPad và máy tính để bàn.

Ngoài ra, các mô-đun đào tạo phải hỗ trợ lực lượng lao động quốc tế của Lufthansa với văn bản hướng dẫn và giọng nói có sẵn bằng nhiều ngôn ngữ.

Các công cụ Unity Industry chính:

UI Toolkit: UI Toolkit được lấy cảm hứng từ các công nghệ web tiêu chuẩn, cho phép các nhóm tách cấu trúc, kiểu dáng và hành vi của giao diện người dùng, tương tự như cách bạn làm với HTML, CSS và JavaScript. Đối với NMY, nó cho phép các nhà thiết kế của mình điều chỉnh hiệu quả một thiết kế giao diện người dùng cơ bản để phù hợp với các khách hàng, kích thước màn hình và loại thiết bị khác nhau.

gói Localization Unity: Gói này được tích hợp trực tiếp với các nhà cung cấp nội dung bên ngoài như Google Sheets. Nó cho phép các chuyên gia về chủ đề và khách hàng thoải mái soạn thảo, dịch và xem xét các tài sản văn bản đa ngôn ngữ mà không cần chạm vào bản dựng của công cụ.

Kiến thức kỹ thuật sâu hơn từ Unity

• Tạo giao diện người dùng có khả năng mở rộng và hiệu suất cao với UI Toolkit trong Unity
• QuizU: Dự án mẫu UI Toolkit

5. Tối ưu hóa hiệu suất và phân phối nội dung

Quy trình: Giai đoạn xây dựng cuối cùng tập trung vào khả năng mở rộng lâu dài. Thay vì buộc người dùng tải xuống bản cập nhật ứng dụng lớn mỗi khi có máy bay hoặc kịch bản huấn luyện mới được thêm vào, NMY tách nội dung nặng khỏi lớp vỏ ứng dụng cốt lõi để triển khai liền mạch đến trung tâm XR.

Các công cụ Unity Industry chính:

gói Unity Addressables: Sebastian Demmerle gọi gói Addressables là "viên đạn bạc" của nhóm mình cho việc quản lý bộ nhớ. Thay vì buộc một tai nghe VR di động phải cấp phát toàn bộ máy bay cùng một lúc, gói Addressables cho phép NMY truyền các mô-đun chi tiết cao vào và ra khỏi bộ nhớ trong thời gian chạy. Điều này giữ cho việc sử dụng bộ nhớ GPU và hiệu suất tối ưu.

Bộ hồ sơ Unity: Các kỹ sư đảm bảo chất lượng của NMY dựa vào Unity Profiler và các công cụ gỡ lỗi trong engine khác để kiểm tra các bản dựng đa nền tảng, giám sát việc sử dụng bộ nhớ để ngăn ngừa sự cố phần cứng, và xác nhận rằng logic chấm điểm kiểm tra tự động được kích hoạt chính xác trong các điều kiện căng thẳng ảo như nguy cơ cháy, khói hoặc các hoạt động xếp hàng hóa phức tạp.

Kiến thức kỹ thuật sâu hơn từ Unity

• Tối ưu hóa hiệu suất trò chơi của bạn cho di động, XR và web trong Unity
• Hướng dẫn tối thượng để phân tích hiệu năng game Unity

6. Tích hợp hệ thống và doanh nghiệp có khả năng mở rộng

Quy trình: Unity đóng vai trò là trung tâm kết nối phần mềm máy khách tương tác của NMY với kiến trúc doanh nghiệp phía sau.

Các công cụ Unity Industry chính:

• Khả năng mở rộng và tích hợp của Unity: NMY có thể liên kết các ứng dụng máy khách Unity với bảng điều khiển NMY System Operator độc quyền của họ, cho phép người hướng dẫn giám sát các luồng video trực tiếp, tiêm các mối nguy hiểm gây căng thẳng theo thời gian thực (như khói hoặc lỗi hệ thống) và đánh giá học viên từ xa. Khả năng nền tảng này đã giúp Lufthansa cắt giảm chi phí đi lại của người huấn luyện tới 80%.
• API Tùy chỉnh: Bằng cách tích hợp các API tùy chỉnh vào Unity, các ứng dụng của NMY có thể truyền dữ liệu đạt hoặc trượt kỳ thi trực tiếp đến hệ thống quản lý học tập (LMS) và cơ sở dữ liệu nhân sự của Lufthansa mà không cần sự can thiệp thủ công.

Hệ sinh thái đào tạo XR của NMY mới chỉ là sự khởi đầu

"Chúng ta chưa đến vạch đích," Sebastian Demmerle nói. Nền tảng đào tạo XR của chúng tôi sẽ là hệ điều hành cho một hệ sinh thái doanh nghiệp lớn hơn nhiều. Trọng tâm của chúng tôi là chuyển đổi nền tảng này từ một công cụ đào tạo thuần túy thành một môi trường điện toán không gian thông minh, được kết nối.

Sebastian và đội của anh ấy đã phác thảo các bước tiếp theo cho hệ sinh thái XR của họ và cách Unity sẽ giúp họ đạt được điều đó:

Mở rộng hệ sinh thái

Bước tiếp theo ngay lập tức là mở rộng quy mô ngang nhanh chóng. Họ đang mở rộng vượt ra ngoài an ninh cabin và xử lý hàng hóa để bao gồm các quy trình Bảo trì, Sửa chữa và Đại tu (MRO) phức tạp, làm quen cho phi công và triển khai toàn bộ đội bay (mở rộng từ một loại máy bay đến toàn bộ đội bay của Lufthansa).

Unity Industry giúp như thế nào: Họ sẽ tiếp tục dựa vào gói Addressables và Unity Package Manager. Họ có thể tạo ra các tài sản và logic 3D mới và truyền phát chúng dưới dạng nội dung DLC mô-đun đến các trung tâm ứng dụng hiện có, đảm bảo khả năng mở rộng hiệu quả mà không làm phình to ứng dụng cốt lõi.

Tích hợp các giải pháp AI và các kịch bản động

Họ sẽ chuyển từ các kịch bản huấn luyện có kịch bản sang các môi trường năng động, khó lường do AI điều khiển. Họ nhằm mục đích triển khai các NPC thông minh (nhân vật không phải người chơi) để nhập vai thực tế, chẳng hạn như giảm leo thang hành khách mất trật tự, tương tác với kiểm soát không lưu, hoặc xử lý các chuỗi nguy hiểm được tạo động học và thích ứng với trình độ của người dùng.

Unity Industry giúp như thế nào: “Unity Sentis sẽ là một yếu tố thay đổi cuộc chơi đối với chúng tôi ở đây,” Sebastian Demmerle cho biết. "Sentis cho phép chúng ta chạy các mô hình AI mạng nơ-ron tiên tiến cục bộ, trực tiếp trong thời gian chạy Unity trên tai nghe VR." Điều này có nghĩa là chúng ta có thể cung cấp các lệnh thoại được điều khiển bằng AI, dịch thuật thời gian thực và các avatar thông minh với độ trễ đám mây bằng không và quyền riêng tư dữ liệu tuyệt đối, đây là yêu cầu nghiêm ngặt đối với an ninh hàng không doanh nghiệp.

Robot và tự động hóa

Ngành hàng không đang nhanh chóng hướng tới tự động hóa sân đỗ. NMY muốn mở rộng các Digital Twins của mình để bao gồm các xe kéo hành lý tự hành, thiết bị xử lý mặt đất bằng robot và điều khiển từ xa. Mục tiêu là sử dụng môi trường XR chính xác đó không chỉ để huấn luyện con người, mà còn để mô phỏng, huấn luyện và giám sát các hệ thống robot trong thế giới thực.

Unity Industry giúp như thế nào: Các khả năng của Unity Robotics sẽ cho phép NMY kết nối các cảm biến robot trong thế giới thực với môi trường 3D ảo của họ. Họ sẽ có thể mô phỏng dữ liệu LiDAR hoặc camera trong Unity để huấn luyện các mô hình học máy cho robot, hoặc truyền dữ liệu đo từ xa thời gian thực từ robot sân bay vật lý vào bản sao kỹ thuật số VR, cho phép người vận hành con người giám sát hoặc điều khiển từ xa máy móc.

CTA: Tìm hiểu thêm về Unity Simulation Pro early access

Thiết bị đeo tiên tiến, xúc giác và sinh trắc học

NMY nhằm mục đích tích hợp "thiết bị đeo tiên tiến" vào trải nghiệm XR, bao gồm găng tay và bộ đồ phản hồi xúc giác để mô phỏng sức cản vật lý của máy móc hạng nặng hoặc lửa. Họ cũng muốn sử dụng theo dõi mắt và cảm biến sinh trắc học để đo tải nhận thức và mức độ căng thẳng của người tập sự trong kỳ thi. Và họ hy vọng nhắm mục tiêu vào kính thông minh AR nhẹ cho hỗ trợ bảo trì tại chỗ.

Unity Industry giúp: Các gói Unity’s XR Plug-in Management, OpenXR, và XR Interaction Toolkit sẽ cung cấp một cầu nối tiêu chuẩn hóa để tích hợp các thiết bị đeo tiên tiến mà không cần viết lại logic ứng dụng cốt lõi.

"Unity đã là người bạn đồng hành đáng tin cậy của chúng tôi từ ngày đầu tiên," Sebastian Demmerle cho biết. Chúng tôi mong chờ xem NMY sẽ tiếp tục đổi mới như thế nào trong tương lai và thúc đẩy các khả năng công nghệ và đồ họa của Unity Industry.