Bên trong sianian, đặt cược lớn của amazon vào thực tế ảo và tăng cường

Amazon đang có một bước tiến lớn vào không gian thực tế ảo và tăng cường với Sumerian, một nền tảng phát triển tất cả trong một có thể xây dựng các ứng dụng AR và VR cho điện thoại thông minh và tai nghe, và các ứng dụng AR / VR đủ nhanh sẽ chạy đúng trong trình duyệt của bạn.

Trong những trải nghiệm này, Sumerian có thể tạo ra những thế giới ảo đắm chìm được tạo ra bởi các nhân vật "chủ nhà" 3D3D được đưa vào cuộc sống bởi cùng một công nghệ trí tuệ nhân tạo cung cấp năng lượng cho Alexa.

Sumerian là nền tảng bất khả tri. Thay vì phát triển thiết bị hoặc tai nghe mang thương hiệu của riêng mình, Amazon đã chọn tích hợp với các dịch vụ hiện có. Sumerian được xây dựng trên các tiêu chuẩn web mở và hỗ trợ cả ARKit của Apple và ARCore của Google, nghĩa là người tạo ứng dụng có thể xây dựng một ứng dụng Sumerian chạy trên Android, iOS, Oculus Rift, HTC Vive và hơn thế nữa.

Là một bổ sung mới cho Amazon Web Services, Sumerian được định giá bằng cách sử dụng mô hình dựa trên việc sử dụng dịch vụ đó thay vì đăng ký và kết nối với các dịch vụ AWS khác.

Amazon đã phát hành bản xem trước Sumer vào tháng 11 khi được công bố lần đầu tiên, nhưng trước khi ra mắt dự kiến ​​vào tháng 5, PCMag đã có một cái nhìn độc quyền bên trong Sumerian và một vài ứng dụng khách hàng đầu tiên.

Kyle Roche, Tổng Giám đốc của Amazon Sumerian, đã đưa tôi qua bản demo của nền tảng tạo ứng dụng 3D. Tôi đã tham quan trình chỉnh sửa ứng dụng kéo và thư viện đối tượng 3D của Sumerian, Visual State Machine để tạo kịch bản tự động phức tạp và tham gia vào quá trình tạo máy chủ thông minh nhân tạo, bạn có thể trò chuyện đầy đủ với những trải nghiệm ảo này. .

Tôi cũng đã nói chuyện với Marco Argenti, một phó giám đốc không chỉ giám sát AR / VR, mà cả các bộ phận AWS Mobile, Serverless Computing và IoT. Amazon có những kế hoạch đầy tham vọng cho Sumerian và tầm nhìn xa hơn về vai trò tăng cường và thực tế ảo kết hợp với AI sẽ đóng vai trò trong tương lai kết nối của chúng tôi.

• Tại sao Amazon đặt cược vào AR / VR

  Lội vào một ngành hoặc lĩnh vực hoàn toàn mới chưa bao giờ ngừng Amazon trước đây. Chỉ cần nhìn vào Whole Food, Amazon Video, hoặc những nỗ lực của nó trong ngành công nghiệp chăm sóc sức khỏe và dược phẩm.

  Roche nói đùa rằng cái tên Sumerian xuất phát từ cuốn sách khoa học viễn tưởng Snow Crash (mà Amazon thực sự thích nghi như một bộ) và ý tưởng cho "chủ nhà" đến từ Westworld của HBO. Nhưng theo Argenti, quyết định của Amazon vào không gian AR / VR thực sự có ba yếu tố chính: sự xuất hiện của thực tế tăng cường dựa trên điện thoại thông minh; cơ hội VR chưa được khai thác trong thị trường doanh nghiệp với doanh nghiệp (B2B); và giúp khách hàng AWS giải quyết các điểm đau bằng những việc họ đã cố gắng thực hiện.

  "Những tín hiệu này đủ mạnh để chúng tôi thực sự bắt đầu tham gia vào quá trình thiết kế Sumerian. Theo cách cổ điển của Amazon, chúng tôi bắt đầu làm việc lạc hậu từ các trường hợp sử dụng của khách hàng và sau đó tài trợ cho một nhóm phát triển để xây dựng sản phẩm", Argenti giải thích.

  Các ứng dụng B2B bao gồm các tình huống như biển báo kỹ thuật số tương tác (nghĩ quảng cáo ba chiều nói chuyện khổng lồ từ Blade Runner: 2049 ), đào tạo ảo và một loạt các trường hợp sử dụng Internet of Things công nghiệp, như sử dụng cảm biến để tạo cặp song sinh kỹ thuật số và mô phỏng phức tạp. Argenti cũng nhấn mạnh tầm quan trọng của AR dựa trên điện thoại thông minh đạt đến điểm uốn thông qua ARKit và ARCore.

  "Máy ảnh đang trở thành một công cụ rất mạnh mẽ để tương tác với thực tế và khám phá thế giới xung quanh bạn", ông nói. "Bộ xử lý đồ họa nhanh có thể che phủ thông tin trong thời gian thực và cảm biến có thể giúp xây dựng thực tế 3D. Ý tưởng là bạn có một cảm biến nhận biết ngữ cảnh, chất lượng cao, độ phân giải cao trong tay hàng tỷ người."



Cách Amazon xây dựng Sumerian

Amazon bắt đầu suy nghĩ về AR và VR sẽ như thế nào đối với khách hàng AWS vào cuối năm 2016 và bản xem trước đã ra mắt tại AWS re: Invent khoảng một năm sau. Ở giữa, một vài điều đã xảy ra.

Đầu tiên, Amazon đã mua một công ty khởi nghiệp Thụy Điển bị phá sản có tên là Goo Technologies; môi trường sáng tạo 3D của nó, Goo Tạo, đã trở thành nền tảng của môi trường phát triển tích hợp (IDE) của Sumerian.

Mô hình 3D trực quan của Goo Tạo cũng là một dịch vụ đám mây dựa trên web, nhưng Amazon đã tiến thêm một bước bằng cách chuyển back-end sang AWS. Có rất nhiều lợi ích khi xây dựng trên cơ sở hạ tầng đám mây có thể mở rộng mà bạn đã sở hữu, nhưng một lợi ích lớn đang làm giảm đáng kể độ trễ. Roche cho biết một trong những điểm bán hàng lớn nhất của Sumer là dù trình soạn thảo này mạnh đến đâu, không có gì để tải xuống hoặc cài đặt. Trong bản demo, Sumerian đã tải từ URL trình duyệt trong vài giây. Ngay cả khi thực hiện xử lý ngôn ngữ tự nhiên thời gian thực (NLP) và hiển thị hình ảnh động phức tạp cũng không làm chậm nó nhiều.

Cũng như các nền tảng phát triển mã thấp, Sumerian có thể được sử dụng ở mức cơ bản mà hầu như không có kinh nghiệm dành cho nhà phát triển. Tuy nhiên, các nhà lập trình dữ liệu và dữ liệu có thể đi sâu hơn rất nhiều với các API lập trình và giao diện dòng lệnh của Sumerian để tùy chỉnh các cảnh và viết logic ứng dụng phức tạp.

"Chúng tôi muốn có một trải nghiệm khi bạn nhấp và bạn ngay lập tức có mặt, " Argenti nói. "Sau đó, bạn có các công cụ đồ họa 3D nơi bạn có thể kéo và thả các đối tượng. Sumerian là công cụ trực quan có thể liên kết những gì xảy ra khi các hành động hoặc sự kiện diễn ra, có khả năng mà không cần viết một dòng mã."



Tạo ứng dụng Sumer 3D

Triết lý thiết kế rộng hơn mà Amazon theo sau với Sumerian là củng cố trải nghiệm sáng tạo càng nhiều càng tốt. Roche cho biết ý tưởng là che giấu rất nhiều nhiệm vụ phát triển lặp đi lặp lại, vì vậy quy trình cơ bản để xây dựng ứng dụng Sumer là giống nhau bất kể nền tảng AR và VR mà cuối cùng bạn xuất bản nó.

Nó bắt đầu bằng việc chọn một mẫu hoặc nhảy thẳng vào để tạo ra một cảnh mới. Một số mẫu mặc định của Sumer bao gồm các cảnh như không gian văn phòng, phòng đào tạo và nhà kho, tàu chở hàng và lửa trại ngoài trời. Trình chỉnh sửa chính hỗ trợ WebGL và WebVR và được trình bày theo cách tương tự như nhiều công cụ mã thấp mà chúng tôi đã thử nghiệm.

Bên trái là bảng điều khiển thực thể. Một thực thể về cơ bản là một bảng trong cơ sở dữ liệu giúp bạn quản lý dữ liệu được kéo vào ứng dụng của bạn. Bên dưới đó là cửa sổ nội dung, là nơi bạn có thể tìm kiếm các đối tượng bạn muốn kéo vào một cảnh hoặc mở thư viện tài sản đầy đủ của tất cả các mô hình 3D của Sumerian. Roche cho biết Sumerian có một số thư viện đối tượng nguồn mở và tích hợp với API của Sketchfab. Amazon cũng quan tâm đến việc tích hợp với các nền tảng như TurboSquid và thư viện đối tượng Poly AR / VR của Google, ông nói. Bạn cũng có thể nhập tài sản của riêng mình vào Sumerian và thả chúng vào một cảnh.

"Bảng điều khiển tài sản có thể phục vụ như một khu vực thả cho một đường ống điều chỉnh, " Roche giải thích. "Bạn có thể kéo hầu hết các định dạng tệp 3D phổ biến; chúng tôi sẽ chuyển đổi chúng, tối ưu hóa chúng và lưu trữ chúng cho bạn. Một trong những điều chúng tôi làm ở mặt sau là nếu bạn sử dụng cùng một tài sản trong nhiều cảnh, chúng tôi sẽ Tôi thực sự sẽ tạo một liên kết tham khảo cho bạn. "

Ở giữa màn hình là khung vẽ chính, nơi bạn có thể kéo và thả các tài sản và mô hình 3D vào một cảnh. Ở góc của khung vẽ là một nút để khởi chạy bản xem trước WebVR về cảnh của bạn.

Bên dưới đó là trình chỉnh sửa dòng thời gian, hoạt động tương tự như các công cụ chỉnh sửa video. Khi bạn kéo hình động và âm thanh vào khung và sử dụng Visual State Machine để tạo hành động, hành vi lưu trữ và tiến trình sự kiện, tất cả sẽ hiển thị trong dòng thời gian, nơi bạn có thể điều chỉnh cách một trạng thái chuyển sang trạng thái khác.

Cột bên phải là bảng kiểm tra, hiển thị chi tiết về bất kỳ thành phần nào bạn đang xem và cách bạn có thể tùy chỉnh chúng. Đối với một mô hình có thể có hàng trăm biến thể khác nhau, bạn có thể điều chỉnh những thứ như thuộc tính và kết cấu mà không thực sự chạm vào cảnh.



Chiến lược của Amazon: Hòa nhập với mọi người

Sumerian không chỉ chơi trong không gian phát triển 3D với các nền tảng như Unity, Unreal Engine và Vuforia, mà còn trong hệ sinh thái AR / VR rộng hơn cùng với ARKit, ARCore và Windows Hỗn hợp thực tế. Roche cho biết Sumerian áp dụng triết lý "xây dựng một lần, chạy mọi nơi" cho các ứng dụng AR / VR và đặc biệt là cho các nhà phát triển doanh nghiệp.

Roche nói: "Các nhà phát triển 3D chuyên nghiệp hoặc các nhà làm phim hoạt hình chuyên nghiệp có một studio làm việc với họ. Nhưng hầu hết là các nhà phát triển web hoặc di động đang học một cái gì đó như Unity trong công việc". "Unity rất tuyệt, nhưng để thực sự giỏi thì khó hơn nhiều so với việc sử dụng các kỹ năng mà họ có như thế, nếu họ giỏi JavaScript, và biến chúng thành 3D theo cách đó. Vì vậy, chúng tôi quyết định tập trung vào đó một phần của thị trường. "

Sumerian hỗ trợ một số tiêu chuẩn mở cốt lõi: WebGL, WebAR, WebVR và khung WebXR sắp tới sẽ mang các ứng dụng AR / VR đến tất cả các thiết bị và trình duyệt trên các nền tảng. World Wide Web Consortium (W3C) sẽ bỏ phiếu để phê chuẩn WebXR trong những tháng tới. Tại thời điểm đó, các ứng dụng Sumer sẽ có thể chạy trực tiếp trong các trình duyệt.

Giữa WebGL, WebVR và WebXR, Sumerian hoàn toàn không dựa trên nền tảng và Sumerian đã xuất bản các trình bao bọc riêng để tích hợp trực tiếp với ARKit và ARCore cho các ứng dụng AR dựa trên điện thoại thông minh. Roche cho biết Sumerian có thể xây dựng các ứng dụng cho bất kỳ nền tảng nào hỗ trợ WebVR, có nghĩa là không chỉ Oculus Rift và HTC Vive mà còn cả Samsung Gear VR, Google Daydream View và các nền tảng khác. Sumerian cũng đang hợp tác chặt chẽ với nhóm Google Chrome trên WebXR cho các ứng dụng dựa trên trình duyệt.

Người chơi chính khác trong phòng là Microsoft. Mặc dù Amazon đã không đi xa để nói Sumerian sẽ tích hợp với hệ sinh thái Thực tế hỗn hợp Windows, Roche đã nói rằng phiên bản RS4 mới nhất của Microsoft HoloLens bao gồm hỗ trợ WebAR, có nghĩa là Sumerian có thể chạy các cảnh HoloLens. Amazon cũng đang xem các tai nghe khác từ các công ty như Magic Leap và Meta, nhưng cách tiếp cận của nó mang lại cho Sumerian lợi ích của tính linh hoạt.

"Chúng tôi đã đưa ra một lựa chọn. Chúng tôi có thể đã đi vào một con đường tạo ra thứ độc quyền của riêng mình và đẩy các nhà phát triển về phía đó, " Argenti nói. "Điều chúng tôi quyết định thay vào đó là càng rộng càng tốt trong việc hỗ trợ những gì chúng tôi nghĩ sẽ là một thị trường lớn. Một khi mọi thứ chuyển sang WebXR, toàn bộ hệ sinh thái thiết bị đi kèm với nó. Chúng tôi sẽ theo đuổi nền tảng cơ bản."

• Máy chủ AI của Sumer là người thay đổi cuộc chơi

  Chủ nhà là một trong những điểm bán hàng độc đáo nhất của Sumerian. Máy chủ lưu trữ là một nhân vật hoạt hình 3D mà bạn có thể đặt vào cảnh AR hoặc VR. Người dùng có thể đặt câu hỏi cho chủ nhà và nhà phát triển có thể viết kịch bản một tập hợp hành động, hành vi, cử chỉ và chuyển động phức tạp mà chủ nhà có thể thực hiện khi họ có cuộc trò chuyện và đi bộ xung quanh các cảnh. Amazon đã truyền cảm hứng cho các máy chủ từ tất cả các nơi, bao gồm các trò chơi trực tuyến như Cuộc sống thứ hai và The Sims, Roche nói.

  Sumerian hiện có hai máy chủ mặc định là Crist Cristine và Preston, nhưng sẽ ra mắt một loạt các máy chủ trong suốt năm nay. Amazon xây dựng rất nhiều sắc thái vào các nhân vật AI này. Roche cho tôi xem bản demo của Cristine, nơi anh ta kéo người dẫn chương trình vào cảnh đó, và mở bảng điều khiển để tùy chỉnh cảm xúc, nét mặt và cử chỉ của cô ấy. Amazon sẽ tự động tạo cử chỉ khi chủ nhà nói chuyện dựa trên quá trình xử lý ngôn ngữ tự nhiên của cuộc hội thoại. Vì vậy, nếu Cristine nói "Xin chào", nó có thể kích hoạt cử chỉ vẫy tay.

  Với một thứ gọi là hệ thống quan tâm, bạn có thể kiểm tra một hộp trong trình chỉnh sửa để mắt chủ nhà luôn chú ý đến máy ảnh. Vì vậy, nếu bạn đang đeo HTC Vive Pro đi bộ quanh không gian 360 độ, chủ nhà có thể theo dõi bạn. Nếu đó là một ứng dụng AR được kết nối với máy ảnh trên điện thoại thông minh của bạn, Roche giải thích rằng hệ thống học sâu Rekognition của Amazon có thể chạy phân tích khuôn mặt của cả bạn đang ở đâu và khuôn mặt của bạn trong khung hình để làm cho nó giống như máy chủ đang nhìn lại qua màn hình của bạn trực tiếp tại bạn. Nó cho bạn ảo giác về giao tiếp bằng mắt.

  Khách hàng cũng có thể tạo các máy chủ tùy chỉnh của riêng mình từ đầu bằng cách sử dụng Maya SDK của Amazon, nhưng Amazon cung cấp bộ xương cơ bản mà từ đó bạn có thể điều chỉnh ngoại hình, phương ngữ và cách truyền tải, ngôn ngữ, v.v. Về lâu dài, Amazon đang suy nghĩ về các cách để tạo ra máy chủ dễ dàng hơn. Argenti đã nói về ý tưởng của một trình tạo máy chủ cho hình đại diện của người thứ nhất hoặc sử dụng nhận dạng khuôn mặt để khớp các nhân vật được kết xuất với người thật.

  "Kết hợp với Rekognition, nếu chúng tôi thủ tục tạo ra càng nhiều nhân vật này càng tốt, chúng tôi có thể cố gắng ghép bạn với hình đại diện gần nhất. Chúng tôi sẽ chụp ảnh của bạn và chạy nhận dạng khuôn mặt ngược và ghép nó với một nhân vật ngẫu nhiên để cung cấp cho bạn một máy chủ trông giống như một phiên bản của bạn. "

  Argenti giải thích cách tích hợp các dịch vụ AWS khác như dịch vụ xử lý ngôn ngữ tự nhiên Amazon Hiểu có thể khiến các máy chủ thậm chí còn sống động hơn. Hiểu phân tích văn bản để trích xuất siêu dữ liệu về những thứ như phân tích tâm trạng và tình cảm. Vì vậy, chủ nhà có thể có biểu cảm hoặc cách nói hoặc khuôn mặt khác nhau dựa trên tâm trạng của người mà họ đang tương tác.

  "Nếu họ tức giận, có lẽ chủ nhà đã trấn tĩnh họ", Argenti nói. "Có một sự tiến hóa không chỉ trong cách chúng ta truyền đạt thông tin, mà cả cách chúng ta trình bày nó mặc dù phân tích tình cảm sâu sắc."



Kéo theo Dịch vụ thoại phía sau Alexa

Chủ nhà không tốt lắm nếu họ không thể nói. Bạn không thể nói "Hey Alexa" trong ứng dụng Sumer giống như cách bạn có thể kích hoạt Cortana trong Windows Hỗn hợp thực tế. Thay vào đó, Amazon sử dụng API nhận dạng giọng nói tự động và hiểu ngôn ngữ tự nhiên đằng sau Alexa để cho phép chủ nhà có cuộc trò chuyện.

Sumerian được tích hợp với Amazon Lex và Amazon Polly. Polly là một dịch vụ chuyển văn bản thành giọng nói biến văn bản thành tập lệnh mà chủ nhà có thể nói. Lex là một công cụ NLP để xây dựng giao diện đàm thoại, đó là cách các máy chủ có thể hiểu và phản hồi lại những gì người dùng đang nói trong ứng dụng AR hoặc VR. Sumerian hiện hỗ trợ hơn hai chục ngôn ngữ thông qua Polly và có một tính năng hát nhép sẽ phù hợp với cử động miệng của chủ nhà với nhịp điệu của ngôn ngữ hoặc lời nói.

"Giọng nói là một phương tiện thực sự có ý nghĩa trong khi bạn đắm chìm trong AR hoặc VR, " Argenti nói. "Tôi muốn nói chuyện với một nhân vật nếu tôi có thể thấy nó đứng đó. Vì vậy, chúng tôi đã chọn hai trong số các công cụ này từ nhóm AI và cố gắng nhân cách hóa chúng. Chúng tôi muốn cảnh có thể lắng nghe và phản hồi với chúng tôi. bạn có thể lấy toàn bộ dòng chảy như bạn muốn cho một chatbot và chỉ cần kéo nó vào nhân vật. Theo nhiều cách, nó thực sự dễ dàng hơn việc xây dựng một kỹ năng Alexa. "



Logic kịch bản trong thế giới nhập vai

Máy trạng thái thị giác của Sumerian là nơi bạn có thể bố trí các chuỗi phức tạp và mô phỏng ảo. Sử dụng trình chỉnh sửa dòng thời gian trực quan hoặc giao diện JavaScript đầy đủ, người tạo và nhà phát triển ứng dụng có thể kịch bản logic kiểm soát cách máy chủ hoặc các đối tượng khác trong cảnh của bạn phản ứng với các hành động khác nhau. Ví dụ, Sumerian bao gồm một vật thể bay không người lái mà bạn có thể viết kịch bản để bay xung quanh.

Tất cả điều này trở nên phức tạp hơn khi bạn đưa các đối tượng trong thế giới thực vào phương trình. Vì Argenti cũng giám sát các bộ phận máy tính và IoT không có máy chủ tại AWS, anh đã nói về cách kết nối Sumerian với các dịch vụ AWS như Lambda và Greengrass có thể mở ra nhiều khả năng hơn cho các mô phỏng phức tạp. Greengrass là một cách để các mô hình học máy có thể chạy cục bộ trên chính các thiết bị IoT. Hãy suy nghĩ về việc đào tạo mô hình ML về dữ liệu mà nó nhận được từ một máy trên sàn nhà máy, sau đó kéo thuật toán đó vào Sumerian để mô phỏng chính máy đó bằng AI.

"Thực sự có thể có một thế giới giả lập trong AR và VR, nơi mỗi nhân vật hoặc đối tượng đều thông minh từ đào tạo học máy trong thế giới thực", Argenti nói. "Cuối cùng, bạn muốn cố gắng tạo lại thực tế theo cách thực tế nhất có thể. Hôm nay chúng ta có thể đến gần, nhưng vẫn chưa hoàn toàn từ quan điểm hành vi đến mô phỏng cách mọi thứ thực sự hoạt động."



Nhà khí tượng học mô phỏng của Weatherorms

Khi Amazon đưa tôi qua một vài bản demo khách hàng của Sumerian, ban đầu tôi rất ngạc nhiên khi cái đầu tiên là một ứng dụng thời tiết.

Nhưng như Tổng Giám đốc WeatherBug Olivier Vincent giải thích, thực tế ảo có ý nghĩa hơn đối với dữ liệu thời tiết hơn bạn nghĩ. Khi mọi người bắt đầu kiểm tra thời tiết của họ trong các ứng dụng thay vì xem dự báo trên TV, Vincent cho biết các báo cáo thời tiết đã mất một trong những điểm tốt nhất của họ: người dự báo thời tiết địa phương của bạn trước màn hình màu xanh lá cây.

"Thời tiết là để cho bạn biết những gì đang diễn ra tại một thời điểm nhất định ở một nơi nhất định. Bạn có thể thực hiện theo cách 2D đẹp mắt trong ứng dụng của mình để xem nhanh, nhưng chúng tôi biết những người thời tiết và phụ nữ nổi tiếng như thế nào trong những năm qua, " Vincent nói. "Vì vậy, ý tưởng là giới thiệu lại người thời tiết đó trong một trải nghiệm nhập vai hơn trong ứng dụng."

WeatherBug đã xây dựng một cảnh Sumerian với một phòng thu tin tức ảo với bàn neo và màn hình màu xanh lá cây, và đặt máy chủ Cristine mặc định của Amazon vào vai nhà khí tượng học. Ứng dụng lấy dữ liệu thời tiết hiện tại cho vị trí của bạn mà chủ nhà sẽ đọc lại cho bạn như một phần của dự báo thời tiết được cá nhân hóa. Từ ứng dụng WeatherBug chính, Vincent đã khởi chạy trình xem VR phóng to mô hình 3D của Manhattan khi Cristine đưa ra dự báo, hoàn thành với nhiệt độ cao và thấp và những bông tuyết rơi.



Addison, Người chăm sóc ảo

Công ty công nghệ quản lý sức khỏe mới có trụ sở tại Mexico, Electronic Caregiver đã có trải nghiệm Sumerian khác biệt nhiều.

Công ty cung cấp công nghệ cho người già như đeo được với nút trợ giúp y tế, nhưng họ cũng xây dựng một giải pháp gọi là Addision Care, giúp cắt giảm chi phí chăm sóc tại nhà và sử dụng AI đàm thoại để đánh giá nguy cơ té ngã của bệnh nhân cao tuổi. Công ty đang phát hành một ki-ốt cho các hiệu thuốc, bệnh viện và bác sĩ lâm sàng phân tích dáng đi của bệnh nhân bằng cách sử dụng máy học. Phần mềm này cũng sử dụng Addison, một máy chủ Sumerian tùy chỉnh, để đưa người dùng đi qua một bảng câu hỏi bằng lời nói về lịch sử mùa thu của họ.

"Bắt người cao niên áp dụng công nghệ không phải là quá dễ dàng", CTO Bryan Chasko của Electronic Caregiver nói. "Khi nó trở nên tốt hơn, công nghệ giọng nói sẽ tham gia vào thị trường đó. Bạn sẽ không bao giờ bắt họ phải ngồi xuống trước bàn phím và chuột, nhưng với Addison, họ có thể có một cuộc trò chuyện."

Người chăm sóc điện tử đã làm việc trên Addison trong nhiều năm, phát triển nhân vật 3D bằng cách sử dụng Amazon Lex và Polly. Công ty là một trong những khách hàng AWS đã giúp Amazon khái niệm hóa các điểm đau mà họ có thể giải quyết với Sumerian và cách tự động hóa đường ống tạo ứng dụng AR / VR.

Judah Tveito, một nhà phát triển ảo tại Electronic Caregiver, cho biết Sumerian đã thực hiện các quy trình mà họ đã làm việc trong nhiều tháng và biến nó thành một vài cú nhấp chuột. Công ty cũng đang làm việc trên một ứng dụng di động Addison.

Người chăm sóc điện tử cuối cùng hình dung Addison là một người chăm sóc ảo tại nhà, Chasko nói. Đối với người dùng cao tuổi sống một mình, AI có thể làm những việc như nhắc nhở họ uống thuốc hoặc tự động gọi 911 nếu bị ngã hoặc cấp cứu y tế khác.

Chasko nói: "Một trong những vấn đề lớn nhất mà chúng tôi cảm thấy có thể giải quyết là sự cô lập mà người cao niên cảm thấy khi họ sống một mình". "Chúng tôi thực sự muốn có một môi trường gia đình 24/7 vĩnh viễn, nơi khi bạn không nói chuyện với Addison, bạn đang ở trong phòng tắm và bạn bị ngã, chỉ cần có thể hét lên, 'Tôi cần sự giúp đỡ' có thể cứu nhiều mạng sống . "



Những người kiếm tiền: B2B và IoT

Amazon đã nói rất nhiều về cách các ứng dụng Sumer có thể sống trong các biển báo kỹ thuật số tương tác. Hãy tưởng tượng ai đó đi bộ qua sảnh khách sạn, trung tâm thương mại hoặc sân vận động và nhìn thấy một chủ nhà đi bộ dọc theo họ trên màn hình. Nghe có vẻ hơi ghê rợn, nhưng chủ nhà cũng có thể xử lý thông tin theo ngữ cảnh như vị trí để biến quảng cáo thành một cuộc trò chuyện được cá nhân hóa. Argenti coi các máy chủ là phần mở rộng ảo của thương hiệu của một công ty có thể thay đổi theo những gì doanh nghiệp cần.

"Nếu bạn đặt các ứng dụng này ra một nơi nào đó bằng máy ảnh, bạn có thể tưởng tượng một nhân vật 3D gắn kết với cá nhân bạn: biết bạn là ai, có thể là lần cuối bạn ở trong địa điểm, hoặc thậm chí là điều cuối cùng bạn đặt hàng", Argenti nói.

"Một tàu du lịch là một ví dụ điển hình. Chủ nhà có thể nói 'Này, dựa vào nơi bạn đang ở trên tàu ngay bây giờ, đặt chỗ của bạn sau 20 phút, bạn sẽ không làm điều đó. Bạn có muốn tôi đẩy nó lại không 15 phút? Ngoài ra còn có khía cạnh trực quan đối với những trải nghiệm bạn đang tạo lại. Một máy chủ nói chuyện với bạn về việc đi du lịch sẽ trông khác với một người nói với bạn về chiến lược tài chính của bạn. Thêm thông tin vị trí có thể thay đổi nhân vật tùy thuộc vào nơi họ tìm thấy chính mình, cách họ ăn mặc và cách họ di chuyển, sự phồng lên mà họ có. "

Amazon đang khám phá một loạt các ứng dụng B2B và IoT cho khách hàng Sumer. Về mặt công nghiệp, Argenti cho biết Nokia đã kết hợp một hệ thống với các cảm biến và trực quan hóa để giám sát môi trường bên trong các container vận chuyển để đo lường những thứ như nhiệt độ bên trong và độ hấp thụ sốc mà không thực sự mở chúng ra.

"Bạn có thể tưởng tượng một thế giới AR nơi chúng ta kết nối hàng triệu thiết bị với AWS và nhận được rất nhiều dữ liệu cảm giác đến từ thế giới thực", ông nói. "Sau đó, chúng ta có thể sử dụng AR với phép đo tam giác để xác định một đối tượng và hiển thị thông tin có liên quan trên đầu nó. Có một ứng dụng rất lớn ở đó trên mọi thứ từ dịch vụ và sửa chữa đến giám sát, an toàn, v.v."

Ngoài ra còn có các khả năng thương mại điện tử rộng lớn khi bạn làm việc với các tài sản ảo. Bất kỳ mô hình 3D nào ở Sumerian xuất phát từ danh mục mua sắm của Amazon đều có khả năng kiếm được phí giới thiệu của nhà phát triển nếu bạn thêm nó vào cảnh AR / VR. Đó là một cách để cả doanh nghiệp và các doanh nghiệp nhỏ hơn và các nhà phát triển độc lập trên AWS kiếm tiền từ các ứng dụng Sumer của họ.

Argenti hình dung rất nhiều cơ hội chéo giữa bộ phận bán lẻ của Sumerian và Amazon.

"Chúng tôi có thể kết nối một số công việc mà nhóm bán lẻ của chúng tôi đang làm đồ nội thất gia đình, đồ điện tử gia dụng và các mặt hàng có giá trị cao khác để tạo ra các mô hình 3D, " ông nói. "Sau đó, bạn có thể sử dụng chúng cho một bức ảnh xuyên qua không gian. Tôi làm cách nào để thiết lập một gác xép hiện đại? Chúng ta sắp xếp loại đồ nội thất nào?"



Tất cả đã trở lại AWS

Xây dựng cầu nối cho tất cả các thiết bị và nền tảng AR / VR ngoài kia là một cách thông minh để hạ thấp rào cản gia nhập phát triển AR / VR, không chỉ cho các công ty B2B mà cả các nhà phát triển nói chung. Đồng thời, ưu đãi kinh doanh hấp dẫn nhất đằng sau Sumerian là một công cụ để thúc đẩy việc sử dụng AWS rộng hơn. Điều đó đúng cho cả những khách hàng hiện tại đang dùng thử dịch vụ mới và cho những người dùng Sumer mới, những người sau đó bắt đầu sử dụng lưu trữ, tính toán, xử lý, AI và các dịch vụ khác của Amazon vì tất cả đều được tích hợp vào trải nghiệm. Mô hình định giá cũng hấp dẫn, bởi vì Amazon không áp dụng phí trả trước. AWS chỉ tính phí cho những gì bạn sử dụng.

Đó là tất cả những gì Amazon xem là một vòng lặp lớn hơn, nơi mọi thứ chảy qua AWS. Dữ liệu đến từ một thiết bị IoT, được xử lý bởi chức năng AWS Lambda, được triển khai trên AWS Greengrass để đến AWS IoT nơi nó đào tạo một mô-đun học máy và cuối cùng được đưa vào mô hình 3D thành hình ảnh AR ở Sumerian.



Tầm nhìn của Amazon cho tương lai AR / VR của chúng tôi

Amazon hy vọng Sumerian có thể đóng góp một phần trong việc thúc đẩy ngành công nghiệp sản xuất các sản phẩm thị trường đại chúng 3D và giảm chi phí. Về phía AR, Argenti cho biết các trình hỗ trợ cơ bản được đặt ra nhờ ARKit và ARCore. Ông cho biết điểm bùng phát sẽ đến khi có đủ ứng dụng và nội dung video từ các nhà phát triển. Về phía VR, những thay đổi lớn mà Amazon hy vọng sẽ thấy là phần cứng sẽ giảm giá, trở nên ít cồng kềnh hơn và không dây.

Khi điều đó xảy ra và bạn có thể mang trải nghiệm VR như một cặp kính, VR sẽ thực sự cất cánh, chanh Argenti nói. Tôi nghĩ rằng nó cần phải tự nhiên như xem video trên máy tính bảng hoặc bật TV trước khi nó sẵn sàng để tiêu thụ chính ở cùng mức với các màn hình khác mà chúng ta có ngày nay. Phát triển toàn bộ hệ sinh thái xung quanh nó gồm những người sáng tạo nội dung, nhà quảng cáo, người dùng cuối và các công ty phục vụ cho những người dùng đó là cách bạn làm điều đó.

Argenti cũng nhấn mạnh tầm quan trọng của sự đắm chìm trong trải nghiệm thực tế ảo và hỗn hợp. Một trong những trường hợp sử dụng mục tiêu khác của Amazon cho các ứng dụng Sumer là giáo dục và đào tạo. Cho dù bạn đang học cách sử dụng thiết bị y tế, bảo dưỡng phương tiện hay học một ngôn ngữ mới, anh ấy nói rằng đó là việc thả bạn vào một môi trường có cảm giác rõ ràng nhất có thể như thế giới thực.

Bạn có thể ngồi trong một quán rượu Pháp và học ngôn ngữ mà không thực sự ở đó, anh ấy nói. Các đại diện máy chủ lưu trữ đang nói tiếng Pháp với bạn. Các menu là tiếng Pháp. Và sau đó trong thực tế đó, bạn có thể tự động chạm vào một menu và xem nó dịch, đưa ngón tay lên trên một mục để xem các từ thay đổi sang một ngôn ngữ khác. Rất nhiều giáo dục là theo ngữ cảnh, và như một công cụ học tập, có một trải nghiệm thu hút tất cả các giác quan của bạn là mạnh mẽ.