Cài đặt Iphone X thành remote để test ARKit.

Cháo các bạn!

Trên Iphone X, có 1 thứ thật sự rất rất mạnh mà hiện tại không nhiều điện thoại trên thế giới có được tính năng này, đó chính là Truedepth, một trong những thành phần của công nghệ FaceID trên những chiếc Iphone thế hệ mới!

Truedepth là công nghệ giúp chúng ta có thể có được dữ liệu chi tiết khuôn mặt phía trước camera, từ đây ta có thể mô phỏng lại khuôn mặt đó trong không gian 3D, và làm nhiều thứ hay ho khác nữa.

Với facebook messager, instagram, ... nhiều app khác, họ đã có thể dùng công nghệ ML để tận dụng camera thông thường nhưng vẫn mô phỏng được khuôn mặt của người sử dụng khi đứng trước camera.

Nhưng khi bạn được trải nghiệm Truedepth, bạn sẽ thấy thật sự choáng ngợp với những gì nó có thể làm được!

Chúng ta hãy cùng xem demo phía dưới của Unity nhé!

Sau khi xem video, hẳn bạn cũng rất hứng thú với công nghệ nó mang lại đúng ko nào!

Trong bài viết này, mình sẽ hướng dẫn các bạn setup chiếc iphone X trở thành 1 camera remote, để có thể thử trải nghiệm 1 demo do chính Unity làm, từ đó chúng ta có thể bước đầu tiếp cận và thử nghiệm những mô hình tận dụng công nghệ này nhé!

Bước 1: Nguyên liệu.

Các bạn hãy download tất cả những thứ phía dưới nhé:

• ARKit-Plugin : https://bitbucket.org/Unity-Technologies/unity-arkit-plugin/get/53b3d3b059f2.zip
• Facial AR Remote: https://github.com/Unity-Technologies/facial-ar-remote/archive/master.zip
• Unity 2018: https://unity3d.com/get-unity/download/archive?_ga=2.169541410.2033141889.1553135377-1029688294.1551344841

Bước 2: Tạo dự án.

• Sau khi đã cài đặt xong Unity 2018 các bạn giải nén 2 file zip bên trên.
• Sau đó các bạn Open project từ thư mục vừa được giải nén từ file ARKit-Plugin bên trên.

• Đồng ý nâng cấp dự án từ Unity 2017 lên Unity 2018.

Bước 3: Đưa Facial AR Remote và dự án.

• Các bạn copy dữ liệu từ thư mục giải nén được trong file zip thứ 2 file trên.

• Paste nó vào thư mục Asset của dự án vừa tạo.

• Chuyển qua Unity đợi quá trình import dữ liệu diễn ra.

Bước 4: Thêm TextMesh Pro.

Vì trong phần remote client có sử dụng vì vậy chúng ta cần thêm nó vào dự án.

• Các bạn mở scene Client lên.
• Sẽ hiện ra yêu cầu import TMP Essentials.

• Tiếp tục là Import TMP Examples & Extras

Bước 5: Chuyển đổi platform qua IOS (vì chúng ta đang build cho Iphone X mà)

• Các bạn ấn vào menu File -> Build Settings...

• Chọn IOS ở phần Platform -> nhấn nút Switch Platform và đợi quá trình chuyển đổi diễn ra.

Bước 6: Cài đặt dự án.

• Sau quá trình chuyển đổi các bạn ấn vào Player Settings...
• Ở phần Other Settings các bạn chọn như trong hình.

• Bật ARKit Uses Facetracking trong file UnityARKitPlugin > Resources > UnityARKitPlugIn > ARKitSettings.

• Thêm Scene Client vào phần Scene In Build của Build Settings mà chúng ta mở ra bên trên.

Bước 7: Build ra Iphone X.

• Trên Unity các bạn ấn nút Build trên phần Build Settings.
• Chọn thư mục lưu dự án sau khi Build.
• Sau đó các bạn mở dự án XCode vừa được build ra.

• Đổi Bundle Identifier (vì mặc định của nó đã được Unity sử dụng rồi :p)
• Chọn Team trong phần Signing.

• Cắm Iphone X vào Macbook, và ấn Play.

Bước 8: Nếu bạn không thể chạy ứng dụng trên Iphone của mình, thì hãy thử làm theo các bước sau.

Các bạn làm theo các bước trên ảnh nhé!

Bước 9: Mở sample của Unity ra để thử nghiệm xem đã thành công hay chưa.

• Các bạn mở Scene trong thư mục Examples -> Scenes -> SlothBlendShapes
• Các bạn mở Object sloth_head_blendshapes trên Hierachy, ấn vào Sloth_Head2 -> Ấn Mesh -> chọn Sloth_Head2
• Ở phần material của nó, các bạn kéo các ảnh (bên trong thư mục Textures của SlothCharacter) như sau:

• sloth_all_1001_Normal vào Normal Map.
• sloth_all_1001_AlbedoTransparency vào
• sloth_all_1001_MetallicSmoothness vào Metallic.

• Ấn play trên Unity, sau đó xem ở phần Console IP của máy tính hiện tại.

Bước 10: Kết nối Iphone X và Unity.

• Các bạn mở app vừa cài đặt phía trên trên Iphone X.
• Giữ nguyên port, điền ip vừa hiện ra trên Console của Unity vào app.
• Ấn nút connect.

• Và tận hưởng thành quả thôi nào (dance)

Thật sự là lúc làm bàn đầu mình khá là mò mẫm, tại Unity nó tách 2 cái thành 2 nơi lưu trữ khác nhau, rồi lại còn lỗi khi import vào Unity, nhưng sau đó thì mọi chuyện ổn hơn!

Và mình rất vui khi thấy cái con trên màn hình Unity kia nó có những hành động trên khuôn mặt rất giống mình =)))

Chúc các bạn sẽ có những trải nghiệm thú vị và bước đầu làm quen với ARKit nhé