新的ARCore SDK为增强现实功能提供API，例如运动跟踪，平面检测和光估计。 这些是您将用于向您的Android应用添加AR体验的构建块。
入门
ARCore目前只能在精选设备上使用，例如Google Pixel，Google Pixel 2和Samsung Galaxy S8。
为了使用ARCore，您需要通过下载并安装arcore-preview.apk来准备设备。
在您设置ARCore开发设备后，您需要安装ARCore预发行NuGet软件包。
ARCore API基础知识
为了帮助您检测表面放置对象并计算其相对于相机的空间位置，ARCore使用几种基本类型。
- 会话对象：您与ARCore的主要交互点。它将通过跟踪您添加的任何锚点，引擎检测到的表面以及设备的当前快照来帮助管理AR状态。
- 平面：SDK检测到的表面，您可以在其上放置锚点来描述物体的固定现实位置（包括其方向）。当前面向上和向下的表面可以单独检测（考虑地板和天花板）。
- 会话：当您调用.Update（）返回一个帧对象时，AR状态的当前快照。
- 框架：方便的HitTest（..）方法，可以帮助确定显示屏上的抽头坐标是否与任何平面相交。每个框架还包含有关摄像机方向和与现实世界的关系的信息，并帮助计算投影矩阵，以向用户显示视觉表示。
- SDK的另一个有趣的功能是从给定的帧获取LightEstimate的能力。该估计值包括摄像机视图的像素强度。
基本演练
我们已将HelloAR样本移植到Xamarin，您可以在GitHub上查看！ 现在我们来看一下这个例子中的一些基本事情。
首先，在您的活动中，您需要在OnCreate中创建一个会话，并确保运行时在设备上支持ARCore：
点击(此处)折叠或打开
- var config = Config.CreateDefaultConfig();
- session = new Session(this);
-
- // Make sure ARCore is supported on this device
- if (!session.IsSupported(config)) {
- Toast.MakeText(this, "ARCore unsupported!", ToastLength.Long).Show();
- Finish();
- }
请记住，您还需要请求Android.Manifest.Permission.Camera权限才能向用户显示实况相机馈送/增强现实视图。 在“HelloAR”示例中，我们使用GLSurfaceView向用户呈现相机和增强。 确保您设置了GL Surface，或者查看示例代码中的操作。
在会话运行中，我们可以在GL表面的OnDrawFrame实现中获取AR系统状态的快照。 在我们检查以确保帧处于跟踪状态之后，我们可以检查任何命中结果，并且假设它们与飞机相交，在飞机上添加锚点。
点击(此处)折叠或打开
- // See the PlaneAttachment class from the sample
- // This helps associate Anchors with Planes they are attached to
- ListPlaneAttachment> planeAttachments = new ListPlaneAttachment>();
- void OnDrawFrame (IGL10 gl)
- {
- var frame = session.Update();
-
- // You could keep track of taps by queueing up
- // MotionEvent's from a tap gesture recognizer
- var tap = motionEventsQueue.Dequeue();
-
- // Make sure we've got a tap and are in a tracking state for our frame
- if (tap != null && frame.GetTrackingState() == Frame.TrackingState.Tracking) {
- // Look at each hittest result
- foreach (var hit in frame.HitTest(tap)) {
- // We could get PointCloudsHitResult as well, check for Plane
- var planeHit = hit as PlaneHitResult;
- if (planeHit != null && planeHit.IsHitInPolygon) {
- // Create a new anchor
- var anchor = session.AddAnchor(hit.HitPose);
- // Keep track of our anchors and the planes they are attached to
- planeAttachments.Add(new PlaneAttachment(planeHit, anchor))
- }
- }
- }
- }
我们还想在我们的绘图方法中渲染我们场景中的各种对象。 HelloAR示例具有各种渲染器，可以根据从框架计算出的投影进行重度OpenGL提升，并实现此目的：
点击(此处)折叠或打开
- // Get projection matrix.
- float[] projectionMatrix = new float[16];
- session.GetProjectionMatrix(projectionMatrix, 0, 0.1f, 100.0f);
-
- // Get camera matrix and draw.
- float[] viewMatrix = new float[16];
- frame.GetViewMatrix(viewMatrix, 0);
-
- // Draw the detected planes
- planeRenderer.DrawPlanes(session.AllPlanes, frame.Pose, projectionMatrix);
-
- // Get lighting from avg intensity of the image
- var lightIntensity = frame.LightEstimate.PixelIntensity;
-
- // Draw all of our anchors attached to planes
- float scaleFactor = 1.0f;
- float[] anchorMatrix = new float[16];
-
- foreach (var planeAttachment in planeAttachments) {
- // Only draw attachments currently tracking
- if (!planeAttachment.IsTracking)
- continue;
-
- // Get the current combined pose of an Anchor and Plane in world space
- planeAttachment.GetPose().ToMatrix(anchorMatrix, 0);
-
- // Update and draw the model
- objectRenderer.UpdateModelMatrix(anchorMatrix, scaleFactor);
- objectRenderer.Draw(viewMatrix, projectionMatrix, lightIntensity);
- }
解剖样本后，您可以看到实际的ARCore代码相对简单，大部分示例代码是关于OpenGL渲染的。
再次，请确保在GitHub上查看完整的HelloAR示例！ 我们期待着您的Xamarin Android应用程序中使用ARCore创建的增强体验体验。
ARCore.zip
