如何将AR Image ViewRenderable完全适合目标图像？

如何解决如何将AR Image ViewRenderable完全适合目标图像？

我目前正在尝试使用viewRenderable将2D增强图像放置在检测到的图像上。我可以在AR中渲染图像。但是，它总是以错误的方向放置。我真正想要实现的是将图像叠加在当前的海报，图片，横幅上。

这是我的代码。

test.xml

<ImageView
    android:layout_width="match_parent"
    android:layout_height="match_parent"
    android:id="@+id/imageView"
    android:src="@drawable/tree" /> 

当检测到平面或图像时，在createModel（）下面被调用。

MainActivity.java

 private void createModel(Anchor anchor,AugmentedImage image) {

    ViewRenderable
            .builder()
            .setView(this,R.layout.test)
            .build()
            .thenAccept(viewRenderable -> {

                setupModel(viewRenderable,anchor);


            });

}

private void setupModel(ViewRenderable viewRenderable,Anchor anchor    ) {
    AnchorNode anchorNode = new AnchorNode(anchor);
    anchorNode.setRenderable(viewRenderable);
    arFragment.getArSceneView().getScene().addChild(anchorNode);
}

问题是，图像似乎总是从飞机或横幅出来。 谁能帮助我水平放置增强图像或更改位置，以便增强图像隐藏检测到的图像？

解决方法

我假设您正在使用Sceneform。这是我很久以前从事的工作。如果可能，请尝试从中获得一些帮助。 为了在放置AR对象时定向它，我不得不尝试使用位姿，localRotation，平面类型等。 我将在下面附上一些摘要。

if (trackable is Plane && trackable.isPoseInPolygon(hit.hitPose)) {
    val pose: Pose
    if (trackable.type == Plane.Type.VERTICAL) {
        isVertical = true
        pose = hit.hitPose
    } else {
        isVertical = false
        pose = hit.hitPose.extractTranslation()
        Log.d(tag,"Detected plane is horizontal")
    }

    // Other calculations...
     
    val camLook = arFragment.arSceneView.scene.camera.localRotation
    placeObject(fragment,pose,modelRenderable,distance,camLook)
}

我创建了一个modelRenderable并将所有参数传递给placeObject函数。 然后，在placeObject函数中，我创建了一个TransformableNode并分配了可渲染对象。

private fun placeObject(fragment: ArFragment,pose: Pose?,it: ModelRenderable,distance: Float,camLook: Quaternion) {
    val anchor = arSession!!.createAnchor(pose)
    val anchorNode = AnchorNode(anchor)
    anchorNode.setParent(arFragment.arSceneView.scene)

    val transformableNode = TransformableNode(fragment.transformationSystem)
    transformableNode.renderable = it
    transformableNode.setParent(anchorNode)
    //...
    if (isVertical) {
        val anchorUp = anchorNode.up
        transformableNode.setLookDirection(Vector3.up(),anchorUp)
    } else {
        camLook.x = 0f
        camLook.z = 0f
        transformableNode.localRotation = camLook
    }
    //...
}