Ios 动态将图像添加到AR资源以进行图像识别

ARKit

1.5引入了图像识别。在代码中，您必须创建一组参考图像，如下所示：

let referenceImages = ARReferenceImage.referenceImages(inGroupNamed: "AR Resources", bundle: nil)

然后可以识别集合中包含的图像

---

我想知道是否可以将动态图像添加到这个

AR Resources

文件夹中。例如，用户可以拍摄照片并将其发送到服务器，然后由

ARKit

识别。或者，用户可以根据其位置等接收一组图像。

您不能在运行时修改默认文件夹的内容，尽管您可以动态创建图像

例如，让我们将一个图像放入

资产文件夹

（不是源文件夹），在我的例子中，它被称为“moonTarget”

然后我们可以创建一个函数，在

viewDidLoad

等中调用该函数：

/// Create ARReference Images From Somewhere Other Than The Default Folder
func loadDynamicImageReferences(){

    //1. Get The Image From The Folder
    guard let imageFromBundle = UIImage(named: "moonTarget"),
    //2. Convert It To A CIImage
    let imageToCIImage = CIImage(image: imageFromBundle),
    //3. Then Convert The CIImage To A CGImage
    let cgImage = convertCIImageToCGImage(inputImage: imageToCIImage)else { return }

    //4. Create An ARReference Image (Remembering Physical Width Is In Metres)
    let arImage = ARReferenceImage(cgImage, orientation: CGImagePropertyOrientation.up, physicalWidth: 0.2)

    //5. Name The Image
    arImage.name = "CGImage Test"

    //5. Set The ARWorldTrackingConfiguration Detection Images
    configuration.detectionImages = [arImage]
}


/// Converts A CIImage To A CGImage
///
/// - Parameter inputImage: CIImage
/// - Returns: CGImage
func convertCIImageToCGImage(inputImage: CIImage) -> CGImage? {
    let context = CIContext(options: nil)
    if let cgImage = context.createCGImage(inputImage, from: inputImage.extent) {
     return cgImage
    }
    return nil
}

然后，我们可以在

ARSCNViewDelegate

中测试这一点：

func renderer(_ renderer: SCNSceneRenderer, didAdd node: SCNNode, for anchor: ARAnchor) {

    //1. If Out Target Image Has Been Detected Than Get The Corresponding Anchor
    guard let currentImageAnchor = anchor as? ARImageAnchor else { return }

    let x = currentImageAnchor.transform
    print(x.columns.3.x, x.columns.3.y , x.columns.3.z)

    //2. Get The Targets Name
    let name = currentImageAnchor.referenceImage.name!

    //3. Get The Targets Width & Height In Meters
    let width = currentImageAnchor.referenceImage.physicalSize.width
    let height = currentImageAnchor.referenceImage.physicalSize.height

    print("""
    Image Name = \(name)
    Image Width = \(width)
    Image Height = \(height)
    """)

    //4. Create A Plane Geometry To Cover The ARImageAnchor
    let planeNode = SCNNode()
    let planeGeometry = SCNPlane(width: width, height: height)
    planeGeometry.firstMaterial?.diffuse.contents = UIColor.white
    planeNode.opacity = 0.25
    planeNode.geometry = planeGeometry

    //5. Rotate The PlaneNode To Horizontal
    planeNode.eulerAngles.x = -.pi/2

    //The Node Is Centered In The Anchor (0,0,0)
    node.addChildNode(planeNode)

    //6. Create AN SCNBox
    let boxNode = SCNNode()
    let boxGeometry = SCNBox(width: 0.1, height: 0.1, length: 0.1, chamferRadius: 0)

    //7. Create A Different Colour For Each Face
    let faceColours = [UIColor.red, UIColor.green, UIColor.blue, UIColor.cyan, UIColor.yellow, UIColor.gray]
    var faceMaterials = [SCNMaterial]()

    //8. Apply It To Each Face
    for face in 0 ..< 5{
        let material = SCNMaterial()
        material.diffuse.contents = faceColours[face]
        faceMaterials.append(material)
    }
    boxGeometry.materials = faceMaterials
    boxNode.geometry = boxGeometry

    //9. Set The Boxes Position To Be Placed On The Plane (node.x + box.height)
    boxNode.position = SCNVector3(0 , 0.05, 0)

    //10. Add The Box To The Node
    node.addChildNode(boxNode)   
}

func渲染器（渲染器：SCNSceneRenderer，diddad节点：SCNNode，用于锚点：ARAnchor）{
//1.如果检测到目标图像，则获取相应的定位点
guard let currentImageAnchor=锚定为？ARImageAnchor else{return}
设x=currentImageAnchor.transform
打印（x.columns.3.x，x.columns.3.y，x.columns.3.z）
//2.获取目标名称
让name=currentImageAnchor.ReferenceImageName！
//3.以米为单位获取目标宽度和高度
让宽度=currentImageAnchor.referenceImage.physicalSize.width
让高度=currentImageAnchor.referenceImage.physicalSize.height
打印（“”）
图像名称=\（名称）
图像宽度=\（宽度）
图像高度=\（高度）
""")
//4.创建平面几何图形以覆盖ARImageAnchor
设planeNode=SCNNode（）
让planeGeometry=SCNPlane（宽度：宽度，高度：高度）
planeGeometry.firstMaterial？.diffuse.contents=UIColor.white
planeNode.opacity=0.25
planeNode.geometry=planeGeometry
//5.将平面节点旋转到水平位置
planeNode.eulerAngles.x=-.pi/2
//节点在定位点（0,0,0）中居中
node.addChildNode（平面节点）
//6.创建一个SCNBox
设boxNode=SCNNode（）
假设boxGeometry=SCNBox（宽度：0.1，高度：0.1，长度：0.1，倒角：0）
//7.为每个面部创建不同的颜色
让脸颜色=[UIColor.red，UIColor.green，UIColor.blue，UIColor.cyan，UIColor.yellow，UIColor.gray]
变量faceMaterials=[SCN材质]（）
//8.将其涂抹在每个面部
对于0..<5的面{
让材质=SCN材质（）
material.diffuse.contents=面颜色[面]
faceMaterials.append（材质）
}
boxGeometry.materials=面材质
boxNode.geometry=boxGeometry
//9.设置要放置在平面上的框位置（node.x+box.height）
boxNode.position=SCInvector3（0,0.05,0）
//10.将框添加到节点
node.addChildNode（boxNode）
}

正如您所见，同样的方法也可以应用于实时提要

希望这有助于

正如@Karlis所说，您还可以考虑使用

OnDemandResources

，然后将它们转换为

ARReferenceImage

的所需规格

---

更新：如果您想了解从服务器创建动态参考图像的示例，请查看我创建的以下项目：

可能是“按需资源”？或者以编程方式添加每个图像：谢谢，我会看的！非常感谢！因此，当您在这里设置

configuration.detectionImages=[arImage]

时，可检测的图像仅限于您刚刚创建的图像，对吗？或者它与AR资源文件夹中已经存在的内容相加？我想我需要访问当前会话的配置，然后访问实际的映像集，然后将我的新映像添加到此集合，听起来正确吗？根据我的测试，如果需要使用ARReferenceImage.referenceImages（IngroupName:AR_BUNDLE，BUNDLE:nil）所需的ARBundle，如果你想使用动态的，你需要创建一个新的集合。你可以在他们之间选择：）我不明白为什么@op不接受这个答案。无论如何，谢谢你！它解决了我的问题：）不用担心：）嗨@BlackMirrorz！！您是否也有时间帮我解答与ARkit相关的问题(

let documentDirectory = NSSearchPathForDirectoriesInDomains(.documentDirectory, .userDomainMask, true)[0]
let pathToObject = documentDirectory + "/reference.jpg"
let imageUrl = URL(fileURLWithPath: pathToObject)
let imageData: Data = try! Data(contentsOf: imageUrl)
let image = UIImage(data: imageData, scale: UIScreen.main.scale)
let cgImage = image!.cgImage

let referenceImages = ARReferenceImage.init(cgImage!, orientation: .up, physicalWidth: 0.595)
referenceImages.name = "Reference Image"
let configuration = ARImageTrackingConfiguration()
configuration.trackingImages = [referenceImages]
session.run(configuration, options: [.resetTracking, .removeExistingAnchors])