unity3D AR涂涂乐制作浅谈

unity3D AR涂涂乐制作浅谈

AR为现在是虚拟现实较为火爆的一个技术，其中有个比较炫酷的就是AR涂涂乐的玩法，这个技术可以把扫描到的图片上的纹理 粘贴到模型上实现为模型上色的功能，但是我们需要怎么才能实现其功能呢？大体的方法是将扫描到图片保存成纹理，在将纹理保存到模型的材质球上然后实现上色的功能。

那么有什么方式可以实现这个功能呢？我在参考的EsayAR的Demo以及在网上查找的方法基本都是采用通过Shader进行图片的处理，因此在这样的条件下，若有多个模型的UV张开图就要写不同的Shader进行进行图片的处理，这样的方式并不方便。那么有没有方法可以不写Shader来实现图片上UV展开图的颜色准确粘贴到模型上呢？于是我想为什么不可以在屏幕上设置一个扫描对准框，然后将扫描框的的内容保存成纹理呢？

那么我先配置好AR的环境，这里我用EsayAR来制作AR涂涂乐的效果，这里为了方便我直接用EsayAR Coloring3D的例子来做这个效果吧！我们先去创建一个空的Gameobject将EsayAR例子中的EasyImageTargetBehaviour类拖入空的GameObject里然后我们将其改名为ImageTargetNamecard，设置好我们的识别图片红色框是图片名字，黄色框是图片放置的位置，记得要Storage属性要设置成Assets，如下图所示：

然后将模型拖入到刚刚创建的ImageTargetNamecard下这样我们就做好了识别图以及模型，摆放的模型要注意的是这个模型必须是要有纹理展开图的模型，然后作为模型的识别图的图片必须对是对应着其纹理的展开的图片，例子里面我是使用一个展开过纹理的Cube模型，其中色块的位置正是UV展开的位置，展开的纹理图片如图下图所示：

现在弄好了AR环境了，那么我们开始做扫描用的对准框吧，这里我用的是UGUI来制作对准框，这里我给对焦框设定好大小，因为我使用的识别图片是1024*1024的所以我们的对焦框也要弄成正方形的520*520就可以了，然后在弄一个按钮在对准后帮模型“上色”！做好的效果大体就如下图所示一样：

那么开始写代码吧！这里我们在模型上添加一个InterceptTexture脚本，脚本内容如下：

using System;
using UnityEngine;
using System.Collections;
using System.IO;
using EasyAR;
using Image = UnityEngine.UI.Image;

public class InterceptTexture : MonoBehaviour {

    public Image scanTexture;
    public bool isrealRender = false;
    private Camera scanCamera;
    private RenderTexture renderTexture;
    private string pipingID;
    private string scanPath;
    private Rect scanRect;
    private bool isScanTexture = false;//是否开启实时渲染
    //ImageTargetBaseBehaviour targetBehaviour;

    // Use this for initialization
    void Start()
    {
        scanPath = Application.dataPath + "/StreamingAssets/Drwaing/";
        scanRect = new Rect(scanTexture.rectTransform.position.x - scanTexture.rectTransform.rect.width / 2, scanTexture.rectTransform.position.y - scanTexture.rectTransform.rect.height / 2,
           (int)scanTexture.rectTransform.rect.width, (int)scanTexture.rectTransform.rect.height);
        //targetBehaviour = GetComponentInParent<ImageTargetBaseBehaviour>();
        gameObject.layer = 31;

    }

    void Renderprepare()
    {
        if (!scanCamera)
        {
            GameObject obj = new GameObject("ScanCamera");
            scanCamera = obj.AddComponent<Camera>();
            obj.transform.parent = transform.parent;
            scanCamera.hideFlags = HideFlags.HideAndDontSave;
        }
        scanCamera.CopyFrom(Camera.main);
        scanCamera.depth = 0;
        scanCamera.cullingMask = 31;
        if (!renderTexture)
        {
            renderTexture = new RenderTexture(Screen.width, Screen.height, -50);
        }
        if (!isScanTexture)
        {
            scanCamera.targetTexture = renderTexture;
            scanCamera.Render();
        }
        if(isrealRender)
            GetComponent<Renderer>().material.SetTexture("_MainTex", renderTexture);
        //RenderTexture.active = renderTexture;
        //StartCoroutine(ImageCreate());

    }

    void OnWillRenderObject()
    {
        Renderprepare();
    }

    void OnDestroy()
    {
        if (renderTexture)
            DestroyImmediate(renderTexture);
        if (scanCamera)
            DestroyImmediate(scanCamera.gameObject);
    }

    public void ScanTextureClick()
    {
        StartCoroutine(ImageCreate());
    }

    IEnumerator ImageCreate()
    {
        isScanTexture = true;
        if (isScanTexture)
        {
            scanCamera.targetTexture = renderTexture;
            scanCamera.Render();
        }
        RenderTexture.active = renderTexture;
        Texture2D scantTexture2D = new Texture2D((int)scanRect.width, (int)scanRect.height, TextureFormat.RGB24, false);
        yield return new WaitForEndOfFrame();
        scantTexture2D.ReadPixels(scanRect, 0, 0, false);
        scantTexture2D.Apply();

        scanCamera.targetTexture = null;
        RenderTexture.active = null;
        GameObject.Destroy(renderTexture);

        byte[] bytes = scantTexture2D.EncodeToPNG();
        string savePath = scanPath + gameObject.name + ".png";
        File.WriteAllBytes(savePath,bytes);
        isScanTexture = false;
        isrealRender = false;        ///关闭实时渲染
        this.gameObject.GetComponent<Renderer>().material.SetTexture("_MainTex", scantTexture2D);
        Debug.Log("截图完成！");
    }
}

这里使用的UGUI来制作的扫描框，因此如果用NGUI的同学要自己改一下代码哟！因为公司极却摄像头，我就不做实时演示的截图了

通过对准框截图下来的图片如下：

然后看看我们的模型没贴纹理之前的样子，如下图所示：

然后是先附上贴非裁剪的正常纹理图，第二张是我们截图下来的做纹理的图片：

因为测试的时候用手机打开识别图，导致颜色有点变了，但是大体上位置都没有错！好了测试成功了～～～运行测试的时候千万被手抖哟！不如就没办法完美的对好UV位置！～～

因为是刚刚开始接触AR不久，所以可能做的不好望大家可以多多交流～第一次在公司写技术文章，写的不好请多多包含～

--Bě9oniǎ

这里还有现在普遍的shader上色方法...