ビデオ投影デカール開発ガイド

using LCCCore;
using UnityEngine;
using UnityEngine.Video;

public class VideoStreaming : MonoBehaviour
{
    [Header("必須")]
    [Tooltip("シーン内の LCCManager インスタンス")]
    public LCCManager m_manager;
    [Tooltip("有効な LCC シーンパス")]
    public string m_filePath;

    [Header("ビデオソース（デコードしたフレームをデカールとして投影）")]
    [Tooltip("投影するビデオクリップ。下記の URL より優先されます")]
    public VideoClip m_videoClip;
    [Tooltip("ビデオファイルパス / URL。クリップが割り当てられていない場合に使用（例：file:///D:/xxx.mp4）")]
    public string m_videoUrl;
    [Tooltip("ループ再生")]
    public bool m_videoLoop = true;

    [Header("プロジェクター（+Z 方向に投影）")]
    [Tooltip("プロジェクターの姿勢。空の場合はこのオブジェクトの Transform を使用")]
    public Transform m_projector;
    [Range(1f, 179f)] public float m_fov = 60f;
    [Tooltip("投影アスペクト比。<=0 の場合はビデオのアスペクト比を自動使用")]
    public float m_aspect = 0f;
    public float m_near = 0.1f;
    public float m_far = 100f;

    [Header("デカールの外観")]
    [Range(0f, 1f)] public float m_opacity = 1.0f;
    [Range(0f, 0.5f)][Tooltip("エッジフェード幅（UV 比）。0 = ハードエッジ")]
    public float m_edgeFade = 0.1f;
    [Tooltip("毎フレーム投影を更新し、実行時にプロジェクターのドラッグやパラメータ調整が可能に")]
    public bool m_updateEveryFrame = true;

    [Header("オクルージョンカリング（PC/Mac のみ）")]
    [Tooltip("オンの場合、前面ジオメトリの背後にある背面/遮蔽点はデカールで着色されなくなります（スライドプロジェクター効果）。オフの場合は X 線です")]
    public bool m_occlusion = false;
    [Range(0f, 1f)][Tooltip("不透明度閾値：この値以上の不透明度を持つ Splat のみが深度マップに寄与し、浮遊/霧状の点を除去します。0 = すべて参加")]
    public float m_occlusionCutoff = 0f;
    [Range(0f, 0.5f)][Tooltip("相対深度許容値。小さすぎる -> 近傍サーフェスの自己オクルージョン、大きすぎる -> X 線着色の漏れ。デフォルト 0.05")]
    public float m_occlusionBias = 0.05f;
    [Range(0, 16)][Tooltip("正方形フットプリント半径の上限（px）。X 線の透過漏れを除去する主なノブ。0 = 単一テクセル、デフォルト 2")]
    public int m_occlusionFootprint = 2;
    [Tooltip("深度マップ解像度（px、2 のべき乗 256〜4096）。かすめ角の穴を埋めるには下げます。デフォルト 1024")]
    public int m_occlusionResolution = 1024;

    // -- 実行時状態 --
    private bool m_loaded;
    private bool m_lastOcclusion;
    private float m_lastCutoff = float.NaN;
    private float m_lastBias = float.NaN;
    private int m_lastFootprint = -1;
    private int m_lastResolution = -1;

    // -- ビデオ状態 --
    private VideoPlayer m_videoPlayer;
    private RenderTexture m_videoRT;   // VideoPlayer がビデオをここにデコード（GPU）
    private Texture2D m_frameTex;      // 現在のフレームをここにコピーし、デカールへ渡す
    private bool m_videoReady;
    private long m_lastVideoFrame = -1; // デカールへプッシュ済みの最後のフレームインデックス

    void Start()
    {
        if (m_manager == null || string.IsNullOrEmpty(m_filePath))
        {
            Debug.LogError("[VideoStreaming] m_manager または m_filePath が割り当てられていません。");
            enabled = false;
            return;
        }

        // 1) レンダーパイプラインを PC 単一シーンのエディターモードに初期化
        m_manager.SetPlatformType(PlatformType.PC);
        m_manager.SwitchRenderPass(ActiveRenderMode.SingleRender);
        m_manager.SetEditorMode(true);

        // 2) シーン読み込みと並行してビデオのデコードを開始
        SetupVideo();

        // 3) 点群シーンを読み込み、完了後にデカールを有効化（デカールはグローバル状態。シーン準備完了後に設定するのが最も安全）
        var renderer = m_manager.GetRender(this.transform);
        Debug.Log($"[VideoStreaming] 読み込みを開始: {m_filePath}");
        renderer.Load(m_filePath,
            _ => { /* 進捗コールバック。この例では未使用 */ },
            OnSceneLoaded);
    }

    /// <summary>実行時に VideoPlayer を作成し、クリップ/URL の準備を開始します。</summary>
    private void SetupVideo()
    {
        m_videoPlayer = gameObject.AddComponent<VideoPlayer>();
        m_videoPlayer.playOnAwake = false;
        m_videoPlayer.isLooping = m_videoLoop;
        m_videoPlayer.renderMode = VideoRenderMode.RenderTexture;
        m_videoPlayer.audioOutputMode = VideoAudioOutputMode.None; // デモ：音声なし

        if (m_videoClip != null)
        {
            m_videoPlayer.source = VideoSource.VideoClip;
            m_videoPlayer.clip = m_videoClip;
        }
        else
        {
            m_videoPlayer.source = VideoSource.Url;
            m_videoPlayer.url = m_videoUrl;
        }

        // 解像度が判明したらフレームバッファを割り当て、再生を開始します。
        m_videoPlayer.prepareCompleted += OnVideoPrepared;
        m_videoPlayer.Prepare();
    }

    private void OnVideoPrepared(VideoPlayer vp)
    {
        int w = (int)vp.width;
        int h = (int)vp.height;

        m_videoRT = new RenderTexture(w, h, 0, RenderTextureFormat.ARGB32);
        m_videoRT.Create();
        vp.targetTexture = m_videoRT;

        m_frameTex = new Texture2D(w, h, TextureFormat.RGBA32, false);

        m_videoReady = true;
        vp.Play();
        Debug.Log($"[VideoStreaming] ビデオ準備完了: {w}x{h}、再生中。");
    }

    private void OnSceneLoaded()
    {
        Debug.Log("[VideoStreaming] 読み込み完了、デカール投影を有効化します。");

        // -- 基本投影: 5 つの API --
        // テクスチャ内容は Update() でデコードしたフレームが駆動します。ここでは現在利用可能なフレームを先にプッシュします。
        if (m_frameTex != null) m_manager.SetDecalTexture(m_frameTex);
        m_manager.SetDecalOpacity(m_opacity);        // 全体の不透明度
        m_manager.SetDecalEdgeFade(m_edgeFade);      // エッジフェード
        ApplyProjection();                           // プロジェクターの姿勢（内部的に SetDecalProjection を呼び出す）
        m_manager.SetDecalEnabled(true);             // デカールを有効化（_DECAL キーワード）

        // -- オクルージョンカリング: 2 つの API -- ApplyProjection の後でなければならない（深度マップには有効なプロジェクター VP 行列が必要）
        m_manager.SetDecalOcclusionSettings(BuildOcclusionSettings());
        m_manager.SetDecalOcclusion(m_occlusion);
        CacheOcclusionState();

        m_loaded = true;
    }

    void Update()
    {
        if (!m_loaded) return;

        // --- ビデオフレーム更新。レンダリング FPS とはデカップリング ---
        // VideoPlayer.frame はビデオ自身の再生レートでのみ増加します。シーンが数百 FPS でレンダリングされても、
        // 隣接する 2 つのビデオフレームの間ではインデックスは変わらないため、実際に新しいデコードフレームが出現したときだけ
        // そのフレームをコピーしてデカールテクスチャを再度プッシュします。
        if (m_videoReady && m_videoPlayer.frame != m_lastVideoFrame)
        {
            m_lastVideoFrame = m_videoPlayer.frame;

            // GPU 上の RenderTexture を、デカール API が受け付ける Texture2D にコピーします。
            // これはビデオフレームレートでのみ実行されるため、読み戻しコストは許容範囲です。
            RenderTexture prev = RenderTexture.active;
            RenderTexture.active = m_videoRT;
            m_frameTex.ReadPixels(new Rect(0, 0, m_videoRT.width, m_videoRT.height), 0, 0, false);
            m_frameTex.Apply(false);
            RenderTexture.active = prev;

            m_manager.SetDecalTexture(m_frameTex);
        }

        // 実行時にオクルージョンを切り替え
        if (m_occlusion != m_lastOcclusion)
        {
            m_manager.SetDecalOcclusion(m_occlusion);
            m_lastOcclusion = m_occlusion;
        }

        // オクルージョン品質パラメータが変更されたら -> 構造体を一度プッシュ
        if (!Mathf.Approximately(m_occlusionCutoff, m_lastCutoff) ||
            !Mathf.Approximately(m_occlusionBias, m_lastBias) ||
            m_occlusionFootprint != m_lastFootprint ||
            m_occlusionResolution != m_lastResolution)
        {
            m_manager.SetDecalOcclusionSettings(BuildOcclusionSettings());
            CacheOcclusionState();
        }

        // 便利なランタイム調整のため毎フレームプロジェクター / 外観を更新
        if (!m_updateEveryFrame) return;
        m_manager.SetDecalOpacity(m_opacity);
        m_manager.SetDecalEdgeFade(m_edgeFade);
        ApplyProjection();
    }

    /// <summary>現在のプロジェクター姿勢と透視パラメータから投影行列を構築します。</summary>
    private void ApplyProjection()
    {
        Transform p = m_projector != null ? m_projector : this.transform;
        float aspect = m_aspect > 0f
            ? m_aspect
            : (m_videoRT != null ? (float)m_videoRT.width / m_videoRT.height : 1920.0f / 1080.0f);
        m_manager.SetDecalProjection(p.position, p.rotation, m_fov, aspect, m_near, m_far);
    }

    /// <summary>4 つのオクルージョンパラメータを構造体にまとめます。</summary>
    private DecalOcclusionSettings BuildOcclusionSettings()
    {
        return new DecalOcclusionSettings
        {
            opacityCutoff  = m_occlusionCutoff,
            depthBias      = m_occlusionBias,
            footprintMaxPx = m_occlusionFootprint,
            resolution     = m_occlusionResolution,
        };
    }

    private void CacheOcclusionState()
    {
        m_lastOcclusion  = m_occlusion;
        m_lastCutoff     = m_occlusionCutoff;
        m_lastBias       = m_occlusionBias;
        m_lastFootprint  = m_occlusionFootprint;
        m_lastResolution = m_occlusionResolution;
    }

    private void OnDestroy()
    {
        if (m_videoPlayer != null) m_videoPlayer.prepareCompleted -= OnVideoPrepared;
        if (m_videoRT != null)
        {
            m_videoRT.Release();
            Destroy(m_videoRT);
        }
        if (m_frameTex != null) Destroy(m_frameTex);
    }

    // -- 便利なデバッグエントリポイント（Inspector 右クリック） --
    [ContextMenu("デカール オン")]  private void DecalOn()  { m_manager?.SetDecalEnabled(true); }
    [ContextMenu("デカール オフ")] private void DecalOff() { m_manager?.SetDecalEnabled(false); }
    [ContextMenu("オクルージョン オン")]  private void OcclusionOn()  { m_occlusion = true;  m_manager?.SetDecalOcclusion(true);  m_lastOcclusion = true; }
    [ContextMenu("オクルージョン オフ")] private void OcclusionOff() { m_occlusion = false; m_manager?.SetDecalOcclusion(false); m_lastOcclusion = false; }
}

if (m_videoReady && m_videoPlayer.frame != m_lastVideoFrame)
{
    m_lastVideoFrame = m_videoPlayer.frame;

    // 新しいデコードフレームが届いたときだけ一度読み戻してデカールをプッシュ
    RenderTexture prev = RenderTexture.active;
    RenderTexture.active = m_videoRT;
    m_frameTex.ReadPixels(new Rect(0, 0, m_videoRT.width, m_videoRT.height), 0, 0, false);
    m_frameTex.Apply(false);
    RenderTexture.active = prev;

    m_manager.SetDecalTexture(m_frameTex);
}

// 戻り値: void
public void SetDecalTexture(Texture2D tex)