TL;DR

Trên X ngày 14/04/2026, creator @CitizenPlain đăng demo một workflow ComfyUI dùng IC-LoRA của LTX-2.3 để biến video phẳng thường thành video 360° equirectangular (format VR chuẩn, tỉ lệ 2:1). Khác với các LoRA 360 text-to-video (như bản của Ragamuffin20 trên Civitai), cách này lấy chính clip phẳng làm tín hiệu conditioning, rồi để IC-LoRA mở rộng khung hình ra toàn bộ mặt cầu — giữ chuyển động gốc, tự sinh 270° còn lại.

What's new

IC-LoRA (In-Context LoRA) không phải là concept mới — Lightricks đã ship 3 adapter chính thức: Union Control (depth + canny + pose), Motion Track Control (quỹ đạo spline), và HDR (SDR→HDR). Nhưng chưa có adapter chính thức cho 360.

Workflow của CitizenPlain cho thấy IC-LoRA có thể được train để học một ánh xạ rất khác: flat footage → equirectangular projection. Input là clip 16:9 thông thường, output là file 2:1 (ví dụ 2048×1024 hoặc 3840×1920) sẵn sàng upload lên YouTube VR, Meta Quest TV, hay PICO.

Why it matters

Trước đây muốn có video 360 bạn cần:

  • Camera 360 thực tế (Insta360, GoPro Max) — 300–800 USD
  • Hoặc rig nhiều camera + stitching software
  • Hoặc text-to-360 generative (không kiểm soát được nội dung cụ thể)

Cách làm này mở ra kịch bản upcycle footage cũ: quay lại library phim phẳng trong archive studio, clip drone cá nhân, hay kể cả video điện thoại — và biến thành nội dung immersive cho Vision Pro, Quest 3, PICO 4. Với các đội dựng real estate, du lịch, tiền kỳ điện ảnh (VR scouting), đây là shortcut đáng để thử.

Technical facts

Các con số đáng chú ý của stack LTX + IC-LoRA:

Thuộc tínhGiá trị
Base modelLTX-2.3, 22B tham số (Lightricks)
Text encoderGemma-3-12B
VRAM inference (khuyến nghị)32 GB+ CUDA
VRAM train IC-LoRA~48 GB (Ada A6000/L40S class)
Frame count rule8n + 1 (1, 9, 17, 25 …)
ResolutionChia hết cho 32
Aspect ratio 3602:1 equirectangular
Output ceiling hiện tại~4K (3840×1920)

Workflow 3-stage tương tự (từ nomadoor/ComfyUI-Panorama-Stickers) đã được release cùng preset LTX-2.3_360vr_distilled_3stage.json, cho thấy community đang tiến rất nhanh theo hướng này.

Comparison

Có vài cách tiếp cận song song cho bài toán flat↔360, mỗi cách có trade-off riêng:

ApproachInputOutputStatus
CitizenPlain LTX IC-LoRAFlat video360 equirectangularDemo cộng đồng, 04/2026
Ragamuffin20 360 Panoramic LoRAText prompt360 videoCivitai, 03/2026, có seam
LTX Union Control (official)Depth/canny/poseVideo stylized thườngGA
Imagine360 (NeurIPS 2025)Perspective video360 equirectangularResearch paper
PanoLora (arXiv 2509.11092)Perspective videoPanoramic videoResearch

Điểm hay: IC-LoRA "đóng gói" lại behavior của kiến trúc research như Imagine360 thành một file adapter thả vào ComfyUI — dev thường không cần đọc paper cũng dùng được.

Use cases

  • VR content creator: biến library phim phẳng thành content 360 cho Quest TV, YouTube VR, PICO
  • Real estate: walkthrough quay bằng điện thoại → virtual tour 360
  • Film pre-viz: block cảnh ở flat, tự sinh environment 360 cho VR scouting
  • Travel / vlog: upcycle footage drone, GoPro phẳng thành tour immersive
  • Synthetic data: sinh video 360 train SLAM / autonomous driving từ nguồn monocular

Limitations & pricing

Seam artifact là vấn đề kinh điển của 360 generative. Ragamuffin20 đã warn rõ LoRA text-to-360 của họ có đường seam dọc chỗ panorama wrap lại — bất kỳ adapter flat→360 nào cũng phải xử lý class bug này bằng spherical/cylindrical padding khi train.

Dataset khan hiếm: Ragamuffin20 mô tả việc tìm dataset 360 video "là ác mộng" — kỳ vọng tập train nhỏ, motion diversity hạn chế ở các adapter cộng đồng.

Metadata: output là file equirectangular thô; cần inject spatial media metadata (Google Spatial Media Metadata Injector, free) trước khi upload YouTube/Meta để player hiểu là 360.

Pricing: LTX-2.3 + ComfyUI hoàn toàn mã nguồn mở. Chi phí thực = GPU time: 1,5–3 USD/giờ cho card 48 GB trên cloud (RunPod, Lambda), hoặc 0 đồng nếu có 3090/4090 24 GB chạy bản distilled quantized (đánh đổi chất lượng seam).

What's next

Lộ trình hợp lý cho không gian này trong 6 tháng tới:

  • LTX ra official 360 IC-LoRA với spherical padding đúng chuẩn
  • Stereo (VR180 3D) variants — tạo cả depth cho playback 3D trên Vision Pro
  • Real-time preview node trong ComfyUI để tua thử trước khi render full
  • Tích hợp sâu với ComfyUI-Panorama-Stickers để edit/compose trực tiếp trên cầu 360

Nguồn: @CitizenPlain trên X, LTX IC-LoRA docs, Lightricks/ComfyUI-LTXVideo, Civitai 360 Panoramic LoRA, Imagine360 (NeurIPS 2025).