Luma Labs（Luma AI） 是主打 NeRF 3D 重建 + AI 文生视频 的创作平台，核心能力是手机扫物体 / 场景生成高保真 3D 模型，以及用文本生成电影质感短视频，广泛用于游戏、影视、产品设计、数字孪生、AR/VR 内容生产。
一、核心特点
- NeRF 神经辐射场 3D 重建：手机拍视频即可生成高精度 3D 模型与场景
- Dream Machine 文生视频：文本 / 图片生成电影级短片，支持运镜、光影、物理运动
- 视频 Modify 编辑：替换场景、移除物体、重绘风格、保留镜头轨迹
- 云端 AI 处理：本地无需高配显卡，扫描与生成全在云端完成
- 快速绑定与导出：支持 GLB、OBJ、FBX、USD、PLY 等游戏引擎标准格式
- Photon 图像生成：辅助生成高质量参考图、概念图、场景氛围图
- Unreal 插件：直接导入 3D 场景用于实时渲染、虚拟制作
二、主要优点
- 3D 扫描零门槛：不用专业设备，手机就能扫出可商用 3D 资产
- 重建精度极高：细节、纹理、材质还原接近真实扫描
- 视频生成画质顶尖：光影、运动、质感接近电影级效果
- 云端轻量化：不吃本地配置，随时随地处理
- 工作流极度友好：一键导出到 Blender、Unity、Unreal、C4D
- 功能高度集成：3D 扫描 + 视频生成 + 图像 + 编辑一站式完成
三、主要缺点
- 扫描有物理限制：透明、反光、毛发、暗光环境效果下降
- 视频时长较短：免费版 5 秒，付费版最长 15 秒，不适合长片
- 生成速度偏慢：视频与 3D 都需要排队等待
- iOS 优先：安卓支持弱，很多功能仅限 iPhone
- 付费门槛高：高清导出、商用、长视频都需要订阅
- 中文提示词效果一般：英文描述更稳定
四、使用场景
- 游戏 / 元宇宙：道具、场景、建筑快速 3D 数字化
- 产品设计 / 电商：实物转 3D，用于展示、渲染、AR 预览
- 影视 / 广告：AI 视频预演、特效、场景替换、概念短片
- 文物 / 数字孪生：高精度存档、虚拟展厅、三维可视化
- AR/VR 内容：真实场景重建、沉浸式环境制作
- 独立创作者：快速出 3D 资产、短视频、视觉素材
五、实际应用
- 手机拍一个手办 → AI 自动生成可导入引擎的 3D 模型
- 输入提示词生成电影运镜、光影质感的 5 秒广告短片
- 上传视频，用 Modify 替换背景、删除多余物体、重绘风格
- 扫描室内空间 → 生成可漫游的 3D 场景用于虚拟装修
- 导出 3D 模型直接进 Unreal 做实时渲染与交互
六、使用流程
- 下载 Luma iOS App 或打开网页端
- 3D 扫描：环绕物体拍摄视频 → 上传云端重建
- 等待 AI 生成 NeRF 3D 模型，在线预览与编辑
- 视频生成：进入 Dream Machine，输入提示词 / 上传图片
- 生成后用 Modify 编辑场景、物体、光影
- 导出 3D 模型（GLB/USD）或视频（MP4）
- 导入游戏引擎、DCC 软件或剪辑工具
七、官方与资源
- 官网：https://lumalabs.ai/
- 类型：NeRF 3D 重建 / AI 文生视频 / 数字人内容平台
- 核心产品：3D Capture、Dream Machine、Photon
- 支持格式：GLB、OBJ、FBX、USD、PLY、MP4
- 兼容软件：Blender、Maya、Unity、Unreal、C4D、Adobe 系列
- 平台：iOS App、网页端
- 价格：免费版（有限额度）；付费订阅 $15–$95 / 月
- 语言：英文界面，中文提示词支持有限
- 适合：3D 建模师、产品设计师、游戏开发者、影视创作者、AR/VR 团队
谷歌提出的文生 3D 基础技术框架，核心通过分数蒸馏采样（SDS） 将预训练 2D 文生图扩散模型（如 Imagen）作为先验，优化神经辐射场（NeRF），实现从纯文本描述生成可重光照、可自由视角渲染的 3D 资产DreamFusion。它是文生 3D 领域的里程碑，现多以论文复现、开源项目或第三方集成形式存在，非面向终端的 SaaS 产品，更适合研究与技术落地团队。