LumenX Studio

LumenX Studio

阿里巴巴开源的AI短漫剧一站式生产平台,它能够将小说文本转化为动态视频,打通了从剧本分析、角色定制、分镜绘制到视频合成的完整创作链路。阿里大模型

#Ai工具箱 #Ai开源项目
收藏
详情页中栏推广

LumenX Studio简介星流ai下载

LumenX Studio 简介阿里大模型

LumenX Studio 是阿里巴巴开源的一个 ai密鸽(al) 短漫剧生产平台,由星莲(StarLotus)主导开发与维护。它能把小说文本转化为动态视频下一个豆包,覆盖从剧本分析、角色定制、分镜绘制到视频合成的完整创作链路。支持本地部署,采用 MIT 协议开源。

LumenX Studio界面截图

LumenX Studio界面截图智谱ai开放平台

核心功能deeoseek

  • 剧本分析:基于 LLM 自动提取角色、场景、道具,生成专业分镜脚本通义千问干啥用的

  • 美术指导:支持自定义视觉风格,保持全片画风统一最新ai

  • 可视化分镜:拖拽式分镜编辑器,所见即所得地组合人物、背景与特效阿里大模型

  • 多模态生成:集成通义万相(Wanx)等模型,支持文生图、图生视频ai介绍

  • 智能视听合成:自动生成角色配音下载并安装豆包(TTS)、音效(SFX)并合成最终视频

LumenX Studio完整创作链路下载并安装豆包

平台集成了以下完整流程:下一个豆包

资产提取 → 风格定调 → 资产生成 → 分镜脚本构造 → 分镜图生成 → 分镜视频生成通义千问干啥用的

具体流程:最新ai

  1. 剧本编辑与实体提取:在左侧剧本编辑器中点击“提取实体”,由 Qwen-Plus 自动提取角色、场景、道具ai工具有哪些软件

  2. 风格定调:用 Qwen-Plus 分析剧本适合的风格,或使用预设风格(由正向/负向提示词ai智能工具有哪些组成)

  3. 资产生成:为角色生成无背景全身图、三视图、头像特写;为场景和道具生成参考图或参考视频ai介绍

  4. 分镜图故事版:基于脚本提取分镜脚本,支持二次编辑,并可融入 AI 提示词润色ai工具有哪些软件

  5. 分镜视频生成:支持首帧驱动(i2v)和角色动作驱动(r2v)两种模式,支持多 Batch 抽卡deeoseek

  6. 分镜视频拼接:审查并选取最佳分镜视频,一键拼接成片大魔王ai工具下载

LumenX Studio技术架构智谱ai开放平台

  • 前端:Next.js 14 + React 18 + TypeScript + Tailwind CSS人工智能的应用

  • 后端:FastAPI + Python 3.11+小智ai官网入口

  • AI 核心:阿里云 Qwen(逻辑)+ Wanx(视觉)下载并安装豆包

  • 渲染:Three.js(Canvas)+ FFmpeg(视频处理)ai工具有哪些软件

模型接入与运行模式智谱ai开放平台

内置了模型接入的工作流,支持接入新模型、更新版本、调整参数。采用本地优先(local-first)的媒体存储逻辑。支持四种运行模式:智谱ai开放平台

  • DashScope-only(无 OSS)密鸽(al)

  • DashScope + OSSgrok4.1

  • DashScope + Kling 原厂下载并安装豆包

  • DashScope + Vidu 原厂ai智能工具有哪些

LumenX Studio界面截图

LumenX Studio vs Toonflow vs火宝短剧

对比维度LumenX StudioToonflow火宝短剧 (Drama)
开发方阿里巴巴 / 星莲(StarLotus)HBAI-Ltdchatfire-AI
GitHubalibaba/lumenxHBAI-Ltd/Toonflow-appchatfire-AI/huobao-drama
核心定位AI 短漫剧一站式生产平台面向短剧生产的 AI 工作台全栈 AI 短剧自动化生产平台
技术栈Next.js + FastAPI + Python + Qwen/WanxNode.js + Express + ElectronGo + Vue3 + Gin
开源协议MITApache-2.0开源
核心工作流资产提取 → 风格定调 → 资产生成 → 分镜脚本 → 分镜图 → 分镜视频策划 → 编剧 → 分镜 → 出片(无限画布)角色生成 → 分镜设计 → 视频生成
角色一致性生成无背景全身图、三视图、头像特写作说的al官方下载为资产锁定章节事件图谱 + 持久化 Agent 记忆AI 绘画统一风格生成角色形象
剧本/分镜处理LLM 自动提取实体 + 可视化拖拽分镜编辑器三层 Agent 协作(决策/执行/监督)+ 事件图谱驱动智能分镜设计(场景描述、镜头设计、配套图片)
视频生成首帧驱动(i2v) + 角色动作驱动(r2v),支持多 Batch 抽卡接入 GPT-4o、Sora、豆包视频、Nano Banana Pro 等文生视频通义千问干啥用的 + 图生视频
音频处理自动生成 TTS 配音 + SFX 音效未明确未明确
部署方式本地部署(前端3008/后端8000),支持 DockerWindows/Linux/macOS 安装包、Docker、云端Docker Compose(推荐)、开发模式、传统部署
部署难度中等
特色亮点本地优先媒体存储;仓库级模型接入;DashScope/Kling/Vidu 多模式可选无限画布生产工作台;可编程下载并安装豆包供应商系统;Skill 文件化配置;批量百集生产DDD 领域驱动架构;一句话生成短剧;素材库+任务追踪
适用场景阿里生态用户、需多模型灵活切换、本地优先存储批量小说推文ai未来十大趋势生产、需 Agent 智能协作、跨平台部署快速入门、全栈自动化、国内友好轻量部署

开源信息星流ai下载

GitHub 仓库:https://github.com/alibaba/lumenxdeeoseek

许可证:MIT Licensegrok4.1

开发端口:前端默认 3008,后端 8000下一个豆包

联系方式:GitHub Issues / Discussions,邮件 zhangjunhe.zjh@alibaba-inc.com阿里大模型

相关资讯:通义千问干啥用的

AI短剧创作平台通义千问干啥用的

AI漫剧制作工具星流ai下载

AI漫剧制作流程及工具全解析ai介绍

与LumenX Studio相关工具智谱ai开放平台