← 返回模型库

DavidAU/Qwen3.8-Flash-Next-Abliterated-Uncensored-Turbo-Brilliance-50x-Reasoning-Instruct-GSQ-RCO-GGUF

Qwen3.8-Flash-Next-Abliterated-Uncensored-Turbo-Brilliance-50x-Reasoning-Instruct-GSQ-RCO-GGUF:多模态推理与角色化对话

面向中文及多语种用户的图像文本对话、深度推理、编程与角色扮演模型,提供可在提示词中切换的推理、指令和 AI Constructs 模式。当前提供的是 120B/180B 规模口径存在冲突的稀疏模型,其 IQ3_S GGUF 文件约 83.86GB,建议至少配置 98GB 内存与 84.

多模态推理本地大模型角色扮演GGUF量化
查看模型源页面 ↗
近30天源站下载量
9.2万
参数
未知
上下文
未说明
架构 / 任务
image-text-to-text
许可证
apache-2.0

MODEL POSITIONING

这个模型解决什么问题?

模型卡将本项目定位为支持图像与文本输入的稀疏 MoE 模型,声称具备 512 个专家、每 token 激活 10 个专家,并提供 27 种推理模式、27 种指令模式、9 种 xhigh 模式、15 个 AI Constructs、工具与智能体支持及 256K 上下文。仓库主体是 GSQ-RCO 的 IQ3_S GGUF 量化文件,模型卡同时出现 120B 与 180B 两种参数口径,配置字段未提供可核验的统一架构信息。可通过 Ollama、llama.cpp 和 LM Studio 运行;视觉输入及其他工具的具体配置要求,模型卡未说明。

更适合谁

  • 拥有大型多 GPU 工作站或高内存服务器的用户
  • 需要多语种图像文本对话与复杂推理的用户
  • 需要通过提示词切换推理、指令和角色化工作方式的创作者
  • 愿意投入大量存储与内存资源的本地模型体验者

典型使用场景

  • 图像与文本联合问答及多语种内容处理
  • 通过提示词选择不同强度的推理或快速指令模式
  • 商业策划、头脑风暴、通用教学等结构化任务
  • 角色扮演、代理工作流及编程辅助

SOURCE-BASED CAPABILITIES

模型卡透露的核心特点

多模态交互

任务标签为 image-text-to-text,并带有 vision、multimodal 标签

可切换工作模式

支持在提示词中调用 27 种推理模式、27 种指令模式及 xhigh 模式

角色化构建

提供 15 个 AI Constructs 和 5 个 Super AI Constructs,覆盖通用教学、代理、编码与头脑风暴等方向

稀疏 MoE 架构

模型卡声称包含 512 个专家,每个 token 激活 10 个专家

开放交互取向

作者将其标为 abliterated、uncensored,并称支持工具与智能体工作流

按当前权重估算的硬件准备

  • 现有 GGUF 文件中,最低显存估算约 84.5 GB
  • 为上下文缓存、系统进程和并发请求预留额外内存,不要只按模型文件大小配置设备。

量化版本怎么选

  • 当前来源列出的唯一文件为 IQ3_S,文件名为 Qwen3.8-Flash-Next-GSQ-RCO-abliterated-IQ3_S-00001-of-00002.gguf
  • IQ3_S 是该仓库提供的低比特量化选择,实际效果仍取决于任务、提示模式、上下文长度与后端实现
  • 模型卡基准表提及 Q2_0、IQ2_XS、IQ3_XXS 和 BF16,但所给 GGUF 文件列表未列出对应下载文件

GGUF VARIANTS

量化版本与硬件要求

显存与内存数值均按权重文件体积估算,未做设备实测。多模态还需要配套投影文件并额外占用内存;分卷容量按全部分卷合计,下载时需获取完整文件组。

量化权重合计估算加载显存建议显存建议内存来源
IQ3_S需全部分卷78 GB84.5 GB96.5 GB117.5 GB查看文件组 ↗

HARDWARE MATCH

哪些显卡或设备更适合运行?

按当前最小量化文件估算,至少需要 84.5GB 显存;如果希望为运行框架和上下文保留余量,优先参考推荐显存 96.5GB。

阅读 24GB 显存选型指南 →

可以怎样运行

  • 使用 llama.cpp 加载该 GGUF 量化文件
  • 使用 Ollama 运行模型
  • 使用 LM Studio 加载与运行
  • 模型卡称可通过本地 API 及 vLLM 相关协议调整模式,但具体版本要求模型卡未说明

采用前要知道的限制

  • 模型卡同时声称 120B 参数与 180B 参数,参数规模口径不一致,配置字段也未提供明确架构记录
  • IQ3_S 文件体量很大,官方列出的最低内存和显存门槛远超多数个人设备
  • 当前文件为分片文件之一,下载与部署时需确认配套分片是否齐全
  • 视觉输入、工具调用和第三方推理引擎的兼容细节模型卡未说明