社区讨论LinuxDo 最新
大晚上的 发布这玩意 DeepSeek-V4-Flash-Vision-Exp
看的过瘾但玩不起呀,这显存要求太高了。 总参数 ≈ 304.65B Layer 43 Routed Experts 256 Shared Experts 1 每 token 激活专家 6 Expert dtype FP4 其他权重 FP8 Hidden Size 4096 Context 1,048,576 Vision layers 32 Vision dim 1024 Vision max tokens 384
内容摘要
作者:#jeffccie
板块:#开发调优
看的过瘾但玩不起呀,这显存要求太高了。
总参数 ≈ 304.65B
Layer 43
Routed Experts 256
Shared Experts 1
每 token 激活专家 6
Expert dtype FP4
其他权重 FP8
Hidden Size 4096
Context 1,048,576
Vision layers 32
Vision dim 1024
Vision max tokens 384
资讯来源
LinuxDo