发布日期:2023-12-17 03:04 点击次数:118
上证报中国证券网(记者谭镕实习生俎静远)1月15日,MiniMax发布并开源了MiniMax-01全新系列模子加拿大pc28官网走势神测,其中包含两个模子,基础说念话大模子MiniMax-Text-01和视觉多模态大模子MiniMax-VL-01。MiniMax称,MiniMax-01系列模子初次大限度完毕线性详实力机制,模子概括性能并列国际顶尖模子,同期约略高效料理各人最长400万token的高下文,是GPT-4o的32倍。
当今,MiniMax-01系列开源模子已欺诈于MiniMax旗下居品海螺AI并在各人上线。
“2025年会是Agent高速发展的一年加拿大pc28官网走势神测,岂论是单Agent的系统需要抓续的记念,仍是多Agent的系统中Agent之间大宗的相互通讯,都需要越来越长的高下文。在这个模子中,公司走出了第一步,并但愿使用这个架构抓续修复复杂Agent所需的基础智商。”MiniMax称。
据悉,MiniMax-01系列模子初次将线性详实力机制扩张到商用模子的级别。受益于这次架构改变,该系列模子在料理长输入的时刻具有尽头高的效果,接近线性复杂度。从ScalingLaw、与MoE的王人集、结构打算、磨真金不怕火优化和推理优化等层面概括探求,MiniMax选拔模子参数目为4560亿,其中每次激活459亿,约略高效料理高达400万token的高下文,将有用替代Transformer传统架构并开启超长文本输入时期。
在价钱上,MiniMax称领有极致性价比,标准订价是输入token1元/百万token,输出token8元/百万token。
MiniMax先容,公司开源了两个模子的完好权重加拿大pc28官网走势神测,这一系列模子的后续更新,包括代码和多模态联系的后续强化,公司会第一时辰上传。“选拔开源,一是因为公司以为这有可能启发更多长高下文的商酌和欺诈,从而更快促进Agent时期的到来;二是开源也能促使公司辛勤作念更多改变,更高质地地开展后续的模子研发责任。”