【微软发布三款顶级AI模子碾压GPT-4】【MVBD-010】飲尿ゴックン総集編

微软公司近日发布了 Phi-3.5 系列 AI 模子，其中最引东谈主注打算是推出了首个夹杂各人模子（MoE）版块 Phi-3.5-MoE。该系列还包含 Phi-3.5-vision 和 Phi-3.5-mini 两款轻量级 AI 模子。

开始【MVBD-010】飲尿ゴックン総集編，咱们来看 Phi-3.5-MoE 这个夹杂各人模子。它使用了16个3.8亿参数的各人和2个有意激活了66亿个参数的组件，况且使用了512个H100进行训诫。微软谋划团队从零运行联想这个模子以进一步升迁其性能。在程序东谈主工智能基准测试中，它的性能卓绝了Llama-3.1 8B、Gemma-2-9B和Gemini-1.5-Flash，以至接近目下最初者 GPT-4omini。

其次，咱们来看 Phi-3.5-vision 这个增强型多帧图像剖释模子。它领有42亿参数，在256个A100 GPU上进行了500B标记下的训诫，况且目下辅助多帧图像剖释和推理。与之前发布的MMBench比拟，它在文档剖释基准TextVQA上的性能升迁了70.9%。

终末，丝袜美腿咱们来看 Phi-3.5-mini 这个轻量级、强功能模子。它领有38亿参数，卓绝了Llama3.1 8B和Mistral 7B，以至不错比好意思 Mistral NeMo 12B。这个模子仅使用了512个H100进行训诫，况且在多言语任务中具有很强的竞争力。

此外，值得一提的是， Phi -3 . 5 -mini 目下辅助128K高下文窗口，而其主要竞争敌手 Gemma -2 系列仅辅助8K。

回来起来【MVBD-010】飲尿ゴックン総集編，在本次发布的产物中，微软展示出了其浩瀚的AI本领实力，况且这些产物将有望期骗于多个限制。