4o-mini只有8B,o1也才300B!微软论文意外曝光GPT核心机密
微软又把OpenAI的机密泄露了??在论文中明晃晃写着:英伟达2024年初发布B200时,就摊牌了GPT-4是1.8TMoE也就是1800B,这里微软的数字更精确,为1.76T。论文中给OpenAI的mini系列,Claude3.5Sonnet也都附上了参数,总结如下:o1-preview约300B;o1-mini约100BGPT-4o约200B;GPT-4o-mini约8BClaude3.5Sonnet2024-10-22版本约175B微软自己的Phi-3-7B,这个不用约了就是7B虽然论文中后面也有免责声明:但还是有不少人觉得事情没这么简单。2025年的最新版本里,开源已经被去掉了。