英伟达开源最强模型Nemotron-4 340B 有望带动光模块需求持续增长

【英伟达开源最强模型Nemotron-4 340B 有望带动光模块需求持续增长】据媒体报道，英伟达全新发布的开源模型Nemotron-4 340B，有可能彻底改变训练LLM的方式！从此，或许各行各业都不再需要昂贵的真实世界数据集了。而且，Nemotron-4 340B直接超越了Mixtral 8x22B、Claude sonnet、Llama3 70B、Qwen 2，甚至可以和GPT-4掰手腕。据悉，Nemotron-4 340B是一系列具有开创意义的开源模型，最大的技术变化在于进一步拥抱MOE架构，引入ROPE优化算法。