谷歌推出新一代人工智能模型Gemini 1.5 Pro,这是一种中型多模式模型,性能与最大模型1.0 Ultra相似,并引入了长上下文理解的新特性。Gemini 1.5 Pro配备128,000令牌上下文窗口,并可在AI Studio和Vertex AI的私人预览版中尝试最多100万个代币的上下文窗口。
该模型基于谷歌在Transformer和MoE架构方面的研究,能选择性地激活最相关的专家路径,提高效率。Gemini 1.5 Pro的上下文窗口容量超出Gemini 1.0,可处理大量信息,如1小时视频、11小时音频、30,000行代码或700,000个单词代码库。开发人员和云客户现在可使用Gemini 1.0 Ultra进行构建。