信息检索
时隔6年BERT升级!仅编码器架构没被杀死,更快更准确更长上下文
ModernBERT发布,参数分别为139M(Base)、395M(Large),上下文长度为8192 token,相比大多数编码器扩展了16倍。它适用于信息检索、分类和实体抽取等任务,且在效率方面表现优异。
ModernBERT发布,参数分别为139M(Base)、395M(Large),上下文长度为8192 token,相比大多数编码器扩展了16倍。它适用于信息检索、分类和实体抽取等任务,且在效率方面表现优异。