Linkup이 ModernBERT 기반 SPARSEUP을 Apache 2.0으로 공개했습니다. 단어별 가중치를 출력해 역색인 검색에 쓰며 영문 모델의 BEIR-13 평균 nDCG@10은 자체 평가에서 56.4입니다. 같은 백본과 학습 데이터를 쓴 DenseOn 57.9, LateOn 58.9보다는 낮았고 SPARSEUP만 근사 검색을 사용했습니다. MS MARCO의 단일 스레드 색인 검색은 약 380마이크로초에 정확 검색 대비 97% 넘는 재현율을 기록했으나, 이는 전체 문서 인코딩 시간을 포함한 응답 속도가 아닙니다. 한국어 성능과 실제 데이터의 품질은 별도 검증이 필요합니다.
Tech로 돌아가기
Tech
Linkup, 1억4900만 매개변수 희소 검색 모델 공개
역색인에 쓸 수 있는 영문 공개 모델이지만 검색 방식과 데이터가 다른 점수는 직접 비교하기 어렵습니다.