Statistik

Ringkasan evaluasi model

P@5, P@10, P@15 untuk semua metode yang dievaluasi pada dataset.

Hybrid memakai fixed RRF k=60, BM25 depth=15, SBERT depth=15.

Jumlah dokumen

13508

Jumlah query

300

Metode

BM25, SBERT Pretrained, SBERT Fine-tuned, Hybrid BM25 + SBERT Pretrained, Hybrid BM25 + SBERT Fine-tuned

Metode

BM25

P@k

P@5

0.8667

P@10

0.8233

P@15

0.7889

Metode

SBERT Pretrained

P@k

P@5

0.5600

P@10

0.4833

P@15

0.4444

Metode

SBERT Fine-tuned

P@k

P@5

0.8333

P@10

0.7733

P@15

0.7356

Metode

Hybrid BM25 + SBERT Pretrained

P@k

P@5

0.7867

P@10

0.6833

P@15

0.6489

Metode

Hybrid BM25 + SBERT Fine-tuned

P@k

P@5

0.8867

P@10

0.8267

P@15

0.7933