Skip to content

Commit

Permalink
Repackage prebuilt indexes for MS MARCO V1 LTR + Mr.TyDi (Lucene) (#1895
Browse files Browse the repository at this point in the history 
)

Adopts new, consistent schema for naming
  • Loading branch information
@lintool
lintool authored May 27, 2024
1 parent 2f76798 commit a6f4d6a
Show file tree
Hide file tree
Showing 36 changed files with 399 additions and 580 deletions.
44 changes: 22 additions & 22 deletions docs/2cr/mrtydi.html
View file
Original file line number Diff line number Diff line change
Expand Up @@ -235,7 +235,7 @@ <h1 class="mb-3">Mr.TyDi</h1>
--threads 16 --batch-size 128 \
--language ar \
--topics mrtydi-v1.1-arabic-test \
--index mrtydi-v1.1-arabic \
--index mrtydi-v1.1-ar \
--output run.mrtydi.bm25.ar.test.txt --bm25 --hits 100
</code></pre></blockquote>
Evaluation commands:
Expand All @@ -255,7 +255,7 @@ <h1 class="mb-3">Mr.TyDi</h1>
--threads 16 --batch-size 128 \
--language bn \
--topics mrtydi-v1.1-bengali-test \
--index mrtydi-v1.1-bengali \
--index mrtydi-v1.1-bn \
--output run.mrtydi.bm25.bn.test.txt --bm25 --hits 100
</code></pre></blockquote>
Evaluation commands:
Expand All @@ -275,7 +275,7 @@ <h1 class="mb-3">Mr.TyDi</h1>
--threads 16 --batch-size 128 \
--language en \
--topics mrtydi-v1.1-english-test \
--index mrtydi-v1.1-english \
--index mrtydi-v1.1-en \
--output run.mrtydi.bm25.en.test.txt --bm25 --hits 100
</code></pre></blockquote>
Evaluation commands:
Expand All @@ -295,7 +295,7 @@ <h1 class="mb-3">Mr.TyDi</h1>
--threads 16 --batch-size 128 \
--language fi \
--topics mrtydi-v1.1-finnish-test \
--index mrtydi-v1.1-finnish \
--index mrtydi-v1.1-fi \
--output run.mrtydi.bm25.fi.test.txt --bm25 --hits 100
</code></pre></blockquote>
Evaluation commands:
Expand All @@ -315,7 +315,7 @@ <h1 class="mb-3">Mr.TyDi</h1>
--threads 16 --batch-size 128 \
--language id \
--topics mrtydi-v1.1-indonesian-test \
--index mrtydi-v1.1-indonesian \
--index mrtydi-v1.1-id \
--output run.mrtydi.bm25.id.test.txt --bm25 --hits 100
</code></pre></blockquote>
Evaluation commands:
Expand All @@ -335,7 +335,7 @@ <h1 class="mb-3">Mr.TyDi</h1>
--threads 16 --batch-size 128 \
--language ja \
--topics mrtydi-v1.1-japanese-test \
--index mrtydi-v1.1-japanese \
--index mrtydi-v1.1-ja \
--output run.mrtydi.bm25.ja.test.txt --bm25 --hits 100
</code></pre></blockquote>
Evaluation commands:
Expand All @@ -355,7 +355,7 @@ <h1 class="mb-3">Mr.TyDi</h1>
--threads 16 --batch-size 128 \
--language ko \
--topics mrtydi-v1.1-korean-test \
--index mrtydi-v1.1-korean \
--index mrtydi-v1.1-ko \
--output run.mrtydi.bm25.ko.test.txt --bm25 --hits 100
</code></pre></blockquote>
Evaluation commands:
Expand All @@ -375,7 +375,7 @@ <h1 class="mb-3">Mr.TyDi</h1>
--threads 16 --batch-size 128 \
--language ru \
--topics mrtydi-v1.1-russian-test \
--index mrtydi-v1.1-russian \
--index mrtydi-v1.1-ru \
--output run.mrtydi.bm25.ru.test.txt --bm25 --hits 100
</code></pre></blockquote>
Evaluation commands:
Expand All @@ -395,7 +395,7 @@ <h1 class="mb-3">Mr.TyDi</h1>
--threads 16 --batch-size 128 \
--language sw \
--topics mrtydi-v1.1-swahili-test \
--index mrtydi-v1.1-swahili \
--index mrtydi-v1.1-sw \
--output run.mrtydi.bm25.sw.test.txt --bm25 --hits 100
</code></pre></blockquote>
Evaluation commands:
Expand All @@ -415,7 +415,7 @@ <h1 class="mb-3">Mr.TyDi</h1>
--threads 16 --batch-size 128 \
--language te \
--topics mrtydi-v1.1-telugu-test \
--index mrtydi-v1.1-telugu \
--index mrtydi-v1.1-te \
--output run.mrtydi.bm25.te.test.txt --bm25 --hits 100
</code></pre></blockquote>
Evaluation commands:
Expand All @@ -435,7 +435,7 @@ <h1 class="mb-3">Mr.TyDi</h1>
--threads 16 --batch-size 128 \
--language th \
--topics mrtydi-v1.1-thai-test \
--index mrtydi-v1.1-thai \
--index mrtydi-v1.1-th \
--output run.mrtydi.bm25.th.test.txt --bm25 --hits 100
</code></pre></blockquote>
Evaluation commands:
Expand Down Expand Up @@ -1740,7 +1740,7 @@ <h1 class="mb-3">Mr.TyDi</h1>
--threads 16 --batch-size 128 \
--language ar \
--topics mrtydi-v1.1-arabic-test \
--index mrtydi-v1.1-arabic \
--index mrtydi-v1.1-ar \
--output run.mrtydi.bm25.ar.test.txt --bm25 --hits 100
</code></pre></blockquote>
Evaluation commands:
Expand All @@ -1760,7 +1760,7 @@ <h1 class="mb-3">Mr.TyDi</h1>
--threads 16 --batch-size 128 \
--language bn \
--topics mrtydi-v1.1-bengali-test \
--index mrtydi-v1.1-bengali \
--index mrtydi-v1.1-bn \
--output run.mrtydi.bm25.bn.test.txt --bm25 --hits 100
</code></pre></blockquote>
Evaluation commands:
Expand All @@ -1780,7 +1780,7 @@ <h1 class="mb-3">Mr.TyDi</h1>
--threads 16 --batch-size 128 \
--language en \
--topics mrtydi-v1.1-english-test \
--index mrtydi-v1.1-english \
--index mrtydi-v1.1-en \
--output run.mrtydi.bm25.en.test.txt --bm25 --hits 100
</code></pre></blockquote>
Evaluation commands:
Expand All @@ -1800,7 +1800,7 @@ <h1 class="mb-3">Mr.TyDi</h1>
--threads 16 --batch-size 128 \
--language fi \
--topics mrtydi-v1.1-finnish-test \
--index mrtydi-v1.1-finnish \
--index mrtydi-v1.1-fi \
--output run.mrtydi.bm25.fi.test.txt --bm25 --hits 100
</code></pre></blockquote>
Evaluation commands:
Expand All @@ -1820,7 +1820,7 @@ <h1 class="mb-3">Mr.TyDi</h1>
--threads 16 --batch-size 128 \
--language id \
--topics mrtydi-v1.1-indonesian-test \
--index mrtydi-v1.1-indonesian \
--index mrtydi-v1.1-id \
--output run.mrtydi.bm25.id.test.txt --bm25 --hits 100
</code></pre></blockquote>
Evaluation commands:
Expand All @@ -1840,7 +1840,7 @@ <h1 class="mb-3">Mr.TyDi</h1>
--threads 16 --batch-size 128 \
--language ja \
--topics mrtydi-v1.1-japanese-test \
--index mrtydi-v1.1-japanese \
--index mrtydi-v1.1-ja \
--output run.mrtydi.bm25.ja.test.txt --bm25 --hits 100
</code></pre></blockquote>
Evaluation commands:
Expand All @@ -1860,7 +1860,7 @@ <h1 class="mb-3">Mr.TyDi</h1>
--threads 16 --batch-size 128 \
--language ko \
--topics mrtydi-v1.1-korean-test \
--index mrtydi-v1.1-korean \
--index mrtydi-v1.1-ko \
--output run.mrtydi.bm25.ko.test.txt --bm25 --hits 100
</code></pre></blockquote>
Evaluation commands:
Expand All @@ -1880,7 +1880,7 @@ <h1 class="mb-3">Mr.TyDi</h1>
--threads 16 --batch-size 128 \
--language ru \
--topics mrtydi-v1.1-russian-test \
--index mrtydi-v1.1-russian \
--index mrtydi-v1.1-ru \
--output run.mrtydi.bm25.ru.test.txt --bm25 --hits 100
</code></pre></blockquote>
Evaluation commands:
Expand All @@ -1900,7 +1900,7 @@ <h1 class="mb-3">Mr.TyDi</h1>
--threads 16 --batch-size 128 \
--language sw \
--topics mrtydi-v1.1-swahili-test \
--index mrtydi-v1.1-swahili \
--index mrtydi-v1.1-sw \
--output run.mrtydi.bm25.sw.test.txt --bm25 --hits 100
</code></pre></blockquote>
Evaluation commands:
Expand All @@ -1920,7 +1920,7 @@ <h1 class="mb-3">Mr.TyDi</h1>
--threads 16 --batch-size 128 \
--language te \
--topics mrtydi-v1.1-telugu-test \
--index mrtydi-v1.1-telugu \
--index mrtydi-v1.1-te \
--output run.mrtydi.bm25.te.test.txt --bm25 --hits 100
</code></pre></blockquote>
Evaluation commands:
Expand All @@ -1940,7 +1940,7 @@ <h1 class="mb-3">Mr.TyDi</h1>
--threads 16 --batch-size 128 \
--language th \
--topics mrtydi-v1.1-thai-test \
--index mrtydi-v1.1-thai \
--index mrtydi-v1.1-th \
--output run.mrtydi.bm25.th.test.txt --bm25 --hits 100
</code></pre></blockquote>
Evaluation commands:
Expand Down
Loading

0 comments on commit a6f4d6a

Please sign in to comment.