Welcome to
mirror list
, hosted at
ThFree Co
, Russian Federation.
src - github.com/marian-nmt/sentencepiece.git - Unnamed repository; edit this file 'description' to name the repository.
index
:
github.com/marian-nmt/sentencepiece.git
anthonyaue/document_minexport_build
anthonyaue/remove_cr
anthonyaue/test_change
casing
gmaster
master
mjd/base64
mjd/casing
mjd/casing2
mjd/casing3
mjd/oldmaster
mjd/oldmaster2
noproto
rename-version
rjai/casing
rjai/fix_case_encoding_arg
sr
zhaogao/modify_batch_file
Unnamed repository; edit this file 'description' to name the repository.
www-data
summary
refs
log
tree
commit
diff
log msg
author
committer
range
path:
root
/
src
Mode
Name
Size
-rw-r--r--
Makefile.am
3205
log
plain
-rw-r--r--
bpe_model.cc
4987
log
plain
-rw-r--r--
bpe_model.h
1252
log
plain
-rw-r--r--
bpe_model_test.cc
4136
log
plain
-rw-r--r--
bpe_model_trainer.cc
10839
log
plain
-rw-r--r--
bpe_model_trainer.h
4203
log
plain
-rw-r--r--
bpe_model_trainer_test.cc
4175
log
plain
-rw-r--r--
builder.cc
10742
log
plain
-rw-r--r--
builder.h
4271
log
plain
-rw-r--r--
builder_test.cc
4179
log
plain
-rw-r--r--
char_model.cc
1925
log
plain
-rw-r--r--
char_model.h
1090
log
plain
-rw-r--r--
char_model_test.cc
2657
log
plain
-rw-r--r--
char_model_trainer.cc
2153
log
plain
-rw-r--r--
char_model_trainer.h
1144
log
plain
-rw-r--r--
char_model_trainer_test.cc
2220
log
plain
-rw-r--r--
common.h
4928
log
plain
-rw-r--r--
compile_charsmap_main.cc
3977
log
plain
-rw-r--r--
error.cc
768
log
plain
-rw-r--r--
flags.cc
6165
log
plain
-rw-r--r--
flags.h
3594
log
plain
-rw-r--r--
flags_test.cc
4742
log
plain
-rw-r--r--
model_factory.cc
1592
log
plain
-rw-r--r--
model_factory.h
971
log
plain
-rw-r--r--
model_factory_test.cc
1743
log
plain
-rw-r--r--
model_interface.cc
3173
log
plain
-rw-r--r--
model_interface.h
2772
log
plain
-rw-r--r--
model_interface_test.cc
6314
log
plain
-rw-r--r--
normalization_rule.h
990842
log
plain
-rw-r--r--
normalizer.cc
7422
log
plain
-rw-r--r--
normalizer.h
4062
log
plain
-rw-r--r--
normalizer_test.cc
10888
log
plain
-rw-r--r--
sentencepiece.proto
2259
log
plain
-rw-r--r--
sentencepiece_model.proto
8026
log
plain
-rw-r--r--
sentencepiece_processor.cc
10262
log
plain
-rw-r--r--
sentencepiece_processor.h
6908
log
plain
-rw-r--r--
sentencepiece_processor_test.cc
19655
log
plain
-rw-r--r--
spm_decode_main.cc
3211
log
plain
-rw-r--r--
spm_encode_main.cc
2513
log
plain
-rw-r--r--
spm_export_vocab_main.cc
1480
log
plain
-rw-r--r--
spm_normalize_main.cc
2707
log
plain
-rw-r--r--
spm_train_main.cc
6520
log
plain
-rw-r--r--
stringpiece.h
6610
log
plain
-rw-r--r--
test_main.cc
702
log
plain
-rw-r--r--
testharness.cc
1910
log
plain
-rw-r--r--
testharness.h
6160
log
plain
-rw-r--r--
trainer_factory.cc
1787
log
plain
-rw-r--r--
trainer_factory.h
1056
log
plain
-rw-r--r--
trainer_factory_test.cc
1322
log
plain
-rw-r--r--
trainer_interface.cc
10571
log
plain
-rw-r--r--
trainer_interface.h
3511
log
plain
-rw-r--r--
trainer_interface_test.cc
2682
log
plain
-rw-r--r--
unicode_script.cc
1183
log
plain
-rw-r--r--
unicode_script.h
2807
log
plain
-rw-r--r--
unicode_script_map.h
106423
log
plain
-rw-r--r--
unicode_script_test.cc
1494
log
plain
-rw-r--r--
unigram_model.cc
13036
log
plain
-rw-r--r--
unigram_model.h
4636
log
plain
-rw-r--r--
unigram_model_test.cc
12738
log
plain
-rw-r--r--
unigram_model_trainer.cc
19010
log
plain
-rw-r--r--
unigram_model_trainer.h
3707
log
plain
-rw-r--r--
unigram_model_trainer_test.cc
2652
log
plain
-rw-r--r--
util.cc
7931
log
plain
-rw-r--r--
util.h
8641
log
plain
-rw-r--r--
util_test.cc
12930
log
plain
-rw-r--r--
word_model.cc
1585
log
plain
-rw-r--r--
word_model.h
1074
log
plain
-rw-r--r--
word_model_test.cc
2447
log
plain
-rw-r--r--
word_model_trainer.cc
2349
log
plain
-rw-r--r--
word_model_trainer.h
1251
log
plain
-rw-r--r--
word_model_trainer_test.cc
2260
log
plain