src - github.com/marian-nmt/sentencepiece.git - Unnamed repository; edit this file 'description' to name the repository.

Mode	Name	Size
-rw-r--r--	CMakeLists.txt	10618	log plain
-rw-r--r--	bpe_model.cc	5959	log plain
-rw-r--r--	bpe_model.h	1223	log plain
-rw-r--r--	bpe_model_test.cc	8079	log plain
-rw-r--r--	bpe_model_trainer.cc	10266	log plain
-rw-r--r--	bpe_model_trainer.h	4273	log plain
-rw-r--r--	bpe_model_trainer_test.cc	4385	log plain
-rw-r--r--	builder.cc	18600	log plain
-rw-r--r--	builder.h	5101	log plain
-rw-r--r--	builder_test.cc	6801	log plain
d---------	builtin_pb	198	log plain
-rw-r--r--	char_model.cc	1304	log plain
-rw-r--r--	char_model.h	1061	log plain
-rw-r--r--	char_model_test.cc	3576	log plain
-rw-r--r--	char_model_trainer.cc	1748	log plain
-rw-r--r--	char_model_trainer.h	1152	log plain
-rw-r--r--	char_model_trainer_test.cc	2378	log plain
-rw-r--r--	common.h	6095	log plain
-rw-r--r--	compile_charsmap_main.cc	5641	log plain
-rw-r--r--	error.cc	3791	log plain
-rw-r--r--	filesystem.cc	3213	log plain
-rw-r--r--	filesystem.h	1851	log plain
-rw-r--r--	filesystem_test.cc	1446	log plain
-rw-r--r--	flags.cc	5834	log plain
-rw-r--r--	flags.h	3594	log plain
-rw-r--r--	flags_test.cc	4742	log plain
-rw-r--r--	freelist.h	2304	log plain
-rw-r--r--	freelist_test.cc	631	log plain
-rw-r--r--	model_factory.cc	1614	log plain
-rw-r--r--	model_factory.h	971	log plain
-rw-r--r--	model_factory_test.cc	1743	log plain
-rw-r--r--	model_interface.cc	4375	log plain
-rw-r--r--	model_interface.h	5714	log plain
-rw-r--r--	model_interface_test.cc	11629	log plain
-rw-r--r--	normalization_rule.h	6402409	log plain
-rw-r--r--	normalizer.cc	10646	log plain
-rw-r--r--	normalizer.h	5612	log plain
-rw-r--r--	normalizer_test.cc	15923	log plain
-rw-r--r--	sentencepiece.proto	2464	log plain
-rw-r--r--	sentencepiece_model.proto	11516	log plain
-rw-r--r--	sentencepiece_processor.cc	23620	log plain
-rw-r--r--	sentencepiece_processor.h	16517	log plain
-rw-r--r--	sentencepiece_processor_test.cc	37174	log plain
-rw-r--r--	sentencepiece_trainer.cc	4923	log plain
-rw-r--r--	sentencepiece_trainer.h	2996	log plain
-rw-r--r--	sentencepiece_trainer_test.cc	7111	log plain
-rw-r--r--	spec_parser.h	14350	log plain
-rw-r--r--	spm_decode_main.cc	3435	log plain
-rw-r--r--	spm_encode_main.cc	5730	log plain
-rw-r--r--	spm_export_vocab_main.cc	1550	log plain
-rw-r--r--	spm_normalize_main.cc	3632	log plain
-rw-r--r--	spm_train_main.cc	8450	log plain
-rw-r--r--	test_main.cc	968	log plain
-rw-r--r--	testharness.cc	2077	log plain
-rw-r--r--	testharness.h	6059	log plain
-rw-r--r--	trainer_factory.cc	1787	log plain
-rw-r--r--	trainer_factory.h	1056	log plain
-rw-r--r--	trainer_factory_test.cc	1400	log plain
-rw-r--r--	trainer_interface.cc	21772	log plain
-rw-r--r--	trainer_interface.h	4318	log plain
-rw-r--r--	trainer_interface_test.cc	13124	log plain
-rw-r--r--	unicode_script.cc	1183	log plain
-rw-r--r--	unicode_script.h	2807	log plain
-rw-r--r--	unicode_script_map.h	106423	log plain
-rw-r--r--	unicode_script_test.cc	1525	log plain
-rw-r--r--	unigram_model.cc	16158	log plain
-rw-r--r--	unigram_model.h	5081	log plain
-rw-r--r--	unigram_model_test.cc	20967	log plain
-rw-r--r--	unigram_model_trainer.cc	17359	log plain
-rw-r--r--	unigram_model_trainer.h	3643	log plain
-rw-r--r--	unigram_model_trainer_test.cc	2901	log plain
-rw-r--r--	util.cc	9169	log plain
-rw-r--r--	util.h	14776	log plain
-rw-r--r--	util_test.cc	17479	log plain
-rw-r--r--	word_model.cc	1124	log plain
-rw-r--r--	word_model.h	1045	log plain
-rw-r--r--	word_model_test.cc	2690	log plain
-rw-r--r--	word_model_trainer.cc	2014	log plain
-rw-r--r--	word_model_trainer.h	1259	log plain
-rw-r--r--	word_model_trainer_test.cc	2337	log plain