src - github.com/marian-nmt/sentencepiece.git - Unnamed repository; edit this file 'description' to name the repository.

Mode	Name	Size
-rw-r--r--	CMakeLists.txt	8056	log plain
-rw-r--r--	bpe_model.cc	5748	log plain
-rw-r--r--	bpe_model.h	1223	log plain
-rw-r--r--	bpe_model_test.cc	8079	log plain
-rw-r--r--	bpe_model_trainer.cc	10346	log plain
-rw-r--r--	bpe_model_trainer.h	4273	log plain
-rw-r--r--	bpe_model_trainer_test.cc	4356	log plain
-rw-r--r--	builder.cc	17459	log plain
-rw-r--r--	builder.h	5101	log plain
-rw-r--r--	builder_test.cc	6801	log plain
-rw-r--r--	char_model.cc	1333	log plain
-rw-r--r--	char_model.h	1061	log plain
-rw-r--r--	char_model_test.cc	3576	log plain
-rw-r--r--	char_model_trainer.cc	1664	log plain
-rw-r--r--	char_model_trainer.h	1152	log plain
-rw-r--r--	char_model_trainer_test.cc	2378	log plain
-rw-r--r--	common.h	5318	log plain
-rw-r--r--	compile_charsmap_main.cc	5644	log plain
-rw-r--r--	error.cc	3790	log plain
-rw-r--r--	filesystem.cc	2521	log plain
-rw-r--r--	filesystem.h	1663	log plain
-rw-r--r--	filesystem_test.cc	1446	log plain
-rw-r--r--	flags.cc	5594	log plain
-rw-r--r--	flags.h	3594	log plain
-rw-r--r--	flags_test.cc	4742	log plain
-rw-r--r--	model_factory.cc	1614	log plain
-rw-r--r--	model_factory.h	971	log plain
-rw-r--r--	model_factory_test.cc	1743	log plain
-rw-r--r--	model_interface.cc	5831	log plain
-rw-r--r--	model_interface.h	4837	log plain
-rw-r--r--	model_interface_test.cc	10099	log plain
-rw-r--r--	normalization_rule.h	6402393	log plain
-rw-r--r--	normalizer.cc	8373	log plain
-rw-r--r--	normalizer.h	4465	log plain
-rw-r--r--	normalizer_test.cc	13289	log plain
-rw-r--r--	sentencepiece.proto	2428	log plain
-rw-r--r--	sentencepiece_model.proto	9582	log plain
-rw-r--r--	sentencepiece_processor.cc	20807	log plain
-rw-r--r--	sentencepiece_processor.h	15460	log plain
-rw-r--r--	sentencepiece_processor_test.cc	34005	log plain
-rw-r--r--	sentencepiece_trainer.cc	7878	log plain
-rw-r--r--	sentencepiece_trainer.h	2845	log plain
-rw-r--r--	sentencepiece_trainer_test.cc	5497	log plain
-rw-r--r--	spm_decode_main.cc	3415	log plain
-rw-r--r--	spm_encode_main.cc	5706	log plain
-rw-r--r--	spm_export_vocab_main.cc	1542	log plain
-rw-r--r--	spm_normalize_main.cc	3632	log plain
-rw-r--r--	spm_train_main.cc	7160	log plain
-rw-r--r--	test_main.cc	968	log plain
-rw-r--r--	testharness.cc	2077	log plain
-rw-r--r--	testharness.h	6059	log plain
-rw-r--r--	trainer_factory.cc	1787	log plain
-rw-r--r--	trainer_factory.h	1056	log plain
-rw-r--r--	trainer_factory_test.cc	1400	log plain
-rw-r--r--	trainer_interface.cc	16129	log plain
-rw-r--r--	trainer_interface.h	4187	log plain
-rw-r--r--	trainer_interface_test.cc	11006	log plain
-rw-r--r--	unicode_script.cc	1183	log plain
-rw-r--r--	unicode_script.h	2807	log plain
-rw-r--r--	unicode_script_map.h	106423	log plain
-rw-r--r--	unicode_script_test.cc	1525	log plain
-rw-r--r--	unigram_model.cc	16096	log plain
-rw-r--r--	unigram_model.h	5323	log plain
-rw-r--r--	unigram_model_test.cc	20967	log plain
-rw-r--r--	unigram_model_trainer.cc	18031	log plain
-rw-r--r--	unigram_model_trainer.h	4055	log plain
-rw-r--r--	unigram_model_trainer_test.cc	2874	log plain
-rw-r--r--	util.cc	9169	log plain
-rw-r--r--	util.h	13593	log plain
-rw-r--r--	util_test.cc	17217	log plain
-rw-r--r--	word_model.cc	1157	log plain
-rw-r--r--	word_model.h	1045	log plain
-rw-r--r--	word_model_test.cc	2690	log plain
-rw-r--r--	word_model_trainer.cc	1930	log plain
-rw-r--r--	word_model_trainer.h	1259	log plain
-rw-r--r--	word_model_trainer_test.cc	2337	log plain