aidarvaleev1998/bpe-scala

BPE on Scala

This repository provides an implementation of Byte-Pair Encoding on Scala.

Usage from sbt shell

run --help
run build -i data.ru -v data.vocab
run encode -i data.sample -v data.vocab -o data.out
run decode -i data.out -v data.vocab -o data.out2

bpe-scala's Issues

Delivery Feedback

1. Where is README.md with project description and purpose?
2. Rename the project in your build.sbt, aidarvaleev1998 is not an okay name for a project.
3. Rename the package of the project.
4. If your program is a console app, you shouldn't hardcode path to the input file.
5. Разделяй загрузку конфигурации и остальную логику, не лоадь в мейне
6. Файла нет + добавить аутпут в гитигнор наверно
7. Зачем запускать стрим, а по его завершении материализовывать ещё один стрим
8. Где тесты
9. В tokenize вместо передачи строки с регуляркой нужно её сначала предкомпилить вне функции, чтобы она не компилилась на каждый вызов метода.
10. Запуски актор-системы и стримов по хорошему должны быть отдельно от определения этих стримов
11. Когда файл не обнаружился, прила почему-то не завершилась. Завершай актор-систему всегда, а не только при успехе