в программе читается текстовый файл простого формата.
В нём есть два вида лексем:
1. команды
2. аргументы команд
Есть два класса:
1. tokenizer — разбивает строки на лексемы
2. parser — парсит команды
у меня есть функция is_command(), которая определяет является ли лексема коммандой
вот я и думаю куда эту функцию правильнее поместить в токенайзер или парсер?
