Требуется ли вернуться в РФ, если есть документ, по которому я не могу выезжать за границу?

Здравствуйте. Меня зовут Алексей. Я 2018-2019 год проходил военную службу в войсках имеющих отношение с секретными документами, а так же имею секретку группы А, то есть первую. Проходя службу в одной из частей мною был подписан документ о невыезде за границу в течении 5 лет. В сентябре 2019 года устроился на работу и меня отправили в командировку в республику Беларусь. Сейчас в моем офисе паника по поводу моей службы, они сделали запрос в войсковую часть и им пришло подтверждение. Как итог меня собираются отправить домой. Скажите законно это? Или есть все таки возможность остаться так где я сейчас нахожусь?