N>Если он смог корректно подписать свои сообщения ключом сервера, то он знает приватный ключ и поэтому он и есть сервер.

Какой конкретно ключ вы имеете в виду?
Там их несколько

Если от эллиптической кривой, то это не поможет