Начальство не любило Ермолова за независимый, гордый характер, за резкость, с которою он высказывал свои мнения; чем выше было поставлено лицо, с которым приходилось иметь дело Ермолову, тем сношения его с ним были резче, а колкости ядовитее.

Известен ответ его Аракчееву на замечание последнего, что лошади его роты дурны:

"К сожалению, ваше сиятельство, участь наша часто зависит от скотов".