В 1896 году состоялась Нижегородская ярмарка, слишком знаменитая и фееричная, где в павильонах можно было видеть и новейший электромотор, и картину Врубеля, а через год Баранов был удален в отставку. Он скончался в Петербурге на заре XX века, всеми покинутый, живя в бедности, и был очень скромно погребен на кладбище Новодевичьего монастыря (ныне по Московскому проспекту Ленинграда).
В память об этом человеке один из эсминцев Черноморского флота был наречен его именем: «Кап. лейт. Баранов».
Странных людей иногда порождала русская жизнь!
Порою даже не разобраться: где кончается плохой человек и где начинается человек хороший…