Это был небольшой, сухонький старичок с суровым нравом. Его Алеша сразу невзлюбил. В отличие отбабушки он был грубоватым и жестоким, часто порол внуков из-за малейшей провинности и не ладил со своими детьми. С дочерью Варварой, матерью Алеши, у него были напряженные отношения, так как он не давал согласия на ее брак. А сыновья, Яков и Михайло, требовали отдать им приданое сестры. Из-за этого в доме часто разгорались ссоры, доходившие до драк. Михайло однажды совсем озверел и хотел убить отца, но старик не сдавался. Бабушка же, наоборот, готова была им все отдать, лишь бы не было ссор.
Алеша в дедушке видел самодура и этакого узурпатора. Хотя бывали и моменты просветления. Так, например, когда он выпорол внука, то сам пришел мириться, рассказывал ему всякие истории про свое детство, а впоследствии учил и грамоте по церковным книгам. С возрастом дед становился все скупее и не хотел кормить бабушку. Для этого он разделил хозяйство на две части, а Акулине Ивановне пришлось снова зарабатывать вышивкой и плетением. Даже чай они стали заваривать по отдельности. Когда мать Алеши, тяжело захворав, приехала с маленьким Николаем, дед, хоть и взял заботу о ребенке на себя, но от жадности недокармливал его. А когда она умерла, Алешу он выпроводил « в люди».