Пушкин подробно объясняет это, в строфе XI шестой главы.
XI
Он мог бы чувства обнаружить,
А не щетиниться, как зверь;
Он должен был обезоружить
Младое сердце. "Но теперь
Уж поздно; время улетело.. .
К тому ж – он мыслит – В ЭТО ДЕЛО
ВМЕШАЛСЯ СТАРЫЙ ДУЭЛИСТ;
ОН ЗОЛ, ОН СПЛЕТНИК, ОН РЕЧИСТ.. .
Конечно, быть должно презренье
Ценой его забавных слов,
НО ШЕПОТ, ХОХОТНЯ ГЛУПЦОВ... "
И ВОТ ОБЩЕСТВЕННОЕ МНЕНЬЕ!
Пружина чести, наш кумир!
И вот на чем вертится мир!
Как видимо, Онегин, считавший себя человеком, не зависящим от общества, на самом деле таковым не является. Его страшит и Зарецкий, передавший ему письменный вызов Ленского на дуэль, потому что «ОН ЗОЛ, ОН СПЛЕТНИК, ОН РЕЧИСТ» , и «ШЕПОТ, ХОХОТНЯ ГЛУПЦОВ» , которые обязательно осудят человека, отказавшегося от дуэли, то есть его страшит «ОБЩЕСТВЕННОЕ МНЕНЬЕ"