В «Кавказе» автор изображает любовь как смысл жизни. «Но бог с ним, лучше смерть, чем эти муки». У героя и героини тайный роман. Они должны скрываться ото всех, потому что героиня замужем. Она боится своего мужа, который, как ей кажется, что-то подозревает. Но, несмотря на это, герои счастливы вместе и мечтают о дерзком побеге вдвоем к морю, на кавказское побережье. И этот побег им удается.
Но подлинная трагедия происходит не здесь. Это трагедия третьего – обманутого мужа. О нем известно немного. Со слов героини, у него «жестокий, самовлюбленный характер». Он как-то сказал ей: «Я ни перед чем не остановлюсь, защищая свою честь, честь мужа и офицера!» Затем герой встречает его на вокзале, где он провожает свою жену.