Я понимаю это утверждение так, что этот философ ни разу не встречался в темном переулке с бандой отморозков, которые за пять копеек его готовы убить. Или просто получают удовольствие, унижая и мучая его.
Или что он никогда не встречался с людьми, которым не нравится его национальность, классовая принадлежность, религия или еще что-нибудь.
Думаю, после встречи с такими людьми он бы кардинально поменял свое мнение о равнодушных.
Впрочем, если он окончательно дурак, он и после этого может мнение не поменять. Полно таких людей, над которыми одни издеваются, а эти люди других обвиняют в том, что те равнодушны и их не защищают - не обвиняя своих непосредственных мучителей.
Каждый с ума по-своему сходит.