Да, изменится. Помните того древнегреческого философа, который купался в бочке и заметил, что уровень воды поднимается? Именно открытие этого дяденьки, Архимеда, поможет Вам с этой задачей.
Фактически, сила давления столба жидкости (а вода в стакане именно такой системой и являеется) зависит от высоты этого столба. А, когда мы опускаем в воду палец, то вытесняем часть воды, заставляя подниматься выше по стенкам (это можно проверить на опыте), поэтому будет расти и сила дваления воды на дно стакана.