Тут обходим артикль the?: Let's invite... Browns to my birthday party!
The Browns - так как имеется в виду семья Браунов, а с семьями определенный артикль обязателен