Можно ли не написать в слове позже букву з
Нельзя, так как позже образовано от слова поЗдний, проверить можно - опоЗдать.