Czy można odwołać pracownika z urlopu ojcowskiego ze względu na szczególne potrzeby pracodawcy

Zatrudniamy w dziale zaopatrzenia dwóch pracowników na podstawie umów o pracę na czas nieokreślony. Jeden z nich wystąpił o udzielenie urlopu ojcowskiego. Podczas jego nieobecności drugi pracownik zachorował. W związku z tym zmuszeni byliśmy odwołać pracownika z urlopu ojcowskiego, gdyż nie mieliśmy osoby do obsługi działu. Pracownik odmówił i nie przerwał korzystania z urlopu ojcowskiego. Czy miał do tego prawo? Czy możemy go zwolnić dyscyplinarnie z pracy?