Прав ли руководитель отказывая мне во внешнем совместительстве?

Вы путаете причину и следствие. у вас нет прав отсутствовать 4 часа на рабочем месте, чтобы работать где-то еще. тк рф устанавливает максимальную продолжительность работы по совместительству - 4 часа в день. это значит, что вы не можете на втором (не основном) месте работы работать дольше 4 часов. но это не отменяет ваших обязательств перед основным работодателем.
отказать вам в праве работать по совместительству работодатель не может. но имеет полное право требовать от вас работать в соответствии с графиком рабочих часов. то есть приходить в 9:00 и уходить в 18:00. а когда вы будете работать еще где-то - уже не его проблема.