师父一定只能称呼男性吗，可以称呼女的吗

当然可以!
《倚天屠龙记》里峨嵋派的掌门师父灭绝师太不就是女的么?殷离的师父紫衫龙王也是女的。
《神雕侠侣》里陆无双的师父李莫愁也是女的
《鹿鼎记》里阿珂的师父,那个明朝公主也是女的
《天龙八部》里木婉清的师父(其实是她娘)秦红棉也是女的。

现实中也有很多很多,学驾驶可以有女师父,学厨艺,学美容美发都可以有女师父。