S'agissant d'un chapeau ou d'une casquette, oui, de la même manière qu'on retire ceucx-ci en entrant au restaurant, mais un voile n'entre pas dans la catégorie des "couvre-chefs", il s'agit d'un vêtement porté par conviction religieuse et en permanence dans l'espace non-public (au sens d'espace de l'administration publique, dont un cabinet de medécin ne fait pas partie). De même qu'on n'attendra pas d'une nonne qu'elle retire son voile quand elle va au médecin non plus.
Il faut aussi savoir la part des choses. Des tas de femmes voilées se font traiter chaque jour sans problèmes par des médecins en France.