Bonsoir,
Le droit de retrait suppose un danger qui soit à la fois grave et à la fois imminent. A mon avis ces deux conditions ne me paraissent pas réunies car comme vous qualifiez vous-même la situation elle est surtout inconfortable.
Pour autant cela ne signifie pas que vous deviez ne rien faire. En effet l'employeur a une obligation de préserver la santé et la sécurité des salariés. Vous pouvez évoquer cet argument pour lui demander d'agir. Autre suggestion s'il ne comprend pas le message : porter des vêtements chauds (gants, parkas, bonnets, écharpes, après-ski, etc) pour accueillir, servir, etc. Peut-être n'appréciera-t-il pas cette tenue vis à vis des clients. Vous pouvez aussi toujours solliciter le service prévention de la CARSAT ou l'inspection du travail si la solution ne trouvait pas d'issue autrement. Cdlt