いくらノンアルコールでも、それは無いなと思います。
世の中にはTPOというものがあります。
更に言えば、お客様や周囲に誤解を招きます。
小さな事務所なんですよね?
休憩用の別室とかで無く、自席とのことですし、急な来客とかあると、見えてしまうのではないですか?
別にいいじゃんと思いますか?
自分が客の立場で、どこかの事務所や、お店とかに行って、店員が飲んでても、構わないと思いますか?
例えば市役所の人が、自席で飲んでても、気にしませんか?
水分補給自体が禁止されたなら、問題ですが、そうではないようです。
上司がダメと言った時点で辞めましょうよ。