Ich werde am Esstisch ständig beobachtet

Es gibt einen Kollegen bei der Arbeit, der sich jedes Mittagessen neben mich setzt und trotz seines eigenen Essens ständig auf meinen Teller starrt. Ich kann nicht beschreiben, wie aufmerksam diese Augen sind. Zuerst habe ich nichts gesagt, aber mittlerweile ist es nicht mehr zu übersehen. Ich habe ihm ein paar Mal von meinem Essen abgegeben, aber das fängt an, mich zu stören. Glaubt ihr, es wäre unhöflich, etwas dazu zu sagen, oder bin ich einfach zu empfindlich?