办公室有关于我的谣言，我要怎么办？

我现在在国内的一个二线城市工作，公司规模还可以，大约能有100来号人。我平时和大家关系都不错的，下班我们还会一起去吃饭唱歌。可是最近我发现大家看我的眼神有点奇怪，他们还会窃窃私语。后来一个和我关系很好的同事偷偷告诉我，最近办公室有关于我和老板的传言。说我和老板关系暧昧，还有人说晚上看到我坐上了老板的车。我一听就知道怎么回事了，前段时间我有个项目没有做完，所以工作到八点多。老板下班时看到后就送我回家，就这么简单。我不知道谁会造这种谣，我和老板都是清清白白的。今天早上老板找我谈话，说让我处理好与同事间的人际关系。可是我连谁造谣都不知道，我真的很苦恼。我到底要怎么办？我现在每天心情都很糟，我不知道要怎么证明我的清白。论坛里的朋友能帮我想想办法吗？谢谢了