这个问题要辩证地看待，不能绝对化。

不管是在什么单位，尤其是在机关或事业单位，如果大多数人对你有看法，对你议论纷纷，那你就要分析一下了。看看是不是自己的敬业精神不够，上班总是迟到早退，办公室的活儿从来不做，总是推给同事去做；是不是自己的能力不够，很多工作都无法胜任，总是求别人是不是自己的情商不够，人情往来都不考虑，总是自私自利… …

如果你真的存在上述问题，那你就要多做自我反省，并且马上行动，改掉自己的不足。

人生在世，实际上真正交往的可能就是那几十个人，或者上百个人。除了亲戚就是朋友。如果说，这些亲人，这些关心你的人，大多数都对你有看法，那你就应该警醒。是不是自己对长辈不孝顺；是不是自己吃、喝、嫖、赌、抽，不务正业；是不是只关心自己，不去关爱亲人朋友。要找到问题的根源，然后去改正。

如果你是一位领导，而且趾高气扬，做人高调，那么肯定会有很多人对你有看法；如果你是一个穷人，整天活得饥寒交迫，可怜兮兮，那也会有很多人瞧不起你；如果你是一个普通人，德才都不兼备，还脑袋削个尖往上爬，那就是小马拉大车，那就会有很多人对你有看法。身份其实也是实力的象征，世界上的人都是现实的。

真理有的时候掌握在少数人的手里，很多的探索者、先行者在当时都不被理解，有的过了几百年才被世人理解。如果你是一个改革者，如果你是一个创业者，如果你是一个真正干事业的人，那么你就要力排众议，勇敢地去闯，毅然前行，不要听那些蝼蛄叫。前提是，你所做的事业是合乎法律和道德的，是真正为国为民的。

但是，我觉得即使是这样，有的时候，我们听听不同的声音，也没有什么不好的，你可以多去争取别人的帮助，如果你总抱着“民可以乐成，不可与虑始”的态度去做事，就很难得到支持。

综上所述，无论如何，要倾听大多数人的声音，然后辩证分析，是自己的缺点就要及时去改正。如果你做的是真正的事业，就不要有太多的顾虑，要毅然前行。