其实从步入ba职业生涯的第一天开始，卡特就早已习惯人们对他铺天盖地的怀疑当中。当一位美国专门报道nba的记者在99年没有投票选他成为最佳新人时，人们认为他是怀恨在心，而在00年nba全明星扣篮大赛上大出风头，更有人指责他只是为了取悦球迷而哗众取宠，却完全置球队的长远利益而不顾，而最后卡特和麦迪的分分合合并长期拒绝互通电话更是成为联盟前几年里最八卦的热门话题
其实这一切的发生都不是孤立偶然的，因为自从00年悉尼奥运会以来，当时卡特是美国梦四的头号得分手，和加内特一起成为风头最炫的nba超级大明星，他就不再是原来那个讨人喜欢的家伙了。可能是人们比较喜欢卡特总是把头发剃得干干净净的样子是不是这样就更符合后乔丹时代江湖接班人的作派呢可偏偏那时，卡特却留起了头蓬松的头发，不但是回味七八十年代的放克文化，而且也表达了随时准备向取笑自己的人发起挑战的意思。
虽然此后卡特颇为平静了一段时间，但在01年季后赛东区半决赛第七场对76人队的生死战中，卡特再次成为了人们非议里的涡心。因为就是在那个系列赛中表现相当出众的卡特，在比赛当天刚好从北卡罗莱纳大学毕业。最后他选择了参加学校的毕业典礼，接着再飞回费城参加比赛，结果是卡特最终投失了可能会为猛龙队带来决定性胜利的关键一球。接下来是他反反复复的伤病。从肩部到膝盖，他似乎总是显得那样的脆弱。
但更令人掀心的是，在01年常规赛最后冲刺的关键时刻，缺少卡特的猛龙队反而打得更好，在剩余下的14场比赛中狂卷12场胜利，甚至最后还打进了季后赛。突然人们开始认为，他不配做个明星。他也许是猛龙的大麻烦。于是当后来乔丹的好友奥克利指责他没有领袖气质时，矛盾完全激化，甚至连最关爱卡特的母亲罗宾逊也出来向奥克利发炮。“有些人总喜欢对别人指手画脚，我认为这对我儿子是不公平的”。
但卡特呢我们如今也不得不承认，在矛盾最尖锐的时刻，他也的确发表了一些不恰当的言辞。在03年3月3日猛龙队以92101主场败给黄蜂队后，卡特在接受记者采访时用了伟大一词“这是个伟大的赛季。”
语气中的嘲谑也反应了卡特和教练长期不和的现实。而相比之下，这一切造成的轰动还远远不及今年全明星赛上的让位事件。当时的状况是，老乔丹第14次、也是最后一次参加全明星赛，但从得票数上来看，他只能成为替补，这完全是不可想象的。而卡特上赛季仅参加了10场常规赛就因伤病而高挂免战牌，但他的得票数仍排名全联盟第三，并入选了东部明星队的首发阵容。
当艾弗森和麦迪先后提出要把首发位置让给老乔丹时，在nba全明星赛史上也有过让位的先例，像78年科林斯就让位给哈弗利切克，还有92年蒂姆哈达威为了让魔术师约翰逊首发也做出了同样的事情，卡特却选择了拒绝每个人都有他们的选择、我想那些想让乔丹首发的人说之前没有坐下来先想想为什么他们做出这样的选择”里面肯定有他们的原因，要知道投票选我的人可有上百万之多。”而当被问到对艾弗森和麦迪的行动有什么看法时，卡特冷冷地说“祝贺他们。”但后来卡特还是迫于压力给老桥乔让位了，但很多不明就里的球迷还是在他入场时给予了刺耳的声。