The Beatles从未告诉Best他被解雇的理由，Epstein给出的唯一理由是：“小伙子们不想让你再在队里了。”Cynthia Lennon（John Lennon的前妻）的书John里证实，在利物浦和汉堡，Lennon, McCartney, 和 Harrison不演出时经常在一起 写歌、进行社交活动，Best则不常和他们在一起。这使Best很孤立，他对乐队的经历、队友提到的事以及只有圈内人才明白的笑话都不了解。乐队第一次去汉堡时，The Beatles意识到他们穿的演出服不能禁受舞台上每晚几个小时的汗水和跳来跳去，所以他们都买了皮夹克、牛仔裤和牛仔靴这些更结实的衣服。Best却喜欢穿短袖衣服，所以和乐队的整体风格很不协调。不过，之后的一些照片显示，他还是穿上了皮夹克和牛仔裤。在汉堡，Lennon, McCartney, Harrison,和Sutcliffe 接触了一些药物。因为每天晚上好几个小时的演出，他们经常服用Preludin（ 芬美曲秦）来保持清醒，这可能是德国客人或Astrid Kirchherr提供给他们的。Lennon经常服用四五片，Best却总是拒绝加入。
Kirchherr问The Beatles是否介意她为乐队拍一组照片。他们觉得很好，因为别的乐队只有朋友给拍的小照。第二天早晨，Kirchherr在 Reeperbahn附近一个叫der Dom的市立公园给乐队拍照，下午照完后Kirchherr请他们去位于Altona他母亲的家里，只有Best决定不去。 Dot Rhone（McCartney当时的女友，之后游览了汉堡）形容Best很文静，从不参与乐队的会话。Best在粉丝中的流行是争执的来源之一，许多女性粉丝认为Best是乐队里最好看的成员。据说Epstein因为Best拒绝理乐队统一的 mop-top风格的发式而恼火，Best却声称自己从未被要求改变发型。1995年接受BBC的Radio Merseyside采访时乐队早期贝司手Sutcliffe的女友Kirchherr解释说：“我当时的男友 Klaus Voorman留着这种发式，Stuart非常非常喜欢。他是第一个求我帮他剪的。Pete Best的头发真的很鬈，理不起来。”
Radio Merseyside的主持人Spencer Leigh写了一本关于Best被炒的书说是因为其他队友的嫉妒，尤其是McCartney。在曼彻斯特的Teenagers' Turn节目亮相时，Lennon, McCartney 和 Harrison 走上舞台，观众们只是报以掌声，但Best走上台时，女孩们叫了起来。录完节目后，Best在舞台的门口被关切的女士们围住了，别的队员却照了一些照片后就被忽略了。在场的McCartney的父亲Jim McCartney提醒Best说：“为什么你总这么受关注？为什么不把其他小伙子叫回来？我认为这样太自私了。”后来McCartney的父亲偶然在The Cavern Club 遇到Pete Best，当时电视里ITV的系列节目Know the North在播The Beatles的公演，就说：“很好，不是吗？他们上电视了！”据观察家说当时Best并没说什么，静静地离开了。Epstein真的把Best炒掉了，Martin感到很震惊，说：“他是乐队里卖相最好的，当我听说Pete被解雇时我很惊讶，鼓对于一张唱片很重要，在别的方面就没什么关系。乐迷们不会太在意打鼓的质量。”9月11号Love Me Do 的第三场演唱会，Martin使用了 Andy White ，而非Best的替换者Starr。
虽然有时笼罩在英俊的光环下，但音乐上Best的有限的节奏语言却被认为是阻碍了其他三位成员整体音乐风格的成长。就像Bob Spitz2005年写的传记中说的，“Pete能做的所有的就是打'Fours'...”这是一种每四分之一音符敲一下来控制敲击的打鼓方式。Spitz书中还提到技师Ron Richards曾试图教Best一些更复杂的鼓技，以便适应不同歌曲的需要，但却失败了。2009年1月14日，McCartney在The Howard Stern Show接受Stern采访时被问及，Best被要求离开是否是因为他太帅了。McCartney回答不是，然后解释他自己，Harrison和Lennon被Starr的鼓技深深地吸引住了。