张飞曾经到刘巴处就宿，刘巴却不理会张飞，使张飞十分恼怒。诸葛亮对刘巴说：“张飞虽是武人，但他非常仰慕先生你。主公正召集文武人才，以成就一番大事业。先生你虽然天性清高，但也应该放低一些格调吧。”刘巴回答道：“大丈夫处世，当交四海英雄，怎么能教我去和一介武夫交谈了？”刘备听闻后异常愤怒。东吴的张昭也曾和孙权谈论此事，张昭认为刘巴心胸过于狭隘，不应如此抗拒张飞。孙权则说道：“若让刘子初随世俗沉浮，为了取悦玄德而结交张飞，怎么能称得上是高士呢？”