虬髯客与红拂女是结拜兄妹的关系，他们俩与李靖并称为风尘三侠。想当初李靖和红拂女私奔，路上碰巧遇到了虬髯客，三人进行一番交流后，成为了心心相惜的朋友，虬髯客和红拂女结拜为兄妹，不过最后三人还是各奔东西。
《虬髯客传》里对虬髯客和红拂女的故事进行了渲染，将两人的感情细节刻画的很精妙，富有浪漫主义色彩。相传虬髯客家境富裕，其父是当地有名的财主，只是虬髯客生来丑陋，不被父亲喜爱。
虬髯客独自一人前去拜师学艺，学成归来后遇到红拂女和李靖这对恋人，三人交谈甚欢，然后结拜为异姓兄妹。虬髯客、红拂女和李靖前往李世民府中，虬髯客觉得李世民将来肯定有所成就，当然这句话最后成为现实。
红拂女嫁给李靖后，虬髯客便告辞离去，他想要过自己的生活，不过这里面可能夹杂着对红拂女另一种情意，不得不离开。
