黄药师上通天文，下通地理，五行八卦、奇门遁甲、琴棋书画，甚至农田水利、经济兵略等亦无一不晓，无一不精。古代贫寒子弟读书机会不多，即使有，也是以读孔孟，考科举为目的，断不会像黄药师这样涉猎如此广泛。纵然他天纵奇才，没有殷实家境，没有家学渊源，也几乎不可能达到如此高度。黄药师居桃花岛，可谓隐士，古代老百姓可做不了隐士，那是读书人，特别是有钱有家世的读书人才能做到的。由此可见，他的先人，一定是很逍遥的。那么黄药师的祖上到底是谁呢？其实我们仔细看看，在天龙八部中，已经有记载了。

黄药师，同样身为五绝之一，功夫绝顶，但长期幽居桃花岛，少涉江湖。他的武功和身世，从来没有人说出。偶有出手常常是断人四肢或小有惩戒，因为往往觉得你这种人根本不值得我杀，或者我不杀你有能耐你就来报复我。黄药师厉害就厉害在功夫不仅和其他五绝平分秋色，其他方面算数，五行，字画，诗词等等无一不会，无一不精！

黄药师外号可是黄老邪，一个邪字足以说明他做事不按常理出牌，而且他这一生都不杀人！这是为何？其实跟虚竹也有关，我们都知道，虚竹是少林出身，本来就一心向佛，修心养性，他肯定不喜欢打打杀杀的，黄药师也是受到虚竹的教导，这一生才一人都不杀。

与虚竹相关的帮派实力，首先是灵鹫宫，其次是西夏国，然后少林派、丐帮和大理国。鉴于武侠首推武功，首先排除丐帮和大理，这两个势力都是有独门绝技的。其次西夏国被灭，灵鹫宫江湖上也不再有所传闻。而虚竹跟黄药师相差80岁，虚竹在晚年是完全有可能收黄药师为徒的，逍遥派的武功又跟黄药师的武功这么相似，不难想象，虚竹晚年因为西夏被灭，灵鹫宫解散，去了桃花岛上面收了黄药师为徒，创建了桃花岛。