绍曾经封他为单于，又嫁宗女给他，这些年礼物不断，算得上关系亲密，但他与乌延见面时，乌延却推三阻四，不肯答应出兵协助。牵招私下里一问，才知道阎志不久前已经来过，乌延答应了阎志的要求，保持中立，既不入侵三郡，也不让鲜卑人通过他们的驻地，实际上已经是屈服于太史慈。
乌延这么做的原因很简单：孙策实力强横，不久前一战击败强人公孙度，占据了辽东，而袁谭却是孙策的手下败将，如今仅有冀州一州，实力无法与孙策相提并论。虽说袁氏对乌桓人有恩，但生死存亡面前，袁氏的那点私恩并不足以让乌桓人为他们卖命，乌延不想像蹋顿一样死在中原，死在孙策的手下。
“牵君，识时务者为俊杰，袁使君不是吴侯的对手，天下终究是吴侯的，你又何必为袁氏卖命？”