上谷郡虽然在幽州的管辖范围之内，但却不被袁熙掌控，而是被难楼掌控。

当初袁绍击败公孙瓒的时候，乌桓部落也出了力，之后又在明面上投靠了袁绍，所以袁绍封乌桓部落的难楼、乌延、苏仆延为单于，给了他们很大的权力，直接导致了他们三个乌桓单于对袁熙这个次子并不重视，甚至有点无视的意思。

如今袁熙已经掌控了代郡，实力进一步提升，想要继续发展的话，就必须要把幽州完全掌控起来，而往四处看一下，也就只有上谷郡的难楼比较好欺负的。