刘备上表荐举刘琦为荆州刺史，自己又往南征讨武陵、长沙、桂阳、零陵四郡。武陵太守金旋、长沙太守韩玄、桂阳太守赵范、零陵太守刘度都投降刘备。庐江人雷绪率领私人武装数万人向刘备行屈膝跪拜礼表示臣服。刘琦病死，众部下推举刘备为荆州牧，治所设在公安县。孙权渐渐惧怕刘备，将自己的妹妹嫁给刘备以巩固友好关系，刘备到京口会见孙权，以加深感情。孙权派使者游说想与刘备共同夺取蜀地，刘备手下有人说应该答应同意，因为吴国最终不能越过荆州占有蜀地，蜀地可以为自己所有。荆州主簿殷观进言说：“如果替吴国作先锋，进不能攻克蜀地，退则给吴国以可乘之机，那大事就完了。现在只可以口头上赞成他们征伐蜀地，同时自称刚占据各郡，不能兴师动众，吴国必定不敢越过我们而单独夺取蜀地。这样的进退之计，可以得到削吴、占蜀的好处。”刘备听从了这个建议，孙权果然停止了这项计策。刘备升任殷观为别驾从事。