他本是守荆州的第一人选，关羽只是第二人选，因一风流韵事而遭弃用。
按照小说《三国演义》的描写，荆州南部四个郡，零陵郡是刘备诸葛亮张飞赵云共同攻取的，武陵郡是张飞攻取的，长沙郡是关羽攻取的，桂阳郡是赵云攻取的。从攻城略地的功劳来看，关羽、张飞和赵云属于同一个档次。意味着关羽、张飞和赵云三人在刘备心中份量都很重，都有资格来守荆州。
刘备清楚知道张飞爱喝酒容易误大事，关羽性情高傲容易瞧不起士大夫，而唯独赵云为人庄重，从让赵云管理内府就可以看出来。刘备内心到底有没有考虑过让赵云守荆州呢，有一说一应该是有的，桂阳郡是赵云独立带兵攻打的，可见赵云当时已然可以独当一面了。
赵云为何一直被大家认为是员儒将，为何会被大家认为是比关羽更适合守荆州的第一人选呢？第一，赵云也能独立带兵，从桂阳之战、入川之战、汉水之战都可以看出来，赵云独挡一面没问题；第二，赵云性格沉稳冷静，为帅者性情不能易怒，愤怒的人容易情绪化，容易做出冲动的决定，这点在赵云身上不会有风险；第三，赵云有大局观，其后刘备强硬伐吴，赵云站出来劝谏了，认为国贼是曹魏，曹魏打服了，东吴就迎刃而解了，一旦和东吴交战，不足速胜就焦灼了。
以上是赵云的优点，也是被誉为儒将的原因。刘备知道吗，当然知道，刘备阅人无数，赵云身上这一优点他一定看得到。从长坂坡之战到桂阳之战，刘备心里一定是有考虑过让赵云留守荆州的，赵云有可能是第一人选。
但桂阳之战时，发生了一件风流韵事，事关赵云。这件事情让刘备下头了，因为赵云不喜欢联姻荆州当地世家大族，太过于清心寡欲无欲无求了。当时桂阳郡太守赵范想要把寡妇嫂嫂樊氏许配给赵云，原著写道：今日大事已定，与汝娶之，若何？刘备的意思很明显了，我刘备给你赵云做个媒了。
连诸葛亮也说：此亦美事，公何如此？最终赵云还是不听劝，并没有娶了樊氏。要知道，赵云如果真的娶了樊氏，反而能说明两点：第一点，赵云乐于通过联姻去安抚缓和荆州世家大族的情绪和利益；第二点，赵云有所图，就有其相应的把柄，刘备容易把赵云拿捏住。赵云越是无欲无求，刘备越是不敢让赵云守荆州。
水至清则无鱼，越是显得完美的人，刘备反而越害怕派他作外藩大将。图财图色，图名图利，图一个刘备反而安心了。