查遍了江州建立开始一直到东晋建立，也没有一个叫李矩的做刺史。江州刺史李矩是晋书介绍李充时提到的一句话。后世唐代提到卫夫人时，说她是汀州刺史李矩的夫人，这就有意思了，晋朝是没有汀州的。

大书法家李式的父亲是李重，出自江夏望族李氏，李式是卫夫人的侄子，因而很多人以此推断李矩出自江夏李氏

唐朝张怀瓘《书断》中记载，卫夫人是汝阴太守李矩之妻。而晋书中明确记载汝阴太守李矩和汝南太守袁孚一起俢洛阳水渠千金碣，这个李矩就是平阳李矩，历任汝阴太守，荥阳太守，司州刺史。

喜欢晋史的人少之又少，希望楼主多科普

当时，寒门的李矩娶高门的卫铄是不可思议的事情，所以历史上认为江州刺史李矩出自江夏李氏高门。然而，江夏李氏最高的名人也不过是李重，人称李平阳，因为他做过平阳太守。为什么江州刺史反而不如平阳太守有名?

称卫夫人是当时社会现象 比如贾充老婆叫李夫人 没见哪里记录她叫贾夫人 洗英叫洗夫人，她老公我一时半会还想不起来是谁

在西晋寒门娶高门贵女有几个例子 还是贾充 他娶了李婉 另一个典型例子是张华 娶了刘放之女

这个问题今年也困扰了我几个月，不过我已经知道了。
卫夫人的丈夫是江夏李矩，与平阳李矩（晋书列传第三十三）并非同一人，应当是重名。
①依照常理，如楼主所说，卫铄出身河东卫氏，嫁给寒门平阳李矩是不太可能的事情，嫁给江夏李氏才比较合理。
关于9楼的例子，张华虽然出身庶族，其父张平也是渔阳太守，而贾充的父亲是豫州刺史贾逵，但平阳李矩本传并没有提到他的父祖，估计没有做官，平阳李矩的身份地位还比不上一开始的贾充、张华，更不可能娶河东卫氏女卫铄。
②然后看史料，《晋书·李充传》：“李充字弘度，江夏人。父矩，江州刺史。……累迁中书侍郎，卒官。”“充从兄式以平隐著称，善楷隶。”
《书断》：“（卫夫人）子克，为中书郎。”（这里的“克”当为“充”字形近之误。）“李式，字景则，江夏锺武人，官至侍中。卫夫人之犹子也。”
名字官职亲戚关系都对得上，卫夫人的儿子李充、侄子李式都是江夏人，李充又是李式的堂弟，卫夫人的丈夫当然也是江夏李氏。
③我所见的史料都是说明卫夫人嫁的是江夏李氏，没有说平阳李氏的。至于《书断》所说卫夫人是“汝阴太守李矩之妻”一条，平阳李矩确实曾经担任过汝阴太守，但是这只是他人生中其中一个官职，为什么不写他最后所任的官职而单挑出其中一个汝阴太守呢？不知道江夏李矩有没有担任过汝阴太守？不过我认为更有可能是唐人把平阳李矩和江夏李矩误认为同一人了。
④平阳李矩一直都在北方和匈奴作战，并未渡江，最后死在带领部下南行的途中，葬在襄阳的岘山，在长江以北，甚至在江夏以北。李充、李式都担任了东晋的官职，显然是渡江了的。李充“少孤，其父墓中柏树尝为盗贼所斫，充手刃之，由是知名”。北方战乱频繁，李充不可能住在岘山附近吧，渡江了也不可能跑到靠近前线的江北去，又怎么会知道墓中柏树被砍，怎么知道贼人是谁呢。如果平阳李矩真的是李充的父亲，李充应该把他的墓迁到江南去才对。
⑤卫夫人的丈夫江夏李矩也并非完全没有记载，裴注《三国志·李通传》引王隐《晋书》：“（李）重字茂曾……重二弟，尚字茂仲，矩字茂约，永嘉中并典郡；矩至江州刺史。重子式，字景则，官至侍中。”
江夏李矩字茂约，是李重之弟，李式叔父，官至江州刺史，甚至字辈，也都能对上；而平阳李矩字世迴，官至司州刺史，字辈官职籍贯都不对。
⑥至于楼主说的唐代提到卫夫人说是汀州刺史李矩的夫人，我没看到过，不知道出自哪里，但是汀州和江州字形很像，我猜测也有可能是写错了。
综上，平阳李矩和江夏李矩完全是两个人，只是重名罢了，卫夫人所嫁是官至江州刺史的江夏李矩，但他没有留下传记（晋书没有传记的高官还挺多的，比如并州刺史、安西将军夏侯骏，太尉陈准，司徒梁芬），而平阳李矩在西晋末年一直坚守北方，四处征战，是忠义之士，所以有传。
另外，关于江夏李氏家族世系，可以去看贾文丰先生的论文《江夏李氏世系辩疑》，考证得很清楚。