长安的西市，不仅住着回鹘，还有其他西域人，比如《续玄怪录》记载杜子春的事，老人约子春到西市波斯邸："明日午时，候子于西市波斯邸"。此处记载波斯人居住的地方。
刘肃在《大唐新语》加记载："贞观中金城坊有人家为胡所劫者，久捕贼不获。时杨纂为雍州长史，判勘京城坊市 诸胡尽禁推问。司法参军尹伊异判之曰：'贼出万羰，诈伪非一。亦有胡着汉帽，汉着胡帽；亦须汉里兼求，不得胡中直觅。请追禁西市胡，馀请不问……'，俄果获贼。"这段记载，不仅说明西市聚集了商胡，而且也有胡人不法之徒。
除此之外，长安布政坊有胡袄祠，醴泉坊有安令节宅，波斯胡寺，袄词；普宁坊袄词；义宁坊有大秦寺，尉迟乐宅；长寿坊有唐尉迟敬德宅子；嘉会坊有尉迟刚的宅子；永平坊有尉迟安的老房子；修德坊有李抱玉的宅子，崇化坊有米萨宝（胡人）宅子及袄词。等等，可见当时西市不仅是西域人聚居之地，此处还有很多胡人店铺。
