有的故事提到紫微圣人是一个女性角色，并且有提及她的情感经历，如错过姻缘等情节。“缘分到时花未开‘犹如风中黄叶来，各图千象均指正，四方臣服送入怀。翻开推背后二象，美人家中有泥胎。美人这说明圣人是个女人，家中有泥胎则是说圣人的工作，或制作泥塑，或售卖泥塑，再或者是供奉泥塑的修行人，只能等到后人来验证了，总的来说圣人可能是女人了。选择姻缘看一象，其人身上有异色。此女相貌俪端庄，糖衣素裹八尺裳。满园春色居京地，祖上长安河边香。这一段话是说圣人可能有胎记或是皮肤病再或是受过伤，长相姣好，身材高大有型，喜欢穿素衣，最后一句则是说其出身地。前面说错过时间，后面有劝人看清长相选择姻缘，要选圣女。好像有点暗示圣人婚姻不幸福，没有结果。前面有明确指出圣人将来一定可以统御四方。不过这也是圣人成圣的条件，如果圣人有后，他会公正吗，姜子牙之所以可以封神就是因为它没有亲戚关系比较公正。

然而，由于“紫微圣人”并非一个明确的历史或文化共识中的角色，其故事细节也会随不同的传说或小说版本而有所变化。