织女的职责就是为天仙们织衣，她织出的衣服既好看又耐穿，天上的神仙们都很喜欢她，由于每天过于忙碌，织女根本无暇顾忌自己的容貌，虽然披头散发，但是仍然掩盖不住她那非凡的气质。天帝同情她一个人独处，特把她许嫁给了天河西方的牛郎。
从此，他们就此结为夫妻，男耕女织，生活得很美满。
过了几年，他们生了一男一女两个孩子，一家人过得开心极了。织女再也无暇织布了，每天在家中照看孩子，牛郎天不亮就下地干活，待到晚上回家，一家人就围坐在一起吃一顿团圆饭，生活虽不宽裕，但是日子过得到还幸福美满。
可是，天帝知道这件事后，勃然大怒，马上派遣天神仙女捉织女回天庭问罪。
正在这时，天空狂风大作，天兵天将从天而降，不容分说，押解着织女便飞上了天空。
正飞着、飞着，织女听到了牛郎的声音：“织女，等等我！”织女回头一看，只见牛郎用一对箩筐，挑着两个儿女，披着牛皮赶来了。慢慢地，他们之间的距离越来越近了，织女可以看清儿女们可爱的模样子，孩子们了都张开双臂，大声呼叫着“妈妈”，眼看，牛郎和织女就要相逢了。可就在这时，天帝骑着麒麟赶来了，用天棒一甩，往他们中间一划，霎时间，一条天河波涛滚滚地横在了织女和牛郎之间，无法横越了。
织女望着天河对岸的牛郎和儿女们，直哭得声嘶力竭，牛郎和孩子也哭得死去活来。他们的哭声，孩子们一声声“妈妈”的喊声，是那样揪心裂胆，催人泪下，连在旁观望的仙女、天神们都觉得心酸难过，于心不忍。天帝见此情此景，也稍稍为牛郎织女的坚贞爱情所感动，便同意让牛郎和孩子们留在天河西侧，每年让他们相会一次。
从此，牛郎和他的儿女就住在了天上，隔着一条天河，和织女遥遥相望。在秋夜天空的繁星当中，我们至今还可以看见银河两边有两颗较大的星星，晶莹地闪烁着，那便是织女星和牵牛星。直到现在，还留着他们的痕迹，就是今天的金牛座和处女座。