牛郎待了好半天，才吞吞吐吐他说出求婚的意思。织女听了，红着脸点了点头。
就这样，织女成了牛郎的妻子。
牛郎到田间去耕田种地，织女在家纺纱织布，夫妇相亲相爱，不缺吃，不缺穿，生活过得幸福美满。
太平日子容易过，弹指过了五年，织女生了两个孩子，一儿一女，都长得伶俐可爱。织女高兴地对牛郎说：“人间的生活，自有人间的欢乐。我愿意永远生活在人间，和你白头到老。”牛郎高兴他说：“多亏老牛朋友的帮助，使咱们过上幸福的生活。愿咱们永远相爱，永不分离。”
好景不长。在他们夫妇沉浸在幸福之中的时候，苦难却悄悄地降临到他们的头上。
天帝和王母娘娘得知织女留在人间嫁给牛郎的消息，大为恼火，立即派遣天兵天将，去把织女捉回到天廷问罪。王母娘娘怕天兵天将办事粗心，还亲自跟了去观察动静。
这天，牛郎照例到外面去耕地，织女让两个孩子在外面玩耍，自己坐在织布机上织绢。忽然一群天兵天将闯到织女跟前，不由分说，押解着织女就要返回天廷。织女知道这场灾难躲不过，说道：“能不能稍等片刻，让我见一见孩子和孩子的爸爸？”天神哪里肯准，说时间已到，立即押解着织女往回走。
牛郎回家，不见妻子，只见两个孩子在哭。他里里外外找了好几圈也没找到。问两个孩子：“妈妈哪里去了？”孩子只知道哭。牛郎很是着急，他来到牛棚里，对着老牛伤心。老牛告诉他，天帝知道织女的消息，派天兵天将把她押回天廷去了。
牛郎听说，悲痛万分，立刻找了一根扁担，两个箩筐，让两个孩子坐在箩筐里，自己挑着前去追赶。可是他挑着儿女，走得很慢。他想，走得慢不要紧，只要能渡过银河，我就可以一直追到天廷。他挑着担子好容易来到银河，却找不到银河的踪影。原来王母娘娘怕牛郎渡过银河追赶，命令管天河的天神把银河搬到天上去了。牛郎接近不了银河，无法渡河去追赶，只好挑着一双儿女回到自己家中，再想办法。