對於聶衛平的第一段婚姻，聶衛平是這麼說的：「我和孔祥明在1965年就認識了，那時我倆一起參加在成都舉行的全國少兒圍棋比賽，那年她10歲，我13歲。1973年國家體委組建圍棋集訓隊，我和她都應召入隊，我們開始朝夕相處。」
「1979年國家圍棋隊到日本訪問比賽，我和孔祥明都去了。在一次日本棋手的聚會中，一個日本棋手開玩笑說，陳加銳對孔祥明有意思。陳加銳原是我國的七段棋手。這時我們的一名棋手馬上反駁說，你瞎說，孔祥明早就跟聶衛平了。我半開玩笑地問，這是真的嗎?我這是試探，把球踢給了小孔。小孔在眾人的目光下忸忸怩怩地說，可能是真的吧。她回答得很微妙，但我馬上就明白了。回到北京，我們很快就結了婚。在事業上我與孔祥明有共同語言，在家庭生活中她很能幹。在我成功的後面，有小孔很大的功勞。1981年，我們的兒子降生。 」
聶衛平第一任妻子 孔祥明
「我和孔祥明最後的決裂是因為我認識了王靜，後來王靜懷孕，又不肯把孩子打掉，我迫於無奈，只好向小孔提出離婚。離婚之後反思我們的關係，我認為有一步最大的『漏算』，就是兩人的個性，或者說是興趣愛好。
在我離婚這件事上，幾乎遭到了親友的一致反對。我媽媽大罵我：『你怎麼能這樣!』伍紹祖、李富榮也找我談話、做工作。姜昆最絕，一見面就說：『原來你也是人啊!我們都以為你不是人是怪呢!』話雖幽默卻不乏挖苦之意。我自己也不願意離，可當時確實沒辦法。 」
1990年春節前夕，湖南電視台想請北京的一些知名人士去參加他們的春節晚會，當時就有總政的女演員王靜與聶衛平同行。由於兩人當時都是響噹噹的人物，所以兩人心裡暗自發狠都不互相降下身價打招呼。
吃飯時，主辦單位又把王靜安排在聶衛平旁邊。聶仗著自己酒量很好，就想借這個機會把她灌醉，讓她出點洋相。居然沒把她灌倒。於是聶對王說晚上有空還可以再接著喝，她居然也答應了。就這樣兩人算是認識了。回到北京後，王給聶打電話，約他去卡拉OK。
從那以後，王靜經常到體委來找我，也不怕別人議論。而聶去她那兒總是躲躲藏藏。後來人們議論得多了，可能是叛逆心理，兩人反而不在乎了。接著，聶和孔祥明離婚馬上就和王靜結了婚，因為時間已經刻不容緩。沒過多久，王靜就給聶生了一個兒子。聶就喜歡兒子，後來王剛給兩人這個兒子起名叫聶雲青。
當時，王靜是做了聶衛平與孔祥明之間的「小三」，未婚生子又不肯把孩子打掉，迫於無奈的聶衛平和第一任妻子離了婚，與王靜結婚了。兩人育有一子，做起名叫聶雲青。
聶和王靜在事業上相互幫助的可能性幾乎沒有。王婧要演出，聶要比賽，匆匆忙忙，真正在一起交流感情的時間太少。在生活上，聶是依賴型的，王靜也不是生活型的。因此，即使是生活上互相照顧也不太多。漸漸地兩人在家務和孩子的教育問題上也開始了爭執，爭執過後便是長久的沉默。當他們都意識到了愛情悄悄遠去，最終兩人分手了。
在過去20多年裡，聶衛平經歷了與著名棋手孔祥明和歌唱演員王靜兩次失敗的婚姻，2001年他終於娶了個「金元寶」蘭莉婭，完成了他的「收官之戰」。
據悉，聶衛平的夫人蘭莉婭是貴陽姑娘，她是1975年出生，比老聶小了將近23歲(聶衛平是1952年8月出生)。父親是四川人，母親是上海人，從小在貴陽長大，婚前在上海工作。