有“寒冷恐惧症”和“绿帽恐惧症”
从这个老土的接吻方式开始，胡因梦逐渐被李敖人格中的种种冲突性所吸引并爱上了他。胡因梦曾经问过李敖，他的另一位女友刘会云怎么办。李敖说了一句令她绝倒的话，“他说他会告诉她，我爱你还是百分之百，但现在来了个千分之一千的，所以你得暂时避一下。”胡因梦问李敖什么叫暂时避一下，李敖说：“你这个人没准，说不定哪天变卦了，所以需要观望一阵子。我叫刘会云先到美国去，如果你变卦了，她还可以再回来。”这个细节足以说明李敖的多疑与防卫，以及对女人呼之即来、挥之即去的态度。这件事虽然让胡因梦很不自在，但此刻她正憧憬着与李敖的美好生活，对于李敖的缺点，统统忽略不计。不过随着接触的不断深入，尤其是在与李敖同居的日子里，胡因梦看到和感受到的，是褪去大师光环后一个真实的李敖。
胡因梦说，李敖的生活就像是一部精准的机器，每天按时起床，一个人在书房里集中精神搜集资料、做剪贴。他不抽烟、不喝酒、不听音乐、不打麻将，可以说没有任何娱乐活动而只有工作。他认识的人不少，但深交的朋友几乎没有，原因是他对人性抱悲观的态度，认为即使是最亲信的人也可能在背地里暗算他。胡因梦想带给他快乐，她不时放些自己爱听的音乐，跳她自己发明的女巫舞，在李敖面前嬉戏，“那种时刻，我确信他是快乐的，不设防的。”
对李敖的种种“怪癖”，胡因梦则有着真切的体会。比如，李敖有“寒冷恐惧症”，他冬天套在身上的衣服，多得让人不可理解。此外，李敖还有“绿帽恐惧症”，在一次胡因梦出门慢跑了一个小时后，李敖很不开心地说胡因梦慢跑一定会和路上的男人眉来眼去，所以不准再跑了。胡因梦喜欢光着脚丫在地上走，李敖反应强烈，他认为灰黑的脚底对他来说简直是一项不道德的罪名。还有一回，胡因梦下厨为李敖煲排骨汤，却因为不知道排骨需要先化冻，而被李敖骂做“没常识的蠢蛋”。不过，胡因梦也承认，当李敖觉得一切都在掌握之中时，他真的是这个世界上最宠女人的男人之一。“每天早上我一睁开眼睛，床头一定齐整地摆着一份报纸、一杯热茶和一杯热牛奶。”
李敖和胡因梦，在外人看来是很完美的“才子佳人”式的爱情，他们相恋的故事甚至上了当年的《时代》周刊封面。但胡因梦知道，要和李敖结婚，除了要说服自己“包容他、安慰他”之外，迈过母亲的阻拦，也非一件易事。不过，最终，他们还是步入了婚姻殿堂。
他是最令我“感恩”的男人
1980年5月6日的早晨，在两人相识8个月之后，由《中国时报》主编高信疆和作家孟绝子证婚，胡因梦以睡衣当婚纱，在李敖家的客厅里举行了婚礼。然而，他们的婚姻只持续了3个月零22天。
对于婚姻为何结束，李敖的解释是正治原因。“当时她要嫁给我的时候，国民檔反对。她是历民檔的演员，国民檔说，你怎么可以跟这个叛乱分子勾肩搭背呢？国民檔就打击她，不许她参加演电影，不许她主持金马奖。一个电影明星没有电影可演，不闹情绪吗？在家里她就跟我吵架，我哪受得了女人跟我吵架，两人就杠上了，后来就拆伙了。”
对于这般看法，胡因梦笑着说：“这纯粹是胡说八道，因为我根本无檔无派，我到现在也不属于任何正檔，我对正治是最不感兴趣的，也没有什么正檔可以限制得了我，所以不是那个原因。事实上我们离婚最主要的原因是性格不合，然后还有就是因为他跟萧孟能先生的那个财产侵占的官司。”胡因梦所说的萧孟能，便是前面提到的李敖的好友。在这场侵占纠纷中，李敖在胡因梦不知情的状况下利用她，侵占了萧孟能几乎所有家当。后来，胡因梦出庭做证，使李敖在官司中败诉，更让李敖因此入狱半年。
回溯与李敖相处的不到一年的岁月，胡因梦有着自己的感悟。“因为我过去对他有一个过度理想化的偏执的认同，就是说我对他不了解。我期待他的人格伟大到一个程度，甚至可以拯救很多的小老百姓。跟他深入地交往之后我发现，其实每个人都是平凡的。”说到这些，胡因梦显得很轻松。而事实上，在那场历时三年的财产侵占官司以及为了离婚而与李敖斗智斗勇的过程中，胡因梦所付出的心力，是外人无法体会的。在经历了快乐、悲伤、背叛、愤怒之后，在感受了李敖人性中的丑与恶并从中学会如何面对之后，胡因梦终于可以放松地谈论李敖，并且毫不讳言，“他是最令我‘感恩’的一个男人。”
有人问女儿的父亲是不是连战
胡因梦做的很多事情，在当时都很惊世骇俗。比如，刚进大学校园她就敢穿上“需要麻袋来遮住屁股”的迷你裙。她因为对性好奇而独自骑单车去电影院看异乡涩情电影。她找的第一个男朋友是外国人。大学二年级时她主动从辅仁大学退学，在纽约她体验性解放、抽大麻。翻看这些早年的履历，不难看出，胡因梦是一个骨子里具有叛逆精神的女人。因此，在与李敖分手的数年后，胡因梦成为单身母亲，似乎也在常理之中。
35岁之后，胡因梦彻底放弃了演艺工作，完全投入到有关“身心灵”探索的翻译与写作中，如《古老的未来》、《般若之旅》、《克里希那穆提传》等等，由她写作或翻译的书籍达十多本。而孩子的父亲，便是她的一个读者。由于对方是有妇之夫，这段感情最终以两人分手告终。而当两人决定分手时，胡因梦发现自己有了身孕。经过考虑，胡因梦决心生下孩子独自抚养。
做母亲本是件令人高兴的事，不过令胡因梦沮丧的是，她得上了产后忧郁症并罹患畸胎瘤，健康状况降至谷底。更令她没想到的是，李敖——那个本该成为遥远记忆的男人，却在她产下女儿后，开始在他的电视节目和著作中不断对她进行攻讦。“他就在媒体上面大概有70次，不断地在骂。我觉得骂倒是无所谓，只是他每一次举出的那个骂的题材，事实上都跟真实的状态没多大关系，而且都不是重点。”一直以来，胡因梦以为他和李敖之间的仇恨早已化解，没想到对方依然耿耿于怀，“还有一些东西，他没有真正放开。”
据说在胡因梦50岁的时候，收到了李敖送的50朵玫瑰，李敖对此的注解是“我们还有某种程度的交情，你我之间有50朵玫瑰花。看起来非常温馨，骨子里就蔫坏，就是提醒你50岁了。”而胡因梦明察秋毫，笑着解释道，“其实那时候他要出版一本书，那个书名里头有玫瑰两个字，这个举动是打书。”