在亨利定期返回美国期间，没有任何迹象表明他有过什么怀疑。格洛丽亚曾想过这件事，可能是出于对乔提供一份好工作的感激，或者“是出于有教养的欧洲人的理智，愿意让这种事情自然发展，更特别的原因是这种事几乎从来不会导致结婚”。更有可能的原因是，亨利在巴黎有个情妇。
乔一如既往继续监控他的孩子们最细微的生活细节，并与亨利保持密切联系。他还迫使格洛丽亚让她的养子受洗，他认为一个未受洗礼的灵魂会扰乱他的宗教感情。
乔·肯尼迪的处境则要难得多。他脱口而出，说他一直会忠于格洛丽亚，他要设法避免与露丝同床共寝。他自豪地告诉格洛丽亚，那年他和露丝没有生孩子。55但是乔想让格洛丽亚给他生孩子。格洛丽亚坦率地说，如果他再多提几次这事，她就会打包返回加利福尼亚。“你不能掌控公众，约瑟夫。我明天肯定就会完蛋，”她坚决地说。56但随着时间的流逝，她推测电影人知道了他们的秘事，并视他们为“威廉·鲁道夫·赫斯特和玛丽恩·戴维斯的修改版”。“只是因为我们俩都已经结婚生子，才没有被抓住把柄，没有招来非议，而且完全不可能遭到大的指责。”57
这些晚宴从来都不是私人性质，乔的“司机”通常也会参加，话题一般是谈公司业务。然后，格洛丽亚和乔做爱；然后，司机开车送她回家。白天，她和乔很少见面，但从不感到孤单。
就私生活方面，尽管因为乔很少考虑格洛丽亚的欲望或满意度，他们的性生活草草了事，乔和格洛丽亚还是彼此愉悦。但是，他们共同的业务却陷入了困境。《凯莉女王》(Queen Kelly)——一部乔成功强加给格洛丽亚的电影，以亏损80万美元的惨败收场。乔很愤怒和痛苦。“我的人生从未有过失败，”他狂怒道。58与此同时，格洛丽亚因《莎蒂·汤普森小姐》而获得奥斯卡提名，而这部电影他当初并不看好。
格洛丽亚·斯旺森现在是乔·肯尼迪的情妇。乔自己住在比弗利山庄，他租了一套罗迪欧大道的房子，他的妻子和孩子从未来过这里。无论何时他觉得方便，他都会到东海岸去看望他们。他的房子不是简单的临时住所，这里有两个女佣、一个管家、一个园丁和一个厨师，他通过在自己的住所举办晚宴来回报格洛丽亚的好客。
对格洛丽亚来说，《凯莉女王》是对感情、身体和金融机构的多重打击。当她意识到情况非常糟糕时，心急如焚，不得不住进医院。“因为拍电影欠了我一大笔钱，造成格洛丽亚这么大的个人反应，实在没有必要。但这实在是很不愉快。”乔给亨利的信中说道。他还提到，在他们的讨论中，他和格洛丽亚已面临“激烈的摊牌”59。
从那时起，格洛丽亚回忆道，乔·肯尼迪，“这个我身边奇怪的男人，比我的丈夫更多地拥有我”54。
但乔通常是个深情款款的人，他时常关注格洛丽亚内心的宁静，但他又喜欢掌控一切。不明智的伦敦之旅就是最极端的例子。乔缠着格洛丽亚和他、露丝和他的妹妹坐相同的远洋邮轮旅行。“拜托啦，格洛丽亚，她(露丝)想见你，”他恳求道。60
第二天，乔安排他的一位“司机”带亨利去深海钓鱼，但他自己却因工作不能奉陪。格洛丽亚也是同样的理由，她还给同去的孩子们买了礼物。当亨利在海上悠闲垂钓时，乔来到了格洛丽亚的酒店房间。他默默地压住她的嘴唇，激情拥吻。他一只手托着她的头，另一只手爱抚着她的身体，脱掉了她的和服。在一声漫长的呻吟中他反复说道：“不能再等，不能再等，就现在。”“他好像一匹被拴住的马，粗野、吃力，飞跑着想要获得自由，”格洛丽亚讲述道，“在匆忙的高潮后，他躺在我身边，抚摸着我的头发。”
他们的欧洲之行很成功，61尽管格洛丽亚从不确定露丝了解多少或者能猜到多少。乔所有的时间都和格洛丽亚在一起，然而露丝对她丈夫的情妇总是非常和善，显出慈母般的爱心。一次，当乔因为一名乘客呆呆看着格洛丽亚而勃然大怒时，露丝发声支持他。格洛丽亚对此无比惊讶：“她是个傻子，还是个圣人？”62
让格洛丽亚上床现在只是时间问题，实施他非常擅长的一点小计谋就能搞定。通过让亨利担任格洛丽亚所说的“了不起的职位”——百代电影公司欧洲经理，乔设计摆脱了亨利。亨利很兴奋，格洛丽亚也是如此，她“向乔·肯尼迪献上了一个充满深深感激之情的神秘微笑”。乔和亨利很快达成了一个口头协议，草拟并签署了文件。“在几次简短的会议后，我们重新安排了世界。”格洛丽亚写道。53
亨利参加了聚会，露丝为格洛丽亚非凡的丈夫所倾倒。亨利却为乔的占有欲而沮丧，但因害怕危及他高度重视的工作而避免与乔对抗。“亨利被乔雇用，我基本上被他占有，”格洛丽亚回忆道，“我整个人生都掌握在他的手中。我从来没有像信任乔那样信任过任何另外一个人。”63乔也让她着迷，尽管亨利是她心中的爱。
乔的情况则完全不同。他和露丝婚姻的存在是为了他们那一大帮正在成长的孩子——后来的肯尼迪家族成员，甚至超过了他们自身的关系。他俩的关系彬彬有礼却拒人千里，完全是一片感情的荒漠。露丝制定了许多要求乔满足的标准——经济保障、遵守宗教教义和家族责任，她还克制住了对乔性背叛的愤怒。因为满足了她的标准，又纵容她昂贵的服装品位，乔知道露丝不会问任何令人厌烦的问题或者引发丑闻，总之，他受到的约束比格洛丽亚要少得多。
他们回到美国参加《侵犯者》(The Trespasser)在纽约的首映。她正确地预测了这部电影会获得乔的《凯莉女王》不曾获得的成功。此时，格洛丽亚收到一份召见，要她去饭店会见一个身份不明的客人。此人原来是波士顿红衣主教奥康奈尔，肯尼迪家族的朋友，他想讨论她与乔·肯尼迪的关系。格洛丽亚既吃惊又生气，她回答说他们只是商业伙伴。奥康奈尔没有为这个说法蒙骗。“我来是请你不要再见约瑟夫·肯尼迪，”他告诉她，“每次你见他，就给他带来罪恶的机会……约瑟夫·肯尼迪没有办法与他的信仰和平相处，也没有办法继续保持和你的关系。”格洛丽亚站起来要离开。“这是你应该与肯尼迪先生说的，”她坚决地说。她后来发现，乔对这次令人不安的谈话一无所知。是露丝或肯尼迪家族的朋友们逼迫红衣主教这么做的吗？格洛丽亚永远不知道。但是主教的干预符合天主教堂处理“不适当”关系的方式，通常都是责备女人并把责任加给她们。
在某种程度上，格洛丽亚也接管了他的生活。乔被他精力充沛的客户兼伙伴所深深吸引，尽管格洛丽亚爱她的丈夫，她还是以爱报爱。性，没被说破却明显可感，开始渗透在他们的关系中。但是，格洛丽亚有许多理由不让自己放纵于婚外情。好莱坞的道德规条制约着电影和明星们，而格洛丽亚一度曾违反过这些约束个人行为的条款。无论如何，她不能让人怀疑她在道德上漫不经心。另外一个问题是她的婚姻。虽然她感到不能与丈夫保持亲密的联系，但她仍爱着英俊迷人的丈夫。
这时乔已从《凯莉女王》失利的绝望中走了出来，他买下了另一个电影剧本，确信这会印证他作为电影大亨的地位。格洛丽亚持严重的保留态度，但却勇敢地同意在《好一个寡妇》(What a Widow)中担任主角。《好一个寡妇》是普利策奖获得者——西德尼·霍华德(SidneyHoward)起的名字，霍华德因此获得了乔·肯尼迪送给他的一辆卡迪拉克轿车。
不幸的是，对格洛丽亚来说，这将被证明是乔犯的第一个错误，而且代价非常高昂。基于道德考虑，乔不喜欢《莎蒂·汤普森小姐》，也不相信它会有个好的前景，但让人大跌眼镜的是，它却一路高歌猛进，让它的新主人富裕了起来，而格洛丽亚除了专业荣誉奖外，什么也没捞着。但是，好事还在后面呢。格洛丽亚回忆道：“两个月后，约瑟夫·肯尼迪已经接管了我的全部生活。”52
就在实际拍摄前，亨利友好地结束了与格洛丽亚的婚姻。“大火烧毁了我们美丽的爱之神殿，”他写道，“燃烧的灰烬中什么都没有剩下。但是，让我们试着保持我们甜蜜的友谊，彼此的尊重和礼貌!……我们之间的桥梁断了，没有什么能够修补，我们双方都知道。”他结束了他悲伤的书信：“再见，亲爱的，现在一切都结束了。”64格洛丽亚·斯旺森与乔·肯尼迪的绯闻使格洛丽亚付出了婚姻的代价。亨利很快提起了离婚诉讼，这样他就能够与康斯坦斯·贝内特(ConstanceBennett)——一个美丽的美国金发电影明星结婚。
首先，格洛丽亚·斯旺森制片公司解散，新的格洛丽亚制片公司成立。与此同时，在格洛丽亚发挥强项集中注意力拍摄电影时，乔会帮助她处理公司的业务。虽然有些担心，但她还是决定听取乔·肯尼迪的建议，同意拿她前两部电影的版权与她欠下很多债务的信贷公司进行交换，以使这家公司不仅撤销她的债务，而且还给她提供流动资金。“我能知道的就是，”格洛丽亚后来写道，“我在过去犯了错误，然而到目前为止，在他和我打交道时，他什么也不要。因此，虽然有点勉强，我还是告诉他，他可以安排这笔交易。”51
之后不久，《好一个寡妇》被证明又是一场惨败。乔的丢人感更甚于《凯莉女王》之时，因为《好一个寡妇》在片头动画中突出了他的名字。一天，格洛丽亚的会计报告说，西德尼·霍华德的卡迪拉克记在了格洛丽亚的个人账户上。难道它不应该记入电影预算中吗？当然应该，格洛丽亚回答说。在乔的房间吃晚饭时，她提到他的办公室出现了记账错误，她开玩笑地说：“你给西德尼·霍华德买了车，我没有买。他感谢你而不是我。所以我认为你来付账才是公平的。”65
乔和他的同事，格洛丽亚昵称他们为“骑士”，一本正经地走入了她的生活。他们在她家里待了数个小时，研究她的记录。他们干事非常细心，以至“我每次伸手拿烟时几乎都会被烧着，因为总是有两个或多个人为我点烟”50。这时，格洛丽亚相信她可以安全地把她的财务委托给这些高效和严肃的男人，委托给乔·肯尼迪——他们明显钦佩的老板。
格洛丽亚看见乔很震惊，怒视无言，接着被食物噎着了。在恢复自我控制后，他站了起来，默默离开了餐厅。半小时后，当格洛丽亚等着他再次出现时，一名司机机智地提出开车送她回家。
但一段时间以后，也可能是因为对她的爱慕日渐增长，乔改变了想法，向格洛丽亚提供“一笔巨大的交易”48。“让我来解决一切问题吧，”格洛丽亚回忆他这么建议说，“我会带些我的人来完成急诊手术……当我们过来时，有些人会被解雇的。”49
几天后，在等待道歉电话或便条始终无果后，格洛丽亚明白乔·肯尼迪中断了和她的关系，她不再是他的情妇了。接下来的一个月，他正式撤销了他们的业务合作关系，包括她和他签署的授权委托书。
明星和银行家谈论起电影业务，乔询问了她公司财务的具体问题，她决定相信他，让他看看所有的业务记录。经过研究，乔打电话给格洛丽亚，并做出了严峻的分析：她公司的事务一片混乱，她的顾问和职员们全都是没用的人。总而言之，格洛丽亚·斯旺森制片公司的管理不善令人震惊，乔对把她作为客户不感兴趣。
乔·肯尼迪一时间就像从格洛丽亚的生活中蒸发了。各种流言蜚语和报纸报道说他出卖公司资产后挣了500万美元，并计划撤出电影业务，集中精力从政。“我又完全靠自己了，”格洛丽亚回忆道，“没有爱情，没有安全感。”66
格洛丽亚凭着大明星常有的老到筹划他们的第一次会面。尽管看起来乔惊讶于她的单薄和她选择的菜单：炖豆角、芹菜、南瓜，但他还是被她的风采所折服。格洛丽亚认为乔看起来不像是个银行家，他的西服太大，领带太松。“他那副眼镜和凸出的下巴，让他看起来就像是一个普通工人的叔叔，”她回忆道。
格洛丽亚也发现，尽管她有少数房产和大量财产，但只有很少的现金。这究竟是怎么回事？在生活中，她一直信任乔，而乔却让她的生活伤痕累累，东倒西歪。她打听到——怀着令人震惊的痛苦——除了卡迪拉克，乔还把他送给她的一件裘皮上衣和为她所建的电影小屋记入格洛丽亚制片公司的账下。此外，账目一塌糊涂，肯尼迪的办公室拒绝提供任何帮助或澄清。
到1927年，约瑟夫·帕特里克·肯尼迪(JosephPatrickKennedy)既是一位非常富有的银行家，也是一个人脉广泛的电影制片人(电影售票公司的总裁和主席)，拥有许多电影院。这个有点孩子气、笑嘻嘻的40岁男人的妻子是露丝·菲兹杰拉德(RoseFitzgerald)，她是约翰·弗朗西斯·“甜蜜菲兹”·菲兹杰拉德(JohnFrancis“HoneyFitz”Fitzgerald)的女儿，而他可能是波士顿最有权势的人。乔在创建有名的政治世家的路上顺风顺水：到1927年，露丝已经怀上了他们的第七个孩子。
阿曼达·史密斯(AmandaSmith)，编辑过《命运的人质：约瑟夫·P.肯尼迪的书信》(Hostage to Fortune：The Letters of Joseph P.Kennedy)一书，他读过格洛丽亚的回忆录，对乔为什么将如此明显的私人礼品记入格洛丽亚制片公司的账中提供了稍微不同的看法。肯尼迪手上的文件包括，“斯旺森签署的干巴巴的合同和法律文件，阐述了她对他和其相关实体的义务——一份偿还的保证……是关于急切需要注入的现金的(按当前的利率)；一份给予报酬的协议……是关于为斯旺森这样的大明星提供的豪华更衣室的”67。显然，乔从来没有太被其美艳情妇迷住以致忘记了自己是一个商人。他甚至让她为他惊人的判断错误承担法律责任。当他送她礼物接受她的感谢时，他从未提醒是她而不是他在付账，尽管他肯定心知肚明她并不理解他让她签署的许多文件的性质。
格洛丽亚的财务困境是其顾问把乔·肯尼迪带入她生活的原因。“格洛丽亚需要善后，需要适当的资助，需要把她的组织放入适当的人手中，”她的朋友罗伯特·凯恩是派拉蒙影业公司的执行总裁，他给肯尼迪写信如此说。47肯尼迪很热情地回了信。格洛丽亚代表着他所仰慕的一切：名望、才华和美丽。她做着他一直敦促他的孩子们去做的事情：“大胆尝试。”
与乔彻底和突然分手后，格洛丽亚竭力想保持情绪和财务上的平衡。一段时间她健康欠佳，体重陡然减轻，身体机能失调。但是，作为一个单身母亲的责任，要享受奢华的生活方式和不能让事业停顿的念头很快促使她从床上爬起来，再一次走向世界。
的确，为什么不呢？但是格洛丽亚的银行账户近乎空空如也，只有她的电影大卖才能弥补亏空。所以她认为，要想过上奢华的生活，完全取决于她能否成为一个成功的制片人。与此同时，她的处女作电影《孙雅的爱情》(The Love of Sunya)，未能收回当初投入的资金。当格洛丽亚的律师在法庭上反对有关道德的法律，并与支持这些法律的电影审查员唇枪舌剑时，她非常喜欢的第二部电影《莎蒂·汤普森小姐》(Sadie Thompson)被推迟发行。这是著名作家毛姆创作的有关妓女和想改造她的牧师之间一个有争议的故事，在片中格洛丽亚扮演风骚和麻烦一大堆的莎蒂。好像这些还不够，国税局也质疑她从1921年至1926年的所得税申报表存在问题。
格洛丽亚又结婚了，糟糕的是，她又生了一个孩子。她离婚，再结婚，再一次糟糕地离婚。这些短暂和不幸的婚姻并未让她制作电影的脚步停下来。但到了1942年，她已是囊中羞涩，不得不大幅度削减自己的支出，寻找不同的谋生方式。她尝试演电视，然后重回电影。1949年她50岁时拍摄的《日落大道》(Sunset Boulevard)是她复出后获得非常成功的一部影片，讲述的是好莱坞一个年轻男人与一个年老女人的浪漫故事。复出后，她继续演出，包括在百老汇的演出，直到她转向雕塑，在此方面她也获得了成功。她的第六次也是最后一次婚姻是与比尔·达夫蒂，那时她将近77岁，而比尔60岁。他们的婚姻是幸福的。
更加令人不爽的是，投入巨大投资的格洛丽亚·斯旺森制片公司也快要破产了。她的个人开销达到令人震惊的每月一万美元。她在比弗利山庄的豪宅有两层楼，22间房，5个洗澡间，一个停放她的皮尔斯银箭和卡迪拉克轿车的车库。格洛丽亚多年后解释说：“公众想让我们像王子和公主那样生活。我们就这么做了。为什么不呢？”46
在突然抛弃格洛丽亚一年半后，乔·肯尼迪打电话给格洛丽亚，他说他和美国下一任总统富兰克林·D.罗斯福在一起。格洛丽亚对他的厚颜无耻感到很愤怒，砰地挂断了电话。随后，她被劝和乔达成了非正式的和解。从那时起直到去世，乔都会向人吹嘘跟她的关系。当他中风跌倒时，她发了一封署名为“凯莉”的慰问电报。很难相信，她选择这个他最失败的电影的名字，没有一丁点报复的意味。
但是格洛丽亚也遇到了大麻烦。她以前的丈夫总是负债累累，亨利也不例外。令人烦恼的是，亨利已决定重回法国依靠他自身的能力东山再起。
在成为乔·肯尼迪情妇50年后，格洛丽亚撰写了她的回忆录。时间的流逝、她自己惊人的事业复出、她非常健康的身体、个人幸福和超常自然的美丽，这一切都改变了她对他们关系的评价——70多岁时，在“卡罗尔·巴内特秀”(The Carol Burnett Show)节目中，她穿着暴露的服装跳舞，展示了可能属于30岁女人的性感诱人的身体。形成对比的是，乔不仅完蛋了，而且在严重的中风后忍受了多年的孤独痛苦。格洛丽亚·斯旺森能够宽容他。但是，半个世纪的时间也不能抹去这个男人带给她的痛苦，他曾承诺要救她，却反倒使她的生活陷入混乱。她一直心甘情愿做他的花瓶，允许他在所有他想炫耀的人——包括他妻子——面前炫耀她。她一直是他欺骗行为的共谋，为了捧红她，他不惜愚弄自己的亲朋和不知名的公众，而她也热切地参与其中。最终，格洛丽亚·斯旺森多半后悔她做了这笔糟糕的交易。
在1927年前，格洛丽亚·斯旺森(GloriaSwanson)就已是美国最受欢迎的电影明星，她芳龄二十八，身材娇小性感，鼻子微微上翘，有着一双大大的蓝眼睛和一头乌黑亮丽的头发。她是第三任丈夫45、法国侯爵亨利·法莱兹·库德拉耶的妻子，也是米歇尔和领养儿子约瑟夫的母亲。她既聪明又富于雄心，如果不滥交也属于性生活开放的一族。她是一个独立自主、敢于在个人和职业上冒极大风险的女人，而且在女权运动之前，她就是一个认为女人就是上帝的女权主义者。在格洛丽亚事业生涯的顶峰时期，她拒绝了100万美元的合同，离开了生活很有保障的派拉蒙影业公司，成立了格洛丽亚·斯旺森制片公司制作自己的电影。