12月24日，毛泽东主持召开包括高岗、饶漱石在内有二十九人参加的中央政治局扩大会议，揭露高岗的问题。毛泽东指出：“北京有两个司令部，一个是以我为首的司令部，就是刮阳风，烧阳火；一个是以别人为司令的司令部，叫做刮阴风，烧阴火，一股地下水。”中央政治局一致同意毛泽东的建议，并着手起草《关于增强党的团结的决议》。会议决定，毛泽东休息期间，由刘少奇代理主持中央工作。会议结束的当天，毛泽东离开北京，前往杭州，主持起草中华人民共和国宪法草案。
　　关于宪法要不要有纲领性的内容，即要不要写入将来要完成的任务，毛泽东说：“一般地说，法律是在事实之后，但在事实之前也有纲领性的。1918年苏维埃俄罗斯宪法就有纲领性的。后头1936年斯大林说，宪法只能承认事实，而不能搞纲领。那个时候，乔木称赞斯大林，我就不赞成，我就赞成列宁。我们这个宪法有两部分，就是纲领性的。国家机构那些部分是事实，有些东西是将来的，比如三大改造之类。”
　　为什么要设国家主席？毛泽东作过这样的解释：“为保证国家安全起见，设了个主席。我们中国是一个大国，叠床架屋地设个主席，目的是为着使国家更加安全。有议长，有总理，又有个主席，就更安全些，不至于三个地方同时都出毛病。如果全国人民代表大会出了毛病，那毫无办法，只好等四年再说。国家主席，在国务院与全国人民代表大会常务委员会之间有个缓冲作用。”他说：“资本主义国家的总统可以解散国会，我们的主席不能解散全国人民代表大会，相反地，全国人民代表大会倒可以罢免主席。国家主席是由全国人民代表大会选出来的，并服从于它。”全国人民代表大会有权罢免国家主席这一条，是毛泽东提出并再三坚持的。
　　到1954年3月中旬，在杭州的起草小组一共进行了四稿，在每一次读稿上，毛泽东都字斟句酌，改了又该，批语也写了不少。这期间他还要和北京的党中央保持联系，电话、电报非常频繁，多是关于高饶问题。
　　1月21日晚二十二时，杨尚昆从北京回到杭州，带来了一些文件和高岗的一封信。高岗在信中说：完全拥护和赞成关于增强党的团结的建议，并说他犯了错误，拟在四中全会上作自我批评。他提出，希望能到杭州来，见毛泽东一面，当面商量此事。毛泽东给刘少奇回了一封信，表示，“全会开会在即，高岗同志不宜来此，他所要商量的问题，请你和恩来同志或再加小平同志和他商量就可以了。关于四中全会开会的方针，除文件表示者外，对任何同志的自我批评均表欢迎，但应尽可能避免对任何同志展开批评，以便等候犯错误同志的觉悟”。
　　2月6日到10日，中共中央在北京召开七届二中全会，揭露了高饶的问题，通过了毛泽东主持起草的《关于增强党的团结的决议》。而毛泽东在杭州和小组成员夜以继日地工作，到2月中旬，拿出了宪法初稿、二读稿和三读稿。
　　2月17日晚，刘少奇打电话通知毛泽东，高岗中午自杀未遂和政治局讨论的意见。
　　2月28日，毛泽东对周恩来在高岗问题座谈会上的发言提纲做了修改和批示，其中指出：“高岗的这种黑暗面的发展，使他一步一步地变成了资产阶级在我们党内的代理人。高岗在最近时期的反党行为，就是他的黑暗面发展的必然结果，同时也就是资产阶级在过渡时期企图分裂、破坏和腐化我们党的一种反映。”
　　3月9日，宪法起草工作基本结束。3月12日，毛泽东登上玉皇山。14日，他乘专列离开杭州前往无锡。15日凌晨，在陈毅的陪同下，毛泽东来到太湖边看日出。回来后，他向陈毅忽发感慨：“伸手岂止高饶？”
　　3月17日，毛泽东回到了北京。23日，毛泽东主持召开了宪法起草委员会第一次会议。
　　每天工作之余，毛泽东都想去游一次泳。他说：“游泳的一大好处就是可以不想事。吃安眠药做不到，其余吃饭。散步。看戏、跳舞都做不到。游泳就可以不想事，一想事就会往下沉，就会喝凉水。”
　　毛泽东游泳喜欢热闹，尤其喜欢和年轻小伙子姑娘们成群结伙地游。这时他便会精神抖擞，谈笑风生。他侧泳仰泳，自然轻松，一边游一边和年轻人聊天，兴致极高。他还喜欢同年轻人比赛，但不比速度，而是比耐力，比持久，比坚持时间长，比游得远。许多人游不了多久也得上船喘口气，然后再下水陪毛泽东游。毛泽东每次游泳只下一次水，下去就要游个够。不够不上岸，上了岸便不再下水。无论走路游泳，他都是那句话：“我这个人不喜欢干回头事。”
　　有一回，毛泽东游得很远很远，遇上一条渔船。毛泽东见有渔民，便不再游泳，痛痛快快爬上了船，不等擦干身体便迫不及待跟老渔民喊话聊天。老渔民没有认出毛泽东。这不奇怪，他何曾见过毛主席光着身子的形象？于是，那聊天便完全是社会上普通人聊天的气氛了。大家很难见到毛泽东如那次聊夭那么开心，乐而忘返。从年龄身体聊到吃喝穿戴，从鱼鳖虾蟹聊到五谷杂粮，从小小渔船聊到锅台炕头，从老婆孩子聊到国民党共产党。你问我答，我问你答。正经话玩笑话都说，又逗又喊又笑。毛泽东高兴得手舞足蹈。
　　老渔民陪不起工夫，要走。毛泽东不放，追着喊多聊聊，并说要把他船上的螃蟹全买了。老渔民不信，毛泽东让他跟自己一道走，一手交钱一手交货。并说，就要听听你那个互助组为啥不团结。就这样一路聊来。上得岸，一手交钱一手交货，然后同老渔民握手道别。老渔民直嘀咕今天很走运，却始终不知道让他走运的人是谁。
　　毛泽东让卫上把螃蟹送伙房全蒸了，在第二浴场弄个长桌子，倒满一桌。毛泽东开心地喊着：“来来来，今天我请客，我请客啊！”二三十个工作人员全是泳衣泳裤，来到长桌旁。毛泽东抓起一只螃蟹，一掰两半，张嘴就是一口。蟹黄淋淋漓漓沾了满手满脸。他一边大嚼一边喊：“还不动手？别装正经了！”
　　大家哄然而笑，立刻围上去抓螃蟹，学着毛泽东扯开螃蟹便咬，一边大嚼，一边互相逗闹，甭提多么热烈开心。一个个都吃成大花脸，互相你看我，我笑你，你捅他，乐个没够。毛泽东心血来潮：“嘿，咱们合个影吧？照张相！”“嗷！”大家一哄而起，立刻包围了毛泽东。簇拥着，就那么光不哧溜，随随便便，热热闹闹地让侯波给合了一张影。
　　工作之余，毛泽东最怕孤寂，希望身边的工作人员能表现得随便些，可以开玩笑、起哄、骂娘，造成一种真正的社会生活的空气。如果大家规规矩矩、老老实实，他简直无法忍受。所以工作之余，身边工作人员在他面前都表现得很随便，甚至有时候故意放肆一点，逗他开心。
　　后来接连几天大风大雨，大海里巨浪轰鸣，万马奔腾。面对此情此景，毛泽东显得很激动，要去游泳。但大家担心他的安全，连说风高浪大，不同意他去游。毛泽东一再要求，大家死死坚守。毛泽东几乎每天都要“闹”一次，每次都被大家团结一致地顶住了。
　　这天，雨终于停了。但风浪依旧非常大！负责测温的同志报告，水温不到二十度。毛泽东却不顾众人劝阻，赤身向海边走去。卫士们一起拥到毛泽东身边，手挽手，身贴身，前呼后拥冲向大海。
　　“赶浪，我们赶浪。”毛泽东进入海水中，加快步伐。一个一人高的浪头劈头盖脑压下来。轰然一声巨响，一群人都歪倒在沙滩上，竟被那浪打出四五米远。毛泽东在卫士的搀扶下站立起来，召唤大家向海浪发起继续冲击，可是每次都被浪潮打了回来。
　　毛泽东见大家又有些为他担心，问道：“这点浪比刘戡的四个半旅还难闯吗？”“你们是不是觉得跟我走太危险？你们要是害怕，我可以另外组织人。”大家一听，又游进大海！时而跃上波峰，时而跌下浪谷，都拼尽全力向毛泽东靠拢，要升一起升，要沉一起沉。拿了救生圈的人更是随时准备应付意外。
　　“你们不要紧张，现在是涨潮，我们只会被冲上岸，不会被拖进大海回不来。”毛泽东仍是一副轻松自在的安闭样子，随波起伏，边游边说：“你们正年轻，要经风雨见世面。不要做温室里的花草，要在大风大浪中锻炼成长。”
　　8月17日凌晨三时许，高岗在寓所吞服安眠药自杀。上午，罗瑞卿向正在北戴河休养的毛泽东主席专程作了汇报。
　　8月20日，毛泽东离开北戴河，回到了北京。