胡适确实是很怕老婆的。1923年，胡适在杭州与有夫之妇曹诚英同居，把曹诚英的肚子搞大了。曹诚英是胡适与自己的老婆江冬秀结婚时的伴娘，比他小十多岁，因为姿色出众，胡适始终念念不忘，后来终于把人妻曹诚英搞到手。胡吃了窝边草，曹怀孕了。为了爱情，曹诚英毅然和丈夫胡冠英离婚，北上找胡适逼婚，如同现在的小三逼婚一样。曹诚英带子逼婚，胡博士旁敲侧击地向赌鬼老婆江冬秀提出离婚，不料江氏竟拿出菜刀，以杀死两个儿子相威胁，吓得胡博士跪地求饶，再也不敢提离婚之事。曹氏无奈，只能堕胎，重回杭州师范学校读书，后来在安徽大学任教，此后终身未再嫁。胡博士为此创作了一首白话诗《蝴蝶》：“两个黄蝴蝶，双双飞上天。不知为什么，一个忽飞还。剩下哪一个，孤身怪可怜。”此诗收入他的《尝试集》中。在胡适身边工作过的沈从文回忆说：“胡适在上海时，住极司非尔路三号，每天要接见许多客人，外国的多，中国的也不少，谈论天下古今，言不及义，应酬时连声嗯、嗯、嗯，不时打哈哈，谈到一些小问题，眉飞色舞。到晚上，从口袋里掏出自己的《尝试集》之类的新诗来自我欣赏，以为是最大的乐趣。”
