林语堂最讨厌一件事，就是人家在晚上八点以后请他吃饭，如果有人在这时请他吃饭，他必定先和家人吃过饭才去。

廖翠凤和三女儿林相如著有一本《中国烹?秘诀》，曾在法兰克福获德国烹饪学会颁发的奖状。林语堂是这本书的策划人。

林语堂在美国从事写作，有时遇到难题，常常到哥伦比亚图书馆查找资料，因不便使用自己名字，便用了女儿替他取的一个名字：“林语珠女士”。

林语堂到美国后，原由他主编的《宇宙风》改由其弟林憾庐主编，不久林憾庐病死，林语堂没赶回送葬，只是寄回两篇文章，将稿费充作葬仪。

廖翠凤告诉郁达夫，在美国时，一次林语堂捧了本《模范绅士约翰?哈里法克斯》向她求爱；第二次，他忘了，又捧了这本书向她求爱。

在武汉主编《中央日报》时，林语堂曾经就男女问题，以“毛驴”为笔名，与一位署名“小鹿”的作者发生笔战。“小鹿”褒女贬男，“毛驴”正好相反，你来我往，极为激烈。该报的副刊编辑孙伏园为了结束这场笔战，特邀“小鹿”与“毛驴”在河口东宴楼会面，冰心也被邀作陪，彼此相谈甚欢，均同意鸣金收兵。第二天，孙伏园在《中央日报》副刊刊登启事曰：“男女之争，已于鹿驴交欢声中化除矣！”“小鹿”是一位年轻女性，看到启事后大怒，发誓再不为该报撰文，而林却获得意外的胜利，喜气洋洋，颇为自得。

章克标回忆，林语堂也在交际场中逢场作戏，会吃花酒、叫条子，也懂得长三堂子的韵味。他还赏识当时的名妓富春楼老六，为她写过捧场、赞美的文字；他穿着长袍马褂和交际花、名妓到高级跳舞厅婆娑起舞或坐听音乐。但林只是偶然为之，“并非耽溺于‘荷花大乐’（腐化大乐）”。

一次，林语堂在上海认识的交际花来访，廖翠凤出去买菜时，此女居然一跃坐在林的书桌上，向他卖弄风情，林极为尴尬。等廖回家时，此女已经碰了一鼻子灰，颓然而去。

林语堂在莱比锡工业展览会期间，曾遭受女房东的“性骚扰”。这位女房东守寡多年，孤独寂寞，烟不离手，就着咸肉大喝啤酒，几乎没有清醒的时候。她硬拉着林，事无巨细地对林讲述她和情人之间的乐事，说她的情人是媲美歌德的文学天才，还给林看她作的歪诗，实则存心引诱林。一次，林从她的房门口经过，她故意倒在地上，语态暧昧地叫林进去扶她。林语堂吓坏了，赶紧叫廖翠凤代劳，寡妇只好装着刚刚苏醒，自己站了起来。

赵世洵回忆，林语堂亦“好色”。一次南洋大学联欢，临时办事处的几位漂亮女职员都参加了。林多喝了几杯，眼前又是几位美貌的小姐，顿时话就多了起来，惹得一旁的廖翠凤颇为不满，面色不大好看。

林语堂在《八十自述》中自剖为“一捆矛盾”，他说自己喜欢看到交通安全宣传车出车祸撞伤人；曾到北平西郊的西山上一个庙里，去看一个太监的儿子；把自己描写成为一个异教徒，其实在内心却是个基督徒；专心致力于文学，但总认为大学一年级不读科学是一项错误；喜欢用胶泥和滴流的洋蜡做成有颜色的景物和人像，摆在玻璃上，借以消遣自娱；喜爱在雨中散步；对于湖边垂柳浓阴幽僻之处兴感伤怀，但对海洋之美却茫然无所感。