我生下来7个月，也就是1901年的5月，就离开我的故乡福州，到了上海。
那时我的父亲是“海圻〔圻（qí）〕边界。”巡洋舰的副舰长，舰长是萨镇冰先生。巡洋舰“海”字号的共有四艘，就是“海圻”“海筹”“海琛”“海容”，这几艘军舰我都跟着父亲上去过。听说还有一艘叫做“海天”的，因为舰长驾驶失误，触礁沉没了。
上海是个大港口，巡洋舰无论开到哪里，都要经过这里停泊几天，因此我们这一家便搬到上海来，住在上海的昌寿里。这昌寿里是在上海的哪一区，我就不知道了，但是母亲所讲的关于我很小时候的故事，例如我写在《寄小读者?通讯（十）》里面的一些，就都是以昌寿里为背景的。我关于上海的记忆，只有两张相片作为根据，一张是父亲自己照的：年轻的母亲穿着沿着阔边的衣裤，坐在一张有床架和帐楣的床边上，脚下还摆着一个脚炉，我就站在她的身旁，头上是一顶青绒的帽子，身上是一件深色的棉袍。父亲很喜欢玩些新鲜的东西，例如照相，我记得他的那个照相机，就有现在卫生员背的药箱那么大！他还有许多冲洗相片的器具，至今我还保存有一个玻璃的漏斗，就是洗相片用的器具之一。另一张相片是在照相馆照的，我的祖父和老姨太坐在茶几的两边，茶几上摆着花盆、盖碗茶杯和水烟筒，祖父穿着夏天的衣衫，手里拿着扇子；老姨太穿着沿着阔边的上衣，下面是青纱裙子。我自己坐在他们中间茶几前面的一张小椅子上，头上梳着两个丫角，身上穿的是浅色衣裤，两手按在膝头，手腕和脚踝①〔踝〕读huái。上都戴有银镯子，看样子不过有两三岁，至少是会走了吧。
在上海那两三年中，父亲隔几个月就可以回来一次。母亲谈到夏天夜里，父亲有时和她坐马车到黄浦滩上去兜风，她认为那是她在福州时所想望不到的。但是父亲回到家来，很少在白天出去探亲访友，因为舰长萨镇冰先生说不定什么时候就会派水手来叫他。萨镇冰先生是父亲在海军中最敬仰的上级，总是亲昵地称他为“萨统”（“统”就是“统领”的意思，我想这也和现在人称的“朱总”“彭总”“贺总”差不多）。我对萨统的印象也极深。记得有一次，我拉着一个来召唤我父亲的水手，不让他走，他笑说：“不行，不走要打屁股的！”我问：“谁叫打？用什么打？”他说：“军官叫打就打，用绳子打，打起来就是‘一打①〔一打（dá）〕量词，12个为一打。’，‘一打’就是十二下。”我说：“绳子打不疼吧？”他用手指比划着说：“吓！你试试看，我们船上用的绳索粗着呢，浸透了水，打起来比棒子还疼呢！”我着急地问：“我父亲若不回去，萨统会打他吧？”他摇头笑说：“不会的，当官的顶多也就记一个过。萨统很少打人，你父亲也不打人，打起来也只打‘半打’，还叫用干索子。”我问：“那就不疼了吧？”他说：“那就好多了……”这时父亲已换好军装出来，他就笑着跟在后面走了。
1903～1904年之间，父亲奉命到山东烟台去创办海军军官学校。我们搬到烟台，先住在市内的海军采办所，所长叶茂蕃先生让出一间北屋给我们住。南屋是一排三间的客厅，就成了父亲会客和办公的地方。我记得这客厅里有一副长联是：
此地有崇山峻岭茂林修竹
是能读三坟五典八索九丘〔三坟五典八索九丘〕语出《左传?昭公十二年》：“王曰：‘是良史也，子善视之；是能读三坟、五典、八索、九丘。’”后泛指一切古书。