在法租界内，上海城老西门外，有一个阴森森的房舍。房子的四周有一圈两人来高的围墙，严严实实地挡住了人们的视线。房子的两扇乌黑的大门，终年关闭着，一个月难得打开几次。这间宁波同乡会造的寄存棺材的房子就是四明公所，俗称宁波会馆。当时，宁波人有几十万旅居上海，是上海外来人口中数量最多、势力最大的一支。当时在上海滩上号称“四明帮”或“宁波帮”。为了方便同乡人之间的联系，1797年，旅居上海的宁波人展开了“一文钱愿捐”活动，共同出资，购买了城外小北门与老西门之间的30多亩土地，修建了规模宏大的宁波会馆，其中设立了公所、殡馆和义冢。公所内的祠堂成为了宁波人拜祭祖先的地方，而宽敞的正殿是他们议事的活动场所。公所建成后，由宁波同乡组成的董事会负责其事务。后来，公所又通过购买附近的土地，建造房舍，成为上海最大的外乡人会馆。1844年，四明会馆获得了上海知县的批准，得到了免纳租税的许可。会馆除祠堂、门楼等建筑外，主要作为埋葬同乡遗体的墓地和停放棺木、灵柩的场所。

1848年，法国驻华领事馆向上海道台要求增加法国侨民的居留地，企图将四明公所所在的地界划入法国的势力范围，这一举动引起了宁波人的极大反感，道台觉得众怒难犯，一直不肯答应。1849年，原来的上海道台卸任，新任道台刚上任，法租界领事馆就重新提出了他们的要求。按照当时清朝的政治状况，新上任的官员只有得到洋人的支持，才能稳坐在官位上。新上任的上海道台在巨大的压力下，以告示的形式宣布：上海县北门外，南至城河，北至洋泾浜，西至关帝庙褚家桥，东至广东潮州会馆沿河至洋泾浜东南角，为法国侨人的居留地。这样一来，四明公所就被划入了法租界。

法租界当局对租界内的坟墓十分反感，认为它是传播疾病的场所，千方百计地要毁掉四明公所。1873年，法租界当局称要修建马路，必须侵占公所的部分土地。公所的董事会得知消息后，向租界公董局递交了一份请愿书，请求他们绕道修路，其原因是车辆的行驶会打搅到沉睡在地下的阴灵，至于绕道修路所需要增加的修路费用可以由公所承担。然而，法租界对这样的请求却充耳不闻，一心想要拆掉四明公所，于是，仍然派人去四明公所查看地形，商议如何从那里修建马路。这一举动，已然引起了群众极大的反感。在勘测地形的人员被气愤的群众给赶了出去之后，法租界当局更是派出士兵进入公所内，企图强行拆除公所，忍无可忍的宁波同乡极力阻止，前来执行任务的法国士兵竟然当场开枪杀死了7名群众。同乡的鲜血严重刺激到群众的情绪。闻讯而来的宁波同乡很快就纠结了一大批群众朝法租界当局涌去，将租界的公董局团团围住，并放火焚烧法国人的住宅。在群众愤怒的情绪下，法租界当局不得不做出让步，取消了修路的计划，并且承认四明公所为中国人所有。这次四明公所事件发生时，黄金荣还是个小孩子，并且还没有迁到上海，自然是没有机会目睹这次事件的发生，而第二次四明公所事件的发生，黄金荣不仅亲眼看到了，还亲自参与了这次事件。