信義公民會館原是四四南村，也是台北市的第一個眷村，提供給民國三十七年從大陸青島遷台的聯勤四十四兵工廠的眷戶們居住，因地緣的關係，眷戶多半來自山東和河南。原址在日據時代是個倉庫，騰空庫房後，所有的員工和眷屬都住在裡面，每戶大約有三點五坪。最初兵工廠員工懷抱著儘快回鄉的心情，所以戶與戶之間只以布幔做為隔間，後因人口不斷增加，陸續增建，這個地方就成了兵工廠員工及眷屬待了五十多個年頭的新故鄉。

住在四四南村的住戶以技工居多，薪資較低，因此有些在南村的爸爸們在下班後兼差踩三輪車賺點錢，媽媽們則是幫人洗衣服、做點手工藝品或是賣早點貼補家用。由於在兵工廠做事，往往會有意外的發生，所以四四南村有為數不少的寡婦，有些獨力養育子女，但受限於經濟因素，子女的發展以從軍或當學徒的居多；有些因子女眾多無法負擔，而將小孩送到孤兒院的。

當時眷村內的水電都是由兵工廠供應，只在固定的時段供電，因此在那個時期長大的眷村第二代，有不少人是依靠著電線桿，藉著路燈來看書考試升學的，當時生活環境的艱難由此可想而知。

民國九十年，在文化界人士的呼籲下，成立了「信義公民會館」，並將四四南村列為歷史建築物，並指定其中對稱的四棟建築物予以保存，做為歷史的見證。