在明朝初期居住在山西的兄弟六人，信、忠、谭（坦）、诚（成）、孝、兴，按当时的迁民政策，三口人留祖籍一人，长支信祖留山西侍宗祠，其余五兄弟迁徙山东汶上、寿张（现郓城），二支忠祖迁山东省汶上县枣杭村，三支谭祖迁汶上县战湾村（又名靛王村），四支诚（成）祖迁山东兖州府东平州寿张县阳白里枣行王家庄，现为山东省郓城县侯咽集乡枣杭村，孝祖迁寿张县新三村，现为郓城县程屯镇井屯村，兴祖迁寿张县生活二三世又迁河南范邑，现为郓城县李集乡朱店村（高才刘村）。迁徙山东的兄弟五人忠祖为二兄长，所以以忠祖居住村庄枣杭命名为枣杭王，忠祖居住地为什么命名的枣杭村的，在山西老家的村名为枣园，为了不忘故土，取名又不能高于祖籍的名字，这样就以枣园中的一行为村庄的名字，故为枣杭村。
兄弟几人迁居山东后，由于交通不便，通讯落后汶上的兄弟二人和郓城的兄弟三人联系甚少，当时居住在郓城的兄弟三人，生活在黄河滩边，经常遭受黄河水灾，生活十分拮据。当时只有成祖、兴祖后人经常联系，孝祖后人与成、兴祖的后人联系很少。居住在山东汶上的忠祖、谭祖后人相距一华里，联系十分密切，春节相互拜年，共同在汶上枣杭村祭祖。迁来初期生活十分困难，时光荏苒到了清朝康熙年间，谭祖的九世孙方都取得功名后，回乡省亲时邀请族人续修家谱，同时邀请忠祖后人共同续谱，并邀请了寿张县的兄弟三人的后人参加续谱，由于兄弟五人的后人在商议续谱的费用，如何兑付粮食意见不一致。这种情况下，谭祖九世孙方都率先于康熙十九年（1680年）第一次续家谱。该家谱详细记载了兄弟六人的基本情况及居住情况，续修完家谱后，没参与续修家谱的其他四支的先祖后人，从此出现了面和心不和，发生了兄弟之间拉帮结派的现象。有的人教唆不在一起续谱就不是一家人。事情过了八年，到了康熙二十七年，（1688年）忠祖的十二世孙培发邀请族人续修了家谱，当时没有邀请其他支系的族人参与续修家谱。忠祖后人在这次续谱时，简单介绍了迁居史，从此各支系各自续修家谱。到了民国十四年（1925年）谭祖十六世孙王象三（王秉辰）是汶上四区区长，当时也是共产党的地下工作者，关于永安寺起义汶上县志对其的事迹有详细记载。当时王氏家族的宗祠（家庙）设在汶上县枣杭村，该宗祠是在