在明清時期，文登有四大望族之說，即叢、於、劉、畢。這四姓考取的進士舉人較多，故有此稱。而除了這四家之外，賽姓也較為有名，《文登縣誌》中記載的賽姓人物不在少數。與叢姓源自休屠王子金日磾類似，賽姓的淵源也比較傳奇，尊奉元朝雲南行省平章政事賽典赤為始祖。到了明初，山後人賽納作為軍戶調到靖海衛，任“衛鎮撫”一職。賽姓家族就此在膠東半島紮根。

（靖海衛）

明代實行軍民分治，靖海衛與文登縣是兩套獨立的管理體系。到了清代，靖海衛裁撤之後併入文登縣（後來又劃給榮成），賽姓也逐漸析居多地，因此後世統稱文登賽姓。之前已經提過，賽姓祖上本是衛所軍戶。衛所的職務雖然可以世襲，但只能由嫡長子繼承。家族中其他男丁要想出人頭地，只能尋找別的途徑。古代講究學而優則仕，讀書參加科舉自然成為一個比較理想的途徑。

根據史料記載，軍戶出身的賽姓，在賽從儉這一代，才開始科舉考場上嶄露頭角。《文登縣誌》稱：“從儉號時庵，靖海世襲鎮撫寶之次子也。上世皆武貴，從儉始以文學起家，仕三河知縣。”而關於賽從儉發跡的由來，民間還有一段奇異的傳說。在清代人王士禎的《池北偶談》中，也提到這個故事。

古人迷信，選擇祖塋講究風水。賽從儉在葬親時，選擇了黃山（文登一處山脈）作為塋地，第二天就要安葬。此時，鄰居有位老嫗也看好了這裡，想連夜聯絡地的主人，搶在賽從儉的前面。月黑風高，在她趕往山裡的時候，不小心迷失了道路。正在發愁時，突然有兩名手執火把的童子出現在她的面前，對她說：“你要去賽家的塋地麼？我們給你領路吧。”老嫗聽了之後，不暇細想，高興地跟隨兩童子前行。童子起初一路無語，等走了一段時間後，方才開口，對老嫗言道：“這塊地的風水很好，但註定不能歸你們家有，賽氏有科舉之命，天意不可違。”說完之後，童子忽然不見，火把也消失，周圍重歸一片漆黑。老嫗摸索半天，發現自己南轅北轍，走到了另一個方向的海邊上了。等她找到道路，輾轉趕到黃山時，天色已經大亮，賽家那邊已經順利安葬了。老嫗見狀，自忖兩童子所言不虛，心生悔意。就將此經歷一五一十地告訴了賽從儉，包括以後賽家科舉鼎盛的預言。

（文登賽家莊）

賽從儉聽聞之後，將信將疑。他向老嫗許諾：“將來賽氏子孫只要出一位功名，就送給她十兩銀子。”空口無憑，他立下字據，交給老嫗。

到了後來，不僅賽從儉自己踏入仕途，成為三河知縣，他的子孫也大多取得功名，都遵守了這一約定。算起來，老嫗和她的後人，也從中沾光不少。到了賽從儉的曾孫一輩，已經是清康熙年間。當年的預言似乎仍然有效。他的曾孫賽玉紘在康熙丙午科考中舉人，次年又中進士。而傳說就在那一年的元旦夜裡，有人在賽氏塋前，又遠遠看到了兩個火把繞行。值得一提的是，賽玉紘的兒子賽璋後來也考中了進士。