鎌倉時代中期の武将である。北条時頼邸で元服し、「頼」の字を受けて頼綱と名乗る。鎌倉幕府に出仕し、左衛門尉や備中守に任じられた。建治元年（1275年）には京都若宮八幡宮社の新宮建築に際し、70貫の費用を提供。六波羅評定衆にも加わり、近江守護として権限を強化した。徳治2年（1307年）、興福寺と領土問題で対立し、翌年尾張国に配流される。延慶3年（1311年）に69歳で死去。長男の廃嫡や他の息子の早世により、家督は末子の時信が継承した。