《赌棋山庄词话》及其《续编》刊于光绪十年（1884），篇幅甚巨，内容多记词坛掌故，收集词人词作，故在一定程度上遮蔽了其论词精义。然谢氏在同治十年（1871）作《答魏秀仁书》中论及魏氏《陔南山馆诗话》时说：“大著弟已粗览一过，比前较精、较结，《诗话》精神尤团结，但采诗颇多，然亦无碍宏旨。”可见谢氏撰词话自有“团结”二字在心，需要论者进行阐发。此“团结”指主旨，即众多材料必须围绕一个中心来演绎安排，颇似今天我们论散文常说的“形散而神不散”之“神”。方智范等《中国古典词学理论史》主要论及谢氏折衷浙、常二派的治词途径、诗词同源说，兼及谢氏的词史观、性情说、养气说、声律说等内容，并认为谢氏撰写词话的目的是在寻觅道、咸词坛失落已久的“词之真种子”（据文义，“词之真种子”殆即“忧生念乱”的涉世词篇）。这些大抵不差，可惜他们未能深入开掘，于谢氏论词主旨及其意义仍不够明晰。《赌棋山庄词话校注》的校注者刘荣平认为词量说才是谢氏独具开创性并极具批评意义的词学理论。