卻說趙觀成年後，身形高挑，容貌俊美，風流倜儻，年輕百花門人對他傾心愛慕的不在少數。在青竹等長老商議之下，認為門主不應與屬下弟子有何曖昧關係，以防爭寵吃醋、偏愛回護等弊端，五人便與趙觀訂下規條，並在這上頭對他管得極嚴。趙觀倒也從善如流，不去招惹門中姑娘。唯一的例外是丁香；丁香曾為姬火鶴的婢女，對趙觀一片忠心，趙觀當上門主後，丁香便做了他的隨身丫鬟，服侍他起居，晝夜不離。趙觀正當少年，血氣未定，不免和這忠心的俏丫鬟結下一些霧水情緣。青竹等對此也睜一隻眼，閉一隻眼，隻要他不鬧得過分，便任由他去。
這年秋季，趙觀帶著丁香去北京城視察青竹新買下的怡甜院，見青竹將那院子打理得妥貼完善，甚是放心。他才回到杭州江家莊，家丁崇福便來報道：“昨日劉家四少爺下了帖子，說中秋夜在他家園子聚會賞月，廣請杭州城內名門子弟，請大少爺一定要賞光。”
趙觀笑道：“我也算是杭州城的名門子弟了！這熱鬧怎能不湊？丁香，你跟我一起去吧？”丁香抿嘴笑道：“少爺在城內的名聲原本便不怎麽佳，若再帶個丫鬟去赴宴，也未免太不象樣了吧？”
趙觀道：“你不肯陪我，那就算了。崇福，你幫我打聽打聽，都有些甚麽人會去？”崇福甚是乖覺，說道：“我早替少爺問過啦，劉四少好客，這回城裏的富宦子弟、武林世家、幫會人物都請到，總有五六百人，聽說場麵擺得很大。何家大少爺、司徒公子、傅員外的三個公子、炎暑山莊盛家兄弟、汪家大少爺都說會去。”趙觀點頭道：“都是老相識。好，你替我回話給劉四公子，說我一定到。”
他在杭州的兩三年間，在風月場所結識了不少城內的官宦富商子弟。當時有錢有勢人家的子弟無不喜好上青樓宴飲買醉，因此十個子弟中趙觀倒認識七八個。劉四少便是趙觀在百花門下的青樓“七裏香苑”認識的。劉四少的祖父中過進士，當過大官，因此劉家稱得上是書香世家；他父親轉而從商，買賣絲綢布疋，又成為杭州數一數二的富商。劉四少自己讀書不成，學商也不行，偏偏喜好俠義，少年時便拜在炎暑山莊二爺盛赴的門下學武。但他資質平平，學武也沒甚麽成就，隻喜愛仿效劍客到處打抱不平，常常惹上麻煩。橫豎他家裏有財有勢，天大的麻煩也總能替他擋著。一次趙觀碰上劉四少在七裏香喝酒賞妓，上去和他攀談，稱讚他俠義勇敢、武功高強，劉四少極為高興，將他引為知己，之後兩人便常結伴上青樓宴飲。