調所廣鄉生於1776年，卒於嘉永元年（1849年），名前是廣鄉，通稱笑左衛門。
廣鄉的親生父親川崎主右衛門基明是城下士中的下級武士。廣鄉是末子，被過繼給了無子的下級武士調所清悅為養子——調所清悅是負責奧中茶道的下級藩士。
1798年在江戶的薩摩藩邸裏當了一名小納戶（藩主側用人），從此被隱居的大殿樣島津重豪注意，重豪隨後提拔他為茶道頭。
1808年島津重豪重掌藩政，九代家主齊宣被迫退隱，十代家主島津齊興繼位，但實權仍掌握在重豪手中。
調所熟悉民政、言辭便給，更重要的是他平時意氣飛揚、不怕困難，所以重豪對他越來越看重，升職他為“使番”負責傳遞家主命令、巡查事務。
1827年重豪發布向全藩征求財政改革建議的命令。在諸多的建白書中，調所笑左衛門廣鄉的策論最對重豪的胃口，於是他被提拔成町奉行。
兩年後，重豪又把調所的職位改為禦側用人役、禦兩隱居樣禦續料掛。
禦側用人役是家主身邊的官員，職責類似秘書，負責藩政所和家主之間的溝通。
禦續料掛是負責財務的大管家，兩隱居是指隱居的兩代家主重豪和齊宣，禦兩隱居樣禦續料掛就是隱居的兩代家主的對外大管家。
從此調所成為島津重豪最信任的官員，重豪稱他為“我的眼睛”。
薩摩藩到文政末年（1830年），百事皆廢，藩吏欠薪最長者達十三個月，連“參覲交代”幾乎都無法進行，重豪對藩財政的狀況很苦惱，準備改革藩政，命令調所為改革準備一些資金。調所向藩外的商人求助，但薩摩藩的困境已為廣大商人所知，從事“大名貸”的商人都因為薩摩藩拖欠還款而不願繼續借款，甚至連門都不讓調所進。
當時有個對薩摩藩比較友好的商人叫出雲屋孫兵衛——出雲屋是他擁有的店鋪名稱，商人沒有苗字，所以稱呼大商人都是店鋪名加名前。