胡雪岩自己本身並沒有太高的文化素質，這一點也成了日後他進一步發展的最大的羈絆。
他在對自己的企業集團的管理上完全采用的是“跟著感覺走”的策略，憑的是自己在商場上摸爬滾打的經驗，而不是一套成熟的管理理論。這樣的方式在企業的初期尚可勉強應付，然而到了企業日益發展壯大的時候，就完全跟不上企業的步伐了。比如胡雪岩所投資的眾多行業中，就沒有一家是新式企業，全都是傳統的錢莊、當鋪、絲、茶、糧、貿易甚至軍火，全部是一些沒有創造力的行業，自身不能創造價值，完全靠資源和買進賣出之間的差價來賺取利潤，並且互相影響，一旦有一個生意發生危機，就會殃及所有的生意。
同時在日常管理上，胡雪岩也沒有一套完備的製度，以至於在手下人犯了錯時，無章可循，隻能憑借自己的喜好處理，尤為嚴重的是，胡雪岩管理企業沒有一個長遠的計劃，甚至沒有一個接班人，企業即使做大也會因為沒有一個強有力的接班人而無以為繼。
如果把胡雪岩的人生分為三個階段的話，那麽無疑，第一個階段的胡雪岩即創業初期，可以說是十分成功；而第二個階段的胡雪岩，稱得上相當成功，可惜沒有第一階段那麽好。為什麽呢？因為他沒有把第一階段的精神，再延續下去。盡管左宗棠苦口婆心，一再叮囑他要多讀書。胡雪岩卻忙於生意，不能體會左宗棠的真正用意，隻能算是比較成功，不能說成功。
這一階段，沒有能夠精益求精，繼續充實自己的實力，以致第三個階段，不幸出了差錯，鑄成大恨。
胡雪岩的第三個階段，必須同時做給自己看，也做給別人看。一個人到了這個階段，人我之間的距離顯得十分接近。因為大家都很好奇，大家都很想知道詳細的情形，以致雪岩的一舉一動，都像他的兒子胡寶玉所說的，成為大家茶餘酒後的談話資料。