Он прославился благодаря интерпретациям произведений Баха, был почетным членом Баховского общества в Германии. Гродберг выступал вместе с Мстиславом Ростроповичем и другими известными музыкантами. Его пластинки издавали большими тиражами на фирме «Мелодия».