Historia tego obiektu zaczęła się w 1843 roku. Pierwotnie Grzybek stał u zbiegu ulic Chopina z al. 500-lecia. W 1891 przeniesiono go w okolice dzisiejszego hotelu Copernicus. W tym samym roku został uruchomiony pierwszy tramwaj konny, który jeździł na trasie Bydgoskie Przedmieście - Dworzec Miasto, osiem lat później na tej samej trasie pojawiły się pierwsze tramwaje elektryczne, a niektóre źródła podają, że właśnie wtedy Grzybek stał się przystankiem. Wówczas tory nie biegły, tak jak teraz, ul. Chopina, ale od razu z ul. Kopernika wpadały w Bydgoską. Swoją drogą stare plany Torunia potrafią rozwiać wiele wątpliwości.
Likwidacja torowiska przy Grzybie miała miejsce w 1927 r. W tym samym roku uruchomiono dwa tory na ul. Chopina. Grzybek jednak został na swoim miejscu aż do lat '60 XX wieku, kiedy to przeniesiono go na róg ulicy Bydgoskiej i al. 500-lecia, gdzie stoi do dziś.