Schon in den 1930er Jahren bestand in Mannheim ein Polizeimusikkorps welches der badischen kommunalen Polizei angehörte. In Stuttgart gab es ein Musikkorps der ehemaligen württembergischen Polizei. Die Polizeimusikkorps, aufgebaut und strukturiert ähnlich wie Militärmusikkorps, wurden während des Zweiten Weltkrieges nach und nach aufgelöst.
Beim städtischen Polizeipräsidium Stuttgart wurde bereits Anfang der 1950er Jahre wieder ein Polizeimusikkorps mit Berufsmusikern aufgestellt die Polizeibeamte wurden. Seit 1973 ist dieses Ensemble das Landes-Musikkorps Baden-Württemberg bzw. Landespolizeiorchester Baden-Württemberg.
Auch in Mannheim wurde die Tradition der früheren Polizeimusik der Badischen Polizei vom städtischen Polizeipräsidium wieder aufgenommen und fortgeführt. Mit der Aufstellung eines „Freiwilligen Polizeidienstes“ in Baden-Württemberg wurde in Mannheim vom damaligen Polizeipräsidenten Stümper die Chance gesehen, ein neues Musikkorps aufzustellen. In 1965 konnte dieses Vorhaben verwirklicht werden. Als Orchestermitglieder wurden gut ausgebildete Musiker, auch ehemalige Berufs- und Militärmusiker, immer dabei auch gut ausgebildete Polizeibeamte der Schutz- und Kriminalpolizei.
Im Gegensatz zum Landespolizeiorchester sind die Musiker in Mannheim nie beim Land angestellt gewesen, sondern wurden über den Freiwilligen Polizeidienst finanziert. Doch da der vom Land abgeschafft werden soll, fehlt der rechtliche und finanzielle Rahmen. 2024 wurde durch die Gründung des Orchester bzw. Förderverein eine neue Struktur geschaffen, die es ermöglicht, das Orchester weiter in eine sichere Zukunft zu führen. Gleichzeitig erfolgte eine neue, modernere Namensgebung als Polizeiorchester Mannheim. Als Botschafter des „guten Tons“ tritt das Polizeiorchester Mannheim im Rahmen der polizeilichen Öffentlichkeitsarbeit überwiegend im Bezirk des Polizeipräsidiums Mannheim, wie auch über die Landesgrenzen hinaus auf.
Die Teilnahme an internationalen Musikshows in Berlin oder Ludwigshafen, oder Live-Rundfunksendungen gehören ebenso wie Benefits- und Parkkonzerte als auch musikalische Umrahmungen von eigenen und fremden Polizeiveranstaltungen zum Auftrittsspektrum.