Baxter Dury'nin profesyonel müzik kariyerine attığı ilk adımın acı bir hikayesi var. New wave tavrının önemli ismi Ian Dury için düzenlenen anma töreninde ilk kez kalabalık kitle karşısında sahne aldı Baxter. Ian Dury onun babasıydı. Başlangıcı bu dramatik noktada yapan müzisyen, yaklaşık yirmi yıldır indie rock, new wave ve alternative pop türlerinin ilerleyişini var ediyor.
İlk albümünü "Len Parrot's Memorial Lift" adıyla 2002 yılında çıkardı Dury. Kült plak firması Rough Trade Records aracığıyla çıkan bu albümle NME'nin radarına takıldı. 2000'ler boyunca herhangi bir liste başarısı gösterememesine karşın kendi kabuğunda üretmeye devam etti. Bu ısrarı yakında karşılığını verecekti.
2014 yılında PIAS yan kuruluşu Le Label ile yeni bir kayıt sözleşmesi imzaladı ve zamanla kültleşecek "It's A Pleasure" adlı albümünü bu yeni iş birliği içesinde servis etti. Aradan üç yıl geçtikten sonra bir başka önemli firma Heavenly Recordings'e imza atan Dury, listelerde en büyük yükselişini kendisine getiren Prince of Tears uzunçalarını yayımladı.
İlerleyen yıllarda da üretimini sürdüren, doğduğu toprakların, İngiltere'nin soğukkanlı havasını şarkılarına yediren ve servis ettiği kayıtlarla dikkat çekip konser sayısını artıran Dury, bu yaz "I Thought I Was Better Than You" isimli yepyeni stüdyo albümüyle dinleyicilerini selamlayacak. Onu tam da bu yeni albümün sıcağında PSM Loves Summer by %100 Müzik kapsamında 14 Haziran’da Turkcell Sahnesi’nde izlemek ayrı bir keyif olacak.