Песня написана Джорджем Харрисоном при участии Джона Леннона. Джордж написал песню "Taxman" после того как выяснил, что ему придется платить гигантский подоходный налог – 96 %. Вплоть до 1966 года график группы был настолько хаотичным и загруженным, что у них не было времени толком разобраться со своими финансовыми делами. «Большинство нашего дохода уходило государству в форме налогов», – говорил Джордж. «Так было и так есть. Но почему? За что нам такое наказание? Разве мы сделали что‑то не так?» Несмотря на то что незадолго до этого Джордж начал увлекаться религией, которая, как известно, утверждала, что все материальное – это бренность и грех, он оставался единственным членом группы, который никогда не отрицал, что его интересуют в том числе и деньги. Позже Джон утверждал, что он помогал Джорджу в написании песни, и его обидело то, что Джордж не упомянул об этом в своей книге I Me Mine. Джон говорил, что когда Джордж позвонил ему за помощью, он предложил ему несколько одиночных строчек. «Я не хотел этого делать… но я же любил его, поэтому я согласился и начал помогать».