武林门以古武林门得名。古武林门原来位于现武林路与体育场路交叉处。最早建成于南宋二十八年。当时叫余杭门，后来，几经改名。相传那时“门”的南面，有一座虎林山，或者又叫虎陵山，但吴音讹为武林山。山高不过三丈，长不过百步，是北山的余脉。其实，武林山是一座小小的山坡而已。因“门”外有武林山，明代将“门”的名字改成武林门，一直沿用至今。自隋唐起，武林门就是京杭运河的南端码头。宋朝时船舶云集，商业极为繁华。民国年间，武林门被拆除，现在演变成区片名。
杭州古称钱唐。隋朝开皇九年(589年)废钱唐郡，置杭州，杭州之名首次在历史上出现。