アルフィー(M・ケイン)は、ロンドンのイースト・エンドの汚ないアパートに住んでいたが、身なりだけは素晴らしく、スキがなかった。それというのも彼は女性が好きで、女性の好みにしたがって身なりをかえたり、それにふさわしい態度をとる習慣が出来上っていたからだ。最初に征服したのはシディ(M・マーティン)であった。次がギルダ、彼女が結婚した時にはショックだった。そのショックがぬけきらない時、アルフィーは自分の肺が結核におかされていることを知った。療養生活はありがたくなかった。だが担当の女医は美しかったし、看護婦にもかわいこちゃんが大勢いたから楽しかった。退院したアルフィーはある日、となりのベッドにいたハリーを見舞った。そこには欲求不満顔の彼の妻リリーが来ていた。そしてアルフイーは早速モーションをかけるのだった。アルフィーは転々と職をかえた。その間、彼は金持の女ルビー(S・ウィンタース)や、アニーという娘を知ったが、楽観的な彼の予想とは逆に、ルビーはしばらくするとアルフィーより若いギタリストを見つけていたし、アニーはボーイフレンドに連れ去られてしまった。いったい俺の魅力はどうなったのだろう。こんなことは今までになかったことだ。と考えるアルフィーの目の前にシディが現われた。最初の女だ。そしてたちまちデートの約束が出来上った。