あるとき物くさ太郎は人から餅を貰ったが、それを食わずに寝転がってもてあそんでいるうち、思わず手から離れて道まで転がってしまった。そこへ鷹狩に行く地頭の左衛門尉のぶよりが通りかかると、物くさ太郎は寝たままのぶよりに向かって、その餅を拾えと呼びかける。この物くさ太郎の様子にのぶよりは、腹が立つのを通り越して興味を覚え、飯や酒をやってこの男を養え、さもなくばこの土地から追放すると近隣の者に言い渡した。人々はじつに理不尽な命令だと思いつつも、物くさ太郎に飯や酒を与え続けたのだった。
それから三年たった春も末のことである。信濃国の国司二条大納言ありすゑが、あたらしの郷に長夫（ながぶ、公用の人夫）を割り当て都に行かせる事になった。百姓たちはこの長夫を嫌がり相談の結果、物くさ太郎に行かせようと決めた。物くさ太郎に長夫に行くよう話をするが承知しない。そこで、都に行けばきれいな女がいてそれを妻にできるぞと言うと、それならと物くさ太郎は都へと向かうことにした。
上洛した物くさ太郎はまるで人が変わったように働き者になり、大納言もこれほどまじめに働く者はないと気に入り、長夫は三月までの予定だったのがそのまま七月となり、十一月にもなった。物くさ太郎は信濃に帰ることにしたが、まだ嫁が見つからない。泊りとする宿屋の亭主にどうすれば妻が得られるかと聞くと、清水寺の門前で「辻取り」（路上で女を連れ去って妻妾とすること）をすればいいという。物くさ太郎は辻取りをするため清水寺に向かった。
ぼろを着た物くさ太郎は清水寺の門前で両手を広げて立ち、通りかかる女を一々見て品定めするが、その様子を気味悪がられ近寄ろうとする者は誰もいない。そこにたまたま通りかかった見目麗しい女房を物くさ太郎は気に入り捕まえて放さず、妻にしようとするが女房は嫌がり、謎かけの和歌を残してどうにか逃げてゆく。