下田（安直楼）お吉が開業した料理屋跡。維新後は芸妓として。

総領事タウンゼント・ハリスのもとへ侍妾（じしょう）として奉公にあがったお吉ですが、維新後は芸妓として流浪の果てに下田へ戻り、料理屋「安直楼」を開業します。

安直楼は、最初は盛況でしたが、次第にお吉の前歴などの風評をまき散らされて、客足が遠のき、２年後に廃業しました。

安直楼の後は、寿司店として営業していました。

現在、資料館としての営業は中止しているようです。