CAUTION

この記事は学生時代に書かれたもので、記録として残しています。内容が正確でない可能性や信頼性を担保できない部分があるため、その点を踏まえてご覧ください。

http://isseium.hateblo.jp/entry/20100923/1285225757

ここを参考に
基本 PasswordAuthentication yes

wheelグループにMatchで PasswordAuthentication no

としたけど、うまく行かなかった。
結局セキュリティも考えると全ユーザ公開鍵認証の方がいいかなと思い、そのようにした。