ファイル単位で参照制限をかけることはできません。
ただ、プロジェクトメンバーの権限設定で、特定のアイテムを見せないようにすることは可能です。
アイテム参照権限の設定方法については、以下の記事を参照ください。