Sei não heim, acho que alguém com muitos conhecimentos de psicologia, ou psiquiatria (confesso não entender muito de nada disto) deve fazer coisas a você, se tiver acesso fácil.
E é assim na informática, tendo acesso ao teclado tudo é mais fácil, independente do sistema.
Confesso até que não gosto de discutir sobre isso em aberto assim, afinal se um dos usuários da minha rede ver uma conversa dessa pode fazer algum estrago em alguma estação de trabalho, mas tirar o recovery mode não protege muito não, afinal as formas de se ter acesso aos arquivos tendo acesso ao teclado são muitas, basta ter imaginação, e (novamente) digo que independe do sistema operacional instalado.
Assim nos servers que tenho faço o seguinte, retiro o recovery mode e (principalmente) tranco a sala a chaves, dando acesso a ela apenas para pouquíssimas pessoas.