Em princípio, pode, mas se for usar por linha de comando, precisa de "escape" ou aspas em Unix. Apesar de aceito no nome de arquivo, no Shell ele tem um significado especial, ele separa os comandos. No Windows é aceito sem restrições.

Como complemento, a Wikipedia em inglês tem um compêndio muito bom de informações sobre nomes de arquivo:

> [Artigo: **Filename**][1].

<br>Em especial, traduzi esta tabela que lista os caracteres considerados especiais nos _filesystems_ mais comuns (e outros nem tanto):



     /     barra            Usada como separador de caminho em sistemas Unix-like,
                            Windows e Amiga (a variável SwitchChar do DOS pode ser
                            setada para '/' e o COMMAND.COM considerará como indicador
                            de flag, mas o DOS e o Windows mesmos aceitam como
                            separador na API)

     \     barra invertida  Usada como separador padrão no DOS, OS/2 e Windows (mesmo
                            com SwitChar configurado para '-'; é aceito em nomes Unix)

     ?     interrogação     É usado como coringa em Unix, Windows, Amiga, e representa
                            um caractere único. É permitido em nomes Unix

     %     porcentagem      É um coringa em RT-11, define um caractere único. Em Windows
                            pode ser usado

     *     asterisco        Usado como coringa em Unix, DOS, RT-11, VMS e Windows.
                            Representa uma sequência de caracteres em Unix, Windows, DOS,
                            ou qualquer sequência na extensão (*.* significa "todos os
                            arquivos"). Em Unix, pode ser usado nos nomes de arquivo

     :     dois pontos      Serve para determinar o ponto de montagem no Windows, o
                            dispositivo virtual ou físico no Amiga, RT-11 e VMS e é o
                            separador de caminho no MacOS Clássico. No VMS, indica um
                            nome de nó DECnet quando usado em dobro (equivale a um endereço
                            NetBios. No Windows ainda é usado para separar um Data Stream
                            do nome de arquivo em NTFS

     |     barra vertical   Define um redirecionamento de software em Unix, DOS e Windows;
	        ou pipe          Permitido em nomes Unix

     "     aspas duplas     Usadas para delimitar nomes com espaços em Windows

     <     menor que        Usado para redirecionar entrada, permitido em Unix

     >     maior que        Usado para redirecionar saída, permitido em Unix

     .     ponto            Permitido, mas a última ocorrência indica separador de extensão
                            em VMS, DOS, e Windows. Em outros sistemas, normalmente faz parte
                            do nome, e pode ter mais de uma ocorrência seguida. Normalmente, em
                            Unix indica que o nome deve ser escondido da listagem

           espaço           É permitido, mas como também é um separador de parâmetros de linha
                            de comando, deve-se delimitar o nome com aspas para diferenciar dos
                            parâmetros


Importante: em Unix, apesar de aceitos, os caracteres `<>|\:()&;#?*` normalmente precisam ser "escapados" com barra invertida, ou delimitados com aspas em linha de comando:

Ex: `five\ and\ six\<seven` ou mesmo `"five and six<seven"`.

<br>Considerações:
---

O simples fato de poder usar determinados caracteres não significa que você deve usá-los. A recomendação é de usar caracteres "menos comuns" somente onde houver uma razão que não pode ser contornada por outros meios, como normalização e sanitização.

Pensando em interoperabilidade, mesmo usando caracteres permitidos, a simples mistura de maiúsculas e minúsculas é um problema muito comum quando se trocam arquivos entre OSes diferentes, pois no Windows não há diferenciação, e em parde considerável dos outros OSes há. Como o uso de caracteres especiais também varia, evita-se muita dor de cabeça se limitando a uma nomenclatura simplificada (ficar na faixa `a-z0-9_.` por exemplo é uma boa pedida).

Acentuação e formatação fazem sentido para coisas manipuladas somente pelo usuário final (receita de bolo, carta de apresentação, planilha de prestações do financiamento da máquina de lavar, essas coisas), mas arquivos que devem ser processados por um sistema merecem um cuidado maior. Pessoalmente, acho um crime fazer como vejo muito aqui no site, de se fazer questão de manter nomes originais em upload de arquivo, quando seria muito mais simples armazenar os nomes no DB e simplesmente colocar uma string sequencial no filesystem.

[1]: https://en.wikipedia.org/wiki/Filename