Você pode usar o próprio `array_slice` que mencionou ou poderia usar um simples `for`, acho que este último seria mais fácil:

    function selecionar($array, $comeco, $limite){
    
    	$comeco  -= $limite + 1;
    	$limite   = $limite * 2 + 1;
    		
    	for($limite; $limite > 0; $limite--){
    		
    		if(isset($array[$comeco + $limite])){
    			$selecao[] = $array[$comeco + $limite];
    		}
    	
    	}
    	
    	return $selecao;
    	
    }

Logo, usando:

    echo implode(',', selecionar($collection, 3, 2));

Irá retornar exatamente `F,E,D,C,B`.

----------

Usando o `array_slice` sem qualquer correção (se o limit for maior que o offset terá problemas, por exemplo), poderia usar:

    array_slice($collection, $offset - $limit, $limit * 2 + 1);

Logo:

    $collection = range( 'A', 'Z' );
    $offset = 3;
    $limit = 2;
    
    echo implode(',',  array_slice($collection, $offset - $limit, $limit * 2 + 1));

Resultaria exatamente em `B,C,D,E,F`.