Как отмечено в других комментариях.
Это не ошибка / проблема PowerShell, это проблема с правами доступа. То же самое может / произойдет, если вы скажете, что использовали этот вариант использования в дереве папок Windows.
Поскольку вы знаете, что это произойдет, либо исправьте разрешения для дерева, над которым вы работаете, либо сделайте это.
Get-ChildItem -Directory -Path 'C:\Windows\System32' -Recurse -ErrorAction SilentlyContinue
или если вы хотите просто остановиться, если путь не пройден.
# Treat non-terminating erros as terminating
$RootFolderUnc = 'C:\Windows\System32'
Try {Get-ChildItem -Directory -Path $RootFolderUnc -Recurse -ErrorAction Stop}
Catch [System.UnauthorizedAccessException]
{
Write-Warning -Message "$env:USERNAME. You do not have permissions to view this path."
$_.Exception.Message
}