Мне нужно добавить вывод загруженного текстового файла wget в существующий файл.Я сделал это
wget https://fiddle.jshell.net/robots.txt -O text.txt
, который создает новый файл text.txt
с содержимым как
# See http://www.robotstxt.org/robotstxt.html for documentation on how to use the robots.txt file
Но когда я сделал
wget https://phpfiddle.org/robots.txt -O text.txt
Содержание текстового файлаэто
User-agent: *
Allow: /deposit/documents.php
Allow: /deposit/phpfiddle_apis.php
Allow: /deposit/phpfiddle_widgets.php
Allow: /deposit/widget001.php
Allow: /deposit/widget002.php
Allow: /deposit/widget003.php
Disallow: /deposit/
Sitemap: http://phpfiddle.org/sitemap.xml
если бы я ожидал, что это будет так
# See http://www.robotstxt.org/robotstxt.html for documentation on how to use the robots.txt file
User-agent: *
Allow: /deposit/documents.php
Allow: /deposit/phpfiddle_apis.php
Allow: /deposit/phpfiddle_widgets.php
Allow: /deposit/widget001.php
Allow: /deposit/widget002.php
Allow: /deposit/widget003.php
Disallow: /deposit/
Sitemap: http://phpfiddle.org/sitemap.xml