Комментарии: PowerShell. Парсинг сайта или забрать значение с сайта.

Автор: Sergey

Sergey — Wed, 12 Jul 2023 08:30:06 +0000

Есть страница внутри компании, доступ по УЗ из АД, если выполняю в линукс обынчный curl то хотя бы получаю, что доступ запрещен, пытаюсь выполнить
Invoke-WebRequest -Uri «http://xxx.cor.net/docadmin/default.aspx» -TimeoutSec 5 -UseDefaultCredentials

то в ответ ничего не получаю, что может быть?
такая проблема с парой сайтов, есть другие, но с ними работает все нормально!

Автор: Иван

Иван — Thu, 08 Jul 2021 13:27:15 +0000

Антон, приветствую, хотел поинтересоваться, есть ли возможность впихнуть в GUI тело на Powershell js скрипт, который использует сайт?

Есть внутриорганизационный справочник, содержащий телефонную базу, доступ к этой базе с сайта осуществляется через js скрипт, набирая первые цифры внутреннего номера пользователь получает список с информацией о номере, переходя открывается новая страница браузера содержащуюю эту информацию в расширенном виде. Хотел внедрить такое же решение в guiшку на powershell добавить textbox который так же будет переваривать эту функцию как сайт? может .. можно не внедряя js в ps скрипт, осуществлять реализацию этой функции через инфу, которую можно получить со страницы сайта.

Автор: Vladimir

Vladimir — Sat, 14 Oct 2017 20:31:00 +0000

Некоторый сайты, требуют обязательного параметра -UseBasicParsing, например:
$r = Invoke-WebRequest "http://ivolgann.com" -Method Post -UseBasicParsing -ContentType "text/plain; charset=utf-8" $r.links

Автор: Anton

Anton — Fri, 16 Sep 2016 06:39:13 +0000

В ответ на Anton. Хотя нет, идеи есть... Изменил метод с GET на POST. Вроде начал отрабатывать -ContentType. по крайней мере у меня кодировка стабильно корректная :).

Автор: Anton

Anton — Fri, 16 Sep 2016 06:26:40 +0000

Как не странно, но всё правильно.
в обоих случаях мы находим следующий li:

	<li class="cat-item cat-item-9"><a href="http://coolcode.ru/admin/">Администрирование</a> (16)
<ul class='children'>
	<li class="cat-item cat-item-6"><a href="http://coolcode.ru/admin/scripts/">Скрипты</a> (13)
</li>
</ul>
</li>

<li class="cat-item cat-item-9"><a href="http://coolcode.ru/admin/">Администрирование</a> (16)

<li class="cat-item cat-item-6"><a href="http://coolcode.ru/admin/scripts/">Скрипты</a> (13)

</li>

</ul>

</li>

То есть «скрипты» это под категория раздела «администрирования»… а я вывожу первое значение с цифорками из раздела.

Про ошибку…. всё дело в кодировке.

У меня какой то косячный сайт (WordPress из коробки :), PowerShell раз в несколько десятков раз отображает кодировку правильно, и очень вероятно, в первый раз тоже она окажется правильной. %)

после чего массив $Matches заполняется и при повторном запуске не изменяется.
При этом браузеры отрабатывают корректно.
Попытался конвертировать вывод, но ничего не получилось… попытался поиграться с -ContentType вообще 0 реакции.
убил 3 часа… идей нет …

Автор: araneon

araneon — Thu, 15 Sep 2016 13:15:56 +0000

Добрый день!
Снова немного столкнулся с парсингом html и вернулся сюда, а тут бах и сюрприз PowerShell !!!
За что Вам огромнейшее спасибо.
Но есть вопросик.
Я использую PowerShell 5.0.10586.117 (запускал из ISE) и у меня данный код отработал, но сначала вылезло сообщение «Предупреждение системы безопасности Windows», я сменил название рубрики с Администрирование на Скрипты, но число всё равно выводил 16.
Закрыл ISE и проверил заново, в итоге получаю тоже «Предупреждение системы безопасности Windows», а за тем:
Vector smash protection is enabled.
Cannot index into a null array.
At E:\Scripts\PowerShell\Parser.ps1:4 char:1
+ $Matches[1]
+ ~~~~~~~~~~~
+ CategoryInfo : InvalidOperation: (:) [], RuntimeException
+ FullyQualifiedErrorId : NullArray