ВОПРОС · Q&A

Распарсить файл с url'ами для более удобного чтения структуры сайта

2 ответов 1,6 тыс.
AI-выжимка обсуждения скоро

Краткие тезисы обсуждения со ссылками на ключевые ответы появятся здесь.

Автор вопроса
Доброго времени суток. Имеется файл index в папке .git , который содержит всю структуру сайта. Проблема в том , что в файле много мусора и хотелось бы вытащить все ссылки в отдельный файл , что бы было удобно читать и использовать эти ссылки при кравлинге на тесте и последующим анализом. Есть ли инструмент или каким способом можно привести файл в порядок?
Выглядит все вот таким образом:
1.jpg
 
Доброго времени суток. Имеется файл index в папке .git , который содержит всю структуру сайта. Проблема в том , что в файле много мусора и хотелось бы вытащить все ссылки в отдельный файл , что бы было удобно читать и использовать эти ссылки при кравлинге на тесте и последующим анализом. Есть ли инструмент или каким способом можно привести файл в порядок?
Выглядит все вот таким образом:
Посмотреть вложение 73233
Может потому что гит папку надо не в блокноте открывать... :)
Вообще для этого нужен git - Git
Ищи Git GUI если не понимаешь что к чему, например:
 
Гит уже установлен , я пробовал манипулировать)
Дело в том , что этот гит давно удален , нет возможности его восстановить или как то привести в порядок. А файл имеется , в нем огромное кол-во ссылок , которое при тесте , будет весьма полезно использовать при аудите. Вручную что то искать весьма муторно и неудобно , т.к нет структуры , просто каша на весь файл.
Есть неплохая база словарей для кравлинга от SecLib , но эта будет уникальнее , т.к содержит больше информации.