Пятница, 26 Апреля 2024, 18:37

Приветствую Вас Гость

[ Новые сообщения · Игроделы · Правила · Поиск ]
  • Страница 1 из 1
  • 1
Форум игроделов » Программирование » Скриптовые языки программирования » WEB парсинг (Как утащить данные?)
WEB парсинг
XDominatorДата: Пятница, 05 Сентября 2014, 11:39 | Сообщение # 1
постоянный участник
Сейчас нет на сайте
В общем задача. Есть сайт. Чтобы не быть голословным, например вот этот: Пример сайта . На этом сайте представлен список компаний грузоперевозчиков, разбитый по категориям. Допустим, мне нужна 1 категория, а в ней 4к+ организаций. Чтобы узнать контактные данные конкретной организации, необходимо кликнуть по ее названию и уйти на уровень выше от списка организаций на "личную страницу" компании. Нужно вытащить данные всех организаций, представленных в категории. В общем, результатом должен стать текстовый или табличный файлик со списком всех организаций категории и с контактными данными каждой отдельной организации. Каким инструментом лучше всего провернуть подобное, в какую сторону копать?

Ghaarp

The soul lighter(Android, logic)

Zzzzombie RAGE!!!(For android)


Сообщение отредактировал XDominator - Пятница, 05 Сентября 2014, 11:41
QvantДата: Пятница, 05 Сентября 2014, 11:42 | Сообщение # 2
почти ветеран
Сейчас нет на сайте
4к раз покликай
lvovandДата: Пятница, 05 Сентября 2014, 12:29 | Сообщение # 3
старожил
Сейчас нет на сайте
XDominator,
на примере с php:

считываешь страницу, лучше читать через cURL с подстановкой заголовков,
выбираешь из текста страницы нужные объекты, либо свою функцию пишешь, либо воспользоваться готовыми библиотеками парсеров типа PHP Simple HTML DOM Parser и ему подобные. Из найденных объектов сохраняешь то что тебе нужно


Разработка и продвижение сайтов. Дизайн
Форум игроделов » Программирование » Скриптовые языки программирования » WEB парсинг (Как утащить данные?)
  • Страница 1 из 1
  • 1
Поиск:

Все права сохранены. GcUp.ru © 2008-2024 Рейтинг