ООО "21 ВЕК"
Генеральный директор
Парсинг и дальнейшая обработка полученного материала производится в различных программах. Основные этапы работы:
1. Написание кода для парсинга
2. Доработка кода XML
3. Работа с картой сайта sitemap.xml
4. Извлечение всех страниц на сайте для дальнейшего парсинга.
5. Парсинг. Сам парсинг может быть как в один поток, так и многопоточный.
6. Пакетное редактирование полученного текста (замена слов, регулярные выражения, пакетное создание новых данных в каждой таблице (ручная доработка полученных данных), ввод нужных данных для заказчика (например название поставщика в одну колонку, контактный номер в другую колонку, тип продукции в третью (при отсутствии этих данных в документе из парсинга).
7. Пакетная конвертация в другой формат (один из:
Access, CSV, Clarion, DBF, DBISAM, DIF, DIFF, DOC, ET, HTML, JPEG, LATEX, Lotus, MHT, ODS, ODT, OTS, PDF, PXL, QPW, RTF, SDC, SLK, SQL, SVG, SYLK, TIFF, TSV, UOF, UOS, VOR, WAB, WB1, WB2, WK1, WK2, WK3, WK4, WKS, WQ1, WQ2, XHTML, XLK, XLS, XLSB, XLSM, XLSX, XLT, XLTM, XLTX, XLW, XML
8. Объединение данных в сводную таблицу (поддержка данных свыше 24 млн. строк).
9. Удаление дублей.
10. Пакетное создание фотографий для каждого товара с наличием индивидуального водяного знака (данные о каждом товаре наносятся на новую фотографию или логотип компании)
11. Размещение товаров через CMS на сайт.
12. Пакетное размещение, ручное РАЗМЕЩЕНИЕ РОБОТОМ на доски объявлений, один товар = одна строка = одно объявление с подробным описанием и ключевыми словами.
13. Создание ключевых слов для SEO (берем название товара, проганяем его через директ, получаем результат наиболее ревалентных запросов по товару.
14. Роботизированное наполнение сайтов, выполненных на конструкторе, где добавление товаров производится в ручную.
15. Автоматизация процессов.
16. Роботизация процессов.
Парсинг интернет магазинов (любой интернет магазин в том числе WB, Wildberries, Ozon, Amazon, Юла...
Парсинг данных с сайтов государственных органов
Парсинг Яндекс Маркета
Парсинг объявлений Avito, HH, недвижимости
Парсинг контента
Парсинг финансовых данных
Парсинг новостей
Парсинг для SEO
Парсинг Google
Парсинг ключевых слов
Парсинг контактов, телефонов, email
Парсинг Яндекс карт, 2Gis, специализированных порталов
Парсинг социальных сетей, ВКонтакте, Facebook, Instagram
Поиск аккаунта в Instagram имея только номер телефона
Поиск объявлений в AVITO по номеру телефона (показывается сколько и каких объявлений было размещено у владельца телефона)
Парсинг любых сайтов
Веб скрапинг
Сбор данных
Систематизация данных
Наполнение интернет магазинов товарами
Big Data
Извлечение данных с любого сайта, интернет магазина, форума, досок объявлений.
Например у Вас интернет магазин или компания по продаже товара (любого)
Извлечение данных с сайтов Ваших поставщиков, с их прайсов, которые находятся у них на сайтах или прилетают к Вам на почту. Настройка маршрута обработки данных и извлекаем их. Более часто компаниям такого типа необходимы данные о товарах, цене, подробном описании, фото, дополнительные файлы для скачивания (например инструкции).
Далее полученные данные можно залить на Ваш сайт, таким образом у Вас будет витрина магазина постоянно обновляться актуальными товарами в большом объеме (несколько миллионов товаров).
Парсинг объектов недвижимости с описанием объекта, фотографией и телефоном. Возможен парсинг как всех объявлений с площадки, так и только тех, где указано что это собственник или по другим параметрам фильтрации.
Создание сводной таблицы из всех полученных данных. Вы получите несколько типов данных.
1. Отдельный файл xls, xlsx, csv по каждому сайту донору
2. Сводный файл где все данные объединены в одну таблицу
Возможен парсинг с иностранных сайтов и автоматическим переводом через Promt.
Анализ прайс листов по всем поставщикам, поиск товаров по минимальным ценам и обновление на Ваш сайт!
От Вас мне необходимо получить тех задание, что именно нужно собрать и с каких сайтов. После предварительного анализа мы Вам сможем сообщить стоимость работ.
Рассмотрю как разовые заказы, так и на постоянной основе.
Могу предоставлять оказанные услуги как от своей организации так и по найму.