Тест сайта на сервере
требуется протестировать функционал сайта https://www.opensanctions.org/ (доступен через vpn), а именно:
1. Установите и соберите Open Sanctions на сервере
2. Проверьте, работают ли функции скрапинга для сбора данных с всех веб-сайтов источников (54 веб-сайта).
3. Проверьте наличие функции "удаления дубликатов записей" или "связывания похожих записей" в исходном коде репозитория на GitHub.
4. Проверьте, можно ли запускать исходный код (сбор данных) с помощью cron job или уже существующей функции.
5. Проверьте, есть ли в программе функция "связывания" общих записей (т.е. записей, которые появляются на нескольких веб-сайтах).
6. Предоставьте пример 100 строк вывода со всеми полями из каждой из 54 баз данных, с которых производится скрапинг (в формате CSV или Excel, чтобы мы могли его прочитать).
7. Предоставьте любые скриншоты, показывающие установку, скрапинг и результаты вывода, а проанализируйте, работает ли их исходный код надежно и подходит ли он для интеграции их инструментов скрапинга с программным обеспечением третьей стороны
1. Установите и соберите Open Sanctions на сервере
2. Проверьте, работают ли функции скрапинга для сбора данных с всех веб-сайтов источников (54 веб-сайта).
3. Проверьте наличие функции "удаления дубликатов записей" или "связывания похожих записей" в исходном коде репозитория на GitHub.
4. Проверьте, можно ли запускать исходный код (сбор данных) с помощью cron job или уже существующей функции.
5. Проверьте, есть ли в программе функция "связывания" общих записей (т.е. записей, которые появляются на нескольких веб-сайтах).
6. Предоставьте пример 100 строк вывода со всеми полями из каждой из 54 баз данных, с которых производится скрапинг (в формате CSV или Excel, чтобы мы могли его прочитать).
7. Предоставьте любые скриншоты, показывающие установку, скрапинг и результаты вывода, а проанализируйте, работает ли их исходный код надежно и подходит ли он для интеграции их инструментов скрапинга с программным обеспечением третьей стороны
Срок:
22.07.2023
Цена:
5000