Scrapper portalu GSM Arena

Scrapper portalu GSM Arena
Szymon Obrzut
  • Rejestracja: dni
  • Ostatnio: dni
  • Postów: 1
0

Potrzebuję programisty który napisze mi scraper do ściągania bazy danych GSM Arena lub MGSM (najlepiej oba - osobno). Scrapper ma być odporny na zabezpieczenia pokroju "too many requests". Potrzebuję z tych stron regularnie wyciągać aktualizacje bazy dostępnych telefonów. Dla ułatwienia - potrzebuję jedynie marek, modeli i modeli kodowych, bez żadnych innych szczegółów. Na koniec chciałbym to zapisywać do prostego pliku CSV z trzema kolumnami - pierwsza kolumna (w której wartości będą się powtarzać bo telefonów samsung mamy tysiące) w której będzie marka, druga kolumna w której będzie unikalny model telefonu przypisany do pierwszej kolumny czyli marki i trzecia w której będzie nazwa kodowa modelu (nazwa kodowa nie jest wymagana jeśli nie ma jej na gsmarena/mgsm)
Przykład:

Kopiuj
SAMSUNG | A52 | SM-A526B/DS
SAMSUNG | S8 | SM-G950F
HUAWEI | P20 PRO | CLT-L29
XIAOMI | REDMI NOTE 10 PRO | <no codename>

itd

w csv mają być wszystkie istniejące modele znajdujące się w bazie gsmarena/mgsm

Proszę o propozycje, rozwiązania i wyceny.

axelbest
  • Rejestracja: dni
  • Ostatnio: dni
  • Lokalizacja: Warszawa
  • Postów: 2255
0

Polecam poczytać o tej firmie i ich robocie - Cześć Wam! Trochę czasu minę...

Zarejestruj się i dołącz do największej społeczności programistów w Polsce.

Otrzymaj wsparcie, dziel się wiedzą i rozwijaj swoje umiejętności z najlepszymi.