Temat: stworzenie bazy ze stron

Za zadanie mam stworzenie bazy sql na podstawie pobranych z roznych stron danych - bedą to głównie wyniki z tabel sportowych, ale też mniej regularne dane. Dane te nastepnie chce umiescic w sql tabelach do dalszej analizy - najpewniej bedzie to mssql, bo tsql znam najlepiej, ale nie wykluczam innych opcji.

Co ważne - dane te muszą być regularnie uaktualniane. Czy w związku z tym są jakies wyspecjalizowane programy do takich celów - w których mozna by napisać jakis np skrypt php do wyciągania danych a on umieszczał by mi je w bazie i co najważniejsze mógł na bieżąco powtarzać ten proces. Gdzieś obiło mi się pojęcie wrapperów, ale nie wiem czy to w moim przypadku będzie miało zastosowanie.

Temat: stworzenie bazy ze stron

Nie bardzo wiem po co ci tutaj TSQL zaprzęgać ;) Jeżeli chcesz parsować określony serwis cyklicznie, to lepiej robić to po stronie hostingu, bo z reguły łącze jest nieporównywalnie szybsze a od 1000 podstron zaczyna mieć to znaczenie. Jak będziesz wykonywał tego typu operacje zbyt często, to jest duża szansa, że cię zablokują.
Największą dostępność masz do PHP a co się z tym wiąże do mySQL ( ew. pgSQL ).
Regex Coach + CRON + http://dev.mysql.com/doc/refman/5.0/en/insert-on-dupli...
powinno dać radę w większości przypadków pod warunkiem, że dobrze UNIQUE INDEX założysz.

R.Rafał W. edytował(a) ten post dnia 02.12.09 o godzinie 16:05

Temat: stworzenie bazy ze stron

Możesz w tym celu wykorzystać CURL.