konto usunięte

Temat: Ladowanie duzych SQLi

Mam pliki *.sql
ich pojemnosci wachaja sie od 1MB do xGB.
w jaki sposob najlepiej zaladowac te najwieksze?

Temat: Ladowanie duzych SQLi

Wojciech J:
Mam pliki *.sql
ich pojemnosci wachaja sie od 1MB do xGB.
w jaki sposob najlepiej zaladowac te najwieksze?

A co w nich jest ?

Dane ?
Dane plus DML ?
a moze zapytania ? ;)

Co prawda w reklamie Plusa naprawiaja szklane kule ale moja dalej nie dziala ;)

pozdrawiam,
Marcin

konto usunięte

Temat: Ladowanie duzych SQLi

same inserty :D
moja kula dziala :D

kula podpowiedziala mi kolejne pytanie:
do jakiej bazy, hehe

do MySQL :PWojciech J edytował(a) ten post dnia 23.06.09 o godzinie 16:05

konto usunięte

Temat: Ladowanie duzych SQLi

przerobić do postaci bez insertów i załadować jako pliki TXT
jest do tego nawet jakiś tool http://dev.mysql.com/doc/refman/5.0/en/mysqlimport.html

Temat: Ladowanie duzych SQLi

Możesz też pokroić na kawałki i ładować na raty lub załadować na raz za pomocą programu Navicat, który pozwala na jednorazowy import dużej ilości danych.

konto usunięte

Temat: Ladowanie duzych SQLi

Piotr Wittchen:
Możesz też pokroić na kawałki i ładować na raty lub załadować na raz za pomocą programu Navicat, który pozwala na jednorazowy import dużej ilości danych.

Ciezko sobie wyobrazam ciecie 6GB-owego pliku.
Sprobuje navicatem najpierw lokalnie, pozniej przefiltruje co potrzebuje i pewnie bedzie to duza mniejsza ilosc danych :DWojciech J edytował(a) ten post dnia 23.06.09 o godzinie 16:32

Temat: Ladowanie duzych SQLi

Ech... nie zwróciłem uwagi na podaną objętość tych plików i miałem w głowie co najwyżej kilkadziesiąt MB ;-).

ps. Co to za baza o pojemności 6 GB? :-P Kilkadziesiąt MB, to już jest mnóstwo rekordów. Sprawdź, czy Ci się nic nie duplikuje ;-).Piotr Wittchen edytował(a) ten post dnia 23.06.09 o godzinie 21:33
Tomasz G.

Tomasz G. programista,
konstruktor
elektronik

Temat: Ladowanie duzych SQLi

U nas baza 1GB osiąga po 3 miesiącach pracy :) gromadzi dane pomiarowe (temperatury, ciśnienie, wilgotność)
da się, tyle że organizacja tych danych jest bardzo prosta :)Tomasz G. edytował(a) ten post dnia 23.06.09 o godzinie 22:43
Michał Jarosz

Michał Jarosz Frontend Developer &
Team Leader

Temat: Ladowanie duzych SQLi

Piotr Wittchen:
ps. Co to za baza o pojemności 6 GB? :-P Kilkadziesiąt MB, to już jest mnóstwo rekordów.

Można by to pytanie sparafrazować do postaci "Co to za baza, co nie ma gigabajta?" :P

Temat: Ladowanie duzych SQLi

Michał Jarosz:
Piotr Wittchen:
ps. Co to za baza o pojemności 6 GB? :-P Kilkadziesiąt MB, to już jest mnóstwo rekordów.

Można by to pytanie sparafrazować do postaci "Co to za baza, co nie ma gigabajta?"
1 gigowa baza, to może być 13 milionów 10 wymiarowych wektorów o bardzo skomplikowanych zależnościach albo kilka blobów z grafiką.
nie warto liczyć bazy w gigabajtach.
Maciej W.

Maciej W. a czy ty masz swój
ręcznik?...

Temat: Ladowanie duzych SQLi

mysqlFront - w miarę działa - parę godzin może Ci zejść. Możesz też napisać sobie skrypt który sam to wrzuci jak należy.

konto usunięte

Temat: Ladowanie duzych SQLi

a nie lepiej poprostu przez konsole to wrzucic (lokalnie oczywiscie)?

konto usunięte

Temat: Ladowanie duzych SQLi

Ładowałem do MySQL pliki (dumpy z backupu), które miały 16GB, lokalnie (plik wrzucany ftpem), z konsoli właśnie, z użyciem "source" - trwało to chwilę ale działało bez problemu.
Bartosz Ślepowronski

Bartosz Ślepowronski Problem? Jaki
problem?

Temat: Ladowanie duzych SQLi

No wlasnie nie rozumiem dokladnie co jest problemem - jest jakies okienko czasowe na zaladowanie tych plikow czy jak? Ladowanie ma byc cykliczne? Bo w kazdym innym przypadku odpowiedz na pytanie "jak to zaladowac" brzmi "normalnie" :)

konto usunięte

Temat: Ladowanie duzych SQLi

Broń Boże .... kto używa mysql i bazy 6 GB. Samobójca czy amator?
Bartosz Ślepowronski

Bartosz Ślepowronski Problem? Jaki
problem?

Temat: Ladowanie duzych SQLi

Google?
Michał Jarosz

Michał Jarosz Frontend Developer &
Team Leader

Temat: Ladowanie duzych SQLi

Każdy, kto ma taką potrzebę i potrafił sobie serwer skonfigurować.

konto usunięte

Temat: Ladowanie duzych SQLi

Maciej B.:
Broń Boże .... kto używa mysql i bazy 6 GB. Samobójca czy amator?
Jakaś argumentacja byłaby mile widziana. Nie to żebym był złośliwy, chciałbym się dowiedzieć czegoś nowego.

konto usunięte

Temat: Ladowanie duzych SQLi

Bartosz S:
Google?
Google nie używa mysql, tylko google-mysql. Pół bazy przepisane na własne potrzeby.

konto usunięte

Temat: Ladowanie duzych SQLi

Paweł Dobrowolski:
Maciej B.:
Broń Boże .... kto używa mysql i bazy 6 GB. Samobójca czy amator?
Jakaś argumentacja byłaby mile widziana. Nie to żebym był złośliwy, chciałbym się dowiedzieć czegoś nowego.


Mysql jest dobry, jak budujesz stronę internetową np. bloga lub portal społecznościowy dla kolegów z szkoły.

Do produkcji, całkowicie bezużyteczny. Dodatkowo pseudo-opensource, licencja nie nadaje się dla dużych firm.

Dłuższy temat. Polecam debatę z kimś w 4 oczy.

Następna dyskusja:

Systemy do przechowywania i...




Wyślij zaproszenie do