MySQL – Backup velikih MyISAM tabela

Ako ste ikada morali da backup-ujete ili prebacujete podatke iz jedne ili više MySQL tabela, znate da se za to koristi mysqldump utility, pomoću kojeg jednostavno podatke iz MySQL-a “dumpujete” u neki mojetabele.sql fajl, koji zatim možete sačuvati kao backup, prebaciti i importovati na neki drugi MySQL server, itd. Ovu proceduru koristio sam milion puta do sada, i ona se generalno svodi na izvršavanje sledećih komandi u linuxu:

export:

mysqldump -udinke -pmojpass -hhostname.prvog.servera ime_baze tabela1 tabela 2 tabelan > dump_fajl.sql

import:

mysql -udinke -pmojpass -hhostname.drugog.servera ime_baze < dump_fajl.sql

Tu i tamo pojavi se problem kada prebacujete dump sa novije verzije MySQL-a na stariju, i tada je poželjno specifirati i odgovarajući compability flag prilikom izvršavanja mysqldump komande (--compatible=name gde name može biti mysql323, mysql40, postgresql, oracle itd.).

Elem, pre nekoliko dana zbog prebacivanja MySQL servera sa jedne lokacije na drugu, morao sam da odradim dump solidno velikih MySQL tabela (10-tak tabela gde je svaka imala preko 2 miliona slogova). Nakon užasavajuće duge procedure dumpa, gzipovanja i scpovanja na drugi server, konačno sam startovao import. Međutim, nakon 3 sata (tri sata) umesto standardne "no news is a good news" poruke, kada sam bacio pogled na status dočekala me je sledeća poruka ...:

[dinke@um-917 ~/public_html]$ mysql -udinke -p325ewfwt23rasf
keyword_discovery < es_miner_data.sql
ERROR 1582 (23000) at line 163833: Duplicate entry '1167548' for key
'PRIMARY'

WTF? Prebacivao sam podatke sa starije verzije na noviju, što znali da import mora proći glatko! Ovo bi trebalo da znači da je MySQL negde nešto pobrljavio sa indexima, i umesto da čekam još 2 sata da se odradi check & repair, odlučujem se da napravim ponovo dump fajl, ovaj put sa ignore opcijom, kako bi svi inserti u dump fajlu bili "insert ignore" tako da u slučaju ovakve greške ne bi došlo do pucanja. Ne preterano pametno, ali podaci nisu extremno osetljivi i mogu da dozvolim luksuz da izgubim desetak slogova, ali ne i desetak sati za import!

Naravno, novi dump, zip, scp ... to je traajalooo ... toliko dugo da sam posle par sati nakon startovanja importa krenuo da mozgam sa administratorom (kuki) oko alternativnih rešenja. A rešenje je bilo jednostavno ali efikasno. Prekopirali smo sve MySQL data fajlove sa jednog servera na drugi (*.MYI, *.MYD i *.frm fajlove), a zatim odradili myisamchk kako bi sredili pomenute tabele, jer nismo smeli da spuštamo server prilikom backup-a što generalno može da prouzrokuje dosta problema (tipa oštećene tabele) ako se na ovaj način backupuju fajlovi.

Sve u svemu, ova operacija prošla je jako brzo (najduže je trajalo kopiranje fajlova sa jednog hosta na drugi), i za manje od pola sata cela procedura bila je završena.

Zaključak do koga smo došli je da je kod velikih tabela zbog dužine trajanja operacije dumpovanje praktično neprihvatljivo kao backup rešenje, i da se samim tim kao jedino rešenje nameće kopiranje MySQL data fajlova. Kod MyISAM tabela to nije nikakav problem, jer su one "platform safe", tj. binarni fajl kreiran na jednoj platformi (recimo *.MYI fajl na linuxu) radiće bez ikakvih problema na drugoj platformi (recimo isti *.MYI fajl na Windowsu).

Google Street View

I taman kad pomislite da vas više ničim ne može iznenaditi – Google to uradi ponovo!

Nova zvezda zove se “Street View” i deo je Google Maps aplikacije. Street view, kao što i sam naziv kaže omogućava vam da se šetate ulicama gradova, rotirate sliku itd. Za sada podrška je ograničena na nekoliko gradova u USA (San Francisko, Las Vegas, Denver, New York, Miami), ali i to je sasvim dovoljno da se oduševite.

Evo nekih od lokacija koje su meni bile Interesantne.

Golden Gate Bridge
Golden Gate Bridge

Las Vegas
Las Vegas

miami_beach.jpg
Miami Beach

ny_central_park.jpg
NY, Central Park

Foxmarks – Bookmark Synchronizer

Ako poput mene koristite više od jednog kompjutera(recimo laptop i vaš kućni Desktop), sigurno ćete pre ili kasnije poželeti da nekako centralizujete vaše bookmarkove. Ako koristite Firefox, rešenje je tu na dohvat ruke – Foxmarks.

foxmarks.gif

Foxmarks ekstenzija vas nakon instaliranja vodi kroz čarobnjak koji vam omogućava da lako otvorite nov foxmarks nalog, a zatim će se vaši bookmarkovi snimiti na server. Nakon toga svaka promena u vašim bookmarkovima će biti transparentno sinhronizovana sa serverom. Nakon što instalirate ektenziju na neki drugi računar(laptop na primer), foxmarks će vam ponuditi sinhronizaciju, gde možete na primer da kombinujete bookmarkove sa oba računara, ili da u potpunosti povučete bookmarkove sa servera itd.

Foxmarks ekstenziju možete downloadovati odavde.