Subscribe feed

Google цалкам пераробіць сваю файлавую сістэму

14 жніўня 2009

Google у рамках праекту Caffeine, улучальнага ў сябе аптымізацыю інфраструктуры пошукавіка, цалкам пераробіць файлавую сістэму Google File System (GFS), піша The Register са спасылкай супрацоўніка Google Шона Квинлана (Sean Quinlan).

Google File System была распрацаваная ў канцы дзевяностых гадоў мінулага стагоддзі. Яе стваральнікі не меркавалі, якую нагрузку ёй маецца быць вытрымоўваць у наступныя гады. Акрамя таго, GFS была аптымізаваная для пакетнай апрацоўкі дадзеных, бо Google у першую чаргу неабходна было захоўваць і індэксаваць атрыманую ад пошукавых робатаў.

У спецыфікацыі GFS прама напісана, што час водгуку на запыт меней важна, чым забеспячэнне высокай прапускной здольнасці. Сучасныя прыкладанні Google, такія як Gmail і YouTube, наадварот, патрабуюць хуткага водгуку на дзеянні карыстача.

GFS складаецца з галоўнага вузла і блокавых сервераў (master node і chunkservers адпаведна). Галоўны вузел раздае запыты да сервераў, а тыя вяртаюць блокі дадзеных. Адным з недахопаў такой сістэмы з'яўляецца наяўнасць толькі аднаго галоўнага вузла. Пры адмове вузла сэрвіс можа апынуцца недаступным на доўгі час. Дапрацоўваючы GFS, распрацоўнікам атрымалася скараціць гэты час з некалькіх гадзін да 10 секунд.

10 жніўня Google папытаў уладальнікаў сайтаў пратэставаць яго новы пошукавы механізм. Пошукавік асабліва цікавілі адрозненні паміж цяперашняй і новай версіяй, бо алгарытм змяняўся малаважна, а вялікую частку працы заняла аптымізацыя механізму. Умоўны назоў праекту, які павінен зрабіць пошук хутчэй і надзейней - Caffeine. Калі новы механізм заменіць стары, невядома.


рэкамендуем прачытаць таксама

Каментаванне не дазволенае.

Rambler's Top100