Subscribe feed

У Google File System пастаўлены новы рэкорд па хуткасці перадачы дадзеных

24 лістапада 2008

Гжегож Цажковски, сістэмны інжынер Google у афіцыйным блогу Google сёння паведаміў, што ў эксперыментах з файлавай сістэмай Google File System быў пастаўлены новы рэкорд па хуткасці перадачы дадзеных. 1 Петабайт дадзеных (10 трлн 100-байтных тэкставых файлаў) быў перададзены 4000 кліенцкіх кампутараў за 6 гадзін і 2 хвіліны.

1 петабайт дадзеных дазваляе 12 раз скапіяваць усё змесціва Бібліятэкі Кангрэса ЗША - найбуйнай бібліятэкі ў міры.

"Мы стала эксперыментуем з рознымі варыянтамі арганізацыі дадзеных у лічбавым варыянце. Большасць досведаў дакранаецца MapReduce - ключавога кампанента нашай праграмнай інфраструктуры, якая дазваляе нам запускаць мноства працэсаў адначасова. Цяпер пры стварэнні тэставых умоў для MapReduce базавай адзінкай ужо стаў тэрабайт", піша ён.

Нядаўна ў Google дасягнулі і яшчэ аднаго ўражлівага выніку па трансферы дадзеных - 1 тэрабайт дадзеных пры дапамозе інфраструктуры кампаніі быў перададзены 1000 кліенцкіх кампутараў усяго за 68 секунд. Сартаванне 1 тэрабайта дадзеных і іх перадача 910 кампутарам заняла 209 секунд.

Цажковски таксама адзначыў, што з улікам архітэктуры пошукавай сістэмы Google для захоўвання 1 петабайта дадзеных патрабуецца каля 48 000 цвёрдых кружэлак, прычым у стандартных умовах сістэма функцыянуе з трохкратнай надмернасцю, гэта значыць кожны блок дадзеных прадубляваны тройчы.


рэкамендуем прачытаць таксама

Каментаванне не дазволенае.

Rambler's Top100