✖


Jump to content

Дата-центры Google

Бывший дата-центр Google в Эмсхавене , Нидерланды
Внешние видео
Логотип YouTube
Ютуб
значок видео Обзорный тур по дата-центру Google

Центры обработки данных Google — это крупные обработки данных центры , которые Google использует для предоставления своих услуг . Они сочетают в себе большие диски, компьютерные узлы, организованные в рядах стоек, внутренние и внешние сети, средства контроля окружающей среды (в основном контроль охлаждения и увлажнения) и операционное программное обеспечение (особенно касается балансировки нагрузки и отказоустойчивости ).

нет Официальных данных о том, сколько серверов находится в центрах обработки данных Google, Gartner , но в отчете за июль 2016 года подсчитали, что у Google на тот момент было 2,5 миллиона серверов. Это число меняется по мере того, как компания расширяет мощности и обновляет свое оборудование. [1]

Локации

[ редактировать ]

Расположение различных центров обработки данных Google по континентам следующее: [2] [3]

Континент Расположение Гео Расположение продуктов Облачное расположение Хронология Описание
Северная Америка Аркола (Вирджиния), США 38 ° 56'35,99 "с.ш. 77 ° 31'27,61" з.д.  /  38,9433306 ° с.ш. 77,5243361 ° з.д.  / 38,9433306; -77,5243361 Округ Лаудон Северная Вирджиния (США-Восток4) 2017 - объявлено [4] [5]
Северная Америка Атланта (Джорджия), США 33 ° 44'59,04 дюйма с.ш. 84 ° 35'5,33 дюйма з.д.  /  33,7497333 ° с.ш., 84,5848139 ° з.д.  / 33,7497333; -84.5848139 округ Дуглас - 2003 г. – запущен 350 сотрудников
Южная Америка Серрильос, Сантьяго, Чили 33 ° 31'14 "ю.ш. 70 ° 43'18" з.д.  /  33,520515 ° ю.ш. 70,721695 ° з.д.  / -33,520515; -70,721695 [6] - Сантьяго (Южная Америка-Запад1) 2020 - объявлено [7]

2021 г. - запущен [8]

Азия Округ Чанхуа, Тайвань 24 ° 08'18,6 "N 120 ° 25'32,6" E  /  24,138500 ° N 120,425722 ° E  / 24,138500; 120,425722 Уезд Чанхуа Тайвань

(Азия-Восток1)

2011 г. - объявлено

2013 г. - запущен

60 сотрудников
Северная Америка Кларксвилл (Теннесси), США 36 ° 37'16 "N 87 ° 15'47" W  /  36,6211599 ° N 87,2630735 ° W  / 36,6211599; -87.2630735 Округ Монтгомери - 2015 г. - объявлено
Северная Америка Колумбус (Огайо), США - Колумбус (США-Восток5) 2022 г. - запущен [9]
Северная Америка Каунсил-Блафс (Айова), США 41°13′17.7″N 95°51′49.92″W  /  41.221583°N 95.8638667°W  / 41.221583; -95.8638667 Каунсил-Блафс 2007 г. - объявлено

2009 г. - завершен первый этап

2012 и 2015 годы - расширено

130 сотрудников
Северная Америка Каунсил-Блафс (Айова), США 41°10′06″N 95°47′46″W  /  41.1682533°N 95.7961246°W  / 41.1682533; -95.7961246 Айова (центр США1)
Азия Дели, Индия - Дели (Азия-Юг2) 2020 - объявлено

2021 г. - запущен [10]

Средний Восток Доха, Катар - Доха (центральный1) 2023 г. - запущен [11]
Европа Дублин, Ирландия 53 ° 19'12,39 дюйма с.ш. 6 ° 26'31,43 дюйма з.д.  /  53,3201083 ° с.ш. 6,4420639 ° з.д.  / 53,3201083; -6,4420639 Дублин - 2011 г. - объявлено

2012 г. - запущен

150 сотрудников [12]
Европа Эмсхавен, Нидерланды 53 ° 25'31 ″ с.ш. 6 ° 51'44 ″ в.д.  /  53,4252171 ° с.ш. 6,8622574 ° в.д.  / 53,4252171; 6.8622574 Эмсхавен 2014 г. - объявлено

2016 г. - запущен

2018, 2019 - расширение

200 сотрудников
Европа Франкфурт, Германия 50 ° 07'21 ″ с.ш. 8 ° 58'27 ″ в.д.  /  50,1226299 ° с.ш. 8,9741678 ° в.д.  / 50,1226299; 8.9741678 [13] - Франкфурт (Европа-Запад3) 2022 г. - расширен [14]
Европа Фредерисия, Дания 55 ° 33'29,5 "с.ш. 9 ° 39'20,8" в.д.  /  55,558194 ° с.ш. 9,655778 ° в.д.  / 55,558194; 9,655778 Фредерисия - 2018 г. - объявлено [15]

2020 г. - запущен

Затраты на строительство 600 миллионов евро
Европа Глин, Эно, Бельгия 50 ° 28'09,6 "N 3 ° 51'55,7" E  /  50,469333 ° N 3,865472 ° E  / 50,469333; 3,865472 Сен-Гислен Бельгия (Европа-Запад1) 2007 г. - объявлено

2010 г. - запущен

12 сотрудников
Европа Хамина, Финляндия 60 ° 32'11,68 "с.ш. 27 ° 7'1,21" в.д.  /  60,5365778 ° с.ш. 27,1170028 ° в.д.  / 60,5365778; 27.1170028 Хамина Финляндия

(Европа-север1)

2009 г. - объявлено

2011 г. – завершен первый этап.

2022 г. - расширение

6 зданий, 400 сотрудников [16]
Северная Америка Хендерсон (Невада), США 36 ° 03'20 "N 115 ° 00'37" W  /  36,0556248 ° N 115,0102258 ° W  / 36,0556248; -115.0102258 Хендерсон Лас-Вегас (США-Запад4) 2019 - объявлено [17]

2020 г. - запущен

64 акра; Затраты на строительство 1,2 миллиарда долларов [18] [19]
Азия Гонконг, Гонконг - Гонконг (Азия-Восток2) 2017 - объявлено [20]

2018 г. - запущен [21]

Азия Инзай, Япония 35 ° 49'04 "N 140 ° 07'57" E  /  35,8177804 ° N 140,1323916 ° E  / 35,8177804; 140.1323916 Операция - 2023 г. - запущен
Азия Джакарта, Индонезия - Джакарта (Азия-Юго-Восток2) 2020 г. - запущен [22]
Азия Кото-Ку, Токио, Япония - Токио

(Азия-Северо-Восток1)

2016 г. - запущен [23]
Северная Америка Лисбург (Вирджиния), США 39 ° 3'6,38 дюйма с.ш. 77 ° 32'20,38 дюйма з.д.  /  39,0517722 ° с.ш. 77,5389944 ° з.д.  / 39,0517722; -77,5389944 Округ Лаудон Северная Вирджиния (США-Восток4) 2017 - объявлено [4] [5]
Северная Америка Ленуар (Северная Каролина), США 35 ° 53'54,78 "N 81 ° 32'50,58" W  /  35,8985500 ° N 81,5473833 ° W  / 35,8985500; -81,5473833 Ленуар - 2007 г. - объявлено

2009 г. - запущен

более 110 сотрудников
Азия Лок Янг Вэй, Пионер, Сингапур 1 ° 19'26 "N 103 ° 41'36" E  /  1,3239859 ° N 103,693253 ° E  / 1,3239859; 103,693253 [24] Сингапур Сингапур (Азия-Юго-Восток1) 2022 г. - запущен
Европа Лондон, Великобритания - Лондон

(Европа-Запад2)

2017 г. - запущен [25]
Северная Америка Лос-Анджелес (Калифорния), США - Лос-Анджелес (США-Запад2)
Европа Мадрид, Испания 40 ° 31'10 "N 3 ° 20'27" W  /  40,5195333 ° N 3,3409366 ° W  / 40,5195333; -3,3409366 - Мадрид (Европа-Юго-Запад1) 2022 г. - запущен [26]
Тихий океан Мельбурн, Австралия - Мельбурн

(Австралия-Юго-Восток2)

2021 г. - запущен [27]
Европа Мидденмер, Северная Голландия, Нидерланды 52 ° 47'24 "N 5 ° 01'45" E  /  52,7901053 ° N 5,0292193 ° E  / 52,7901053; 5.0292193 [28] Мидденмер Нидерланды (Европа-Запад4) 2019 - объявлено [29]
Северная Америка Мидлотиан (Техас), США 32 ° 26'35 "с.ш. 97 ° 03'44" з.д.  /  32,443170 ° с.ш. 97,062324 ° з.д.  / 32,443170; -97.062324 Мидлотиан Даллас (США-Юг1) 2019 - объявлено

2022 г. - запущен [30]

375 акров; Затраты на строительство 600 миллионов долларов [31]
Европа Милан, Италия - Милан (Европа-Запад8) 2022 г. - запущен [32]
Северная Америка Монкс Корнер (Южная Каролина), США 33 ° 03'50,8 дюйма с.ш. 80 ° 02'36,1 дюйма з.д.  /  33,064111 ° с.ш. 80,043361 ° з.д.  / 33,064111; -80.043361 Округ Беркли Южная Каролина (США-Восток1) 2007 г. - запущен

2013 г. - расширен

150 сотрудников
Северная Америка Монреаль, Квебек, Канада [33] - Монреаль (Северная Америка-северо-восток1) 2018 г. - запущен [34] 62,4 га; Затраты на строительство 600 миллионов долларов [35]
Азия Мумбаи, Индия - Мумбаи (Южная Азия1) 2017 г. - запущен [36]
Северная Америка Нью-Олбани (Огайо), США 40 ° 03'41 ″ с.ш. 82 ° 45'31 ″ з.д.  /  40,0613352 ° с.ш. 82,7586278 ° з.д.  / 40,0613352; -82,7586278 Нью-Олбани - 2019 - объявлено 400 акров; Затраты на строительство 600 миллионов долларов [37] [38]
Азия Осака, Япония - Осака

(Азия-Северо-Восток2)

2019 г. - запущен [39]
Южная Америка Осаско, Сан-Паулу, Бразилия - Сан-Паулу (Южная Америка-Восток1) 2017 г. - запущен [40]
Северная Америка Papillion (NE), USA 41 ° 08'00 "с.ш. 96 ° 08'39" з.д.  /  41,1332915 ° с.ш. 96,144178 ° з.д.  / 41,1332915; -96.144178 Папильон - 2019 - объявлено 275 акров; Затраты на строительство 600 миллионов долларов [41] [42]
Европа Париж, Франция - Париж (Европа-Запад9) 2022 г. - запущен [43]
Северная Америка Прайор-Крик (ОК), США 36°14′28.1″N 95°19′48.22″W  /  36.241139°N 95.3300611°W  / 36.241139; -95.3300611 Округ Мэйс - 2007 г. - объявлено

2012 г. - расширен

более 400 сотрудников, [44] земля в индустриальном парке MidAmerica
Южная Америка Киликура, Сантьяго, Чили 33 ° 21'30,5 "ю.ш., 70 ° 41'50,4" з.д.  / 33,358472 ° ю.ш., 70,697333 ° з.д.  / -33,358472; -70,697333 Киликура - 2012 г. - объявлено

2015 г. - запущен

ожидается до 20 сотрудников. В 2018 году было объявлено об инвестиционном плане на миллион долларов по увеличению мощности в Киликуре. [45]
Северная Америка Рено (Невада), США 39 ° 30'04 "N 119 ° 25'46" W  /  39,5011558 ° N 119,4295537 ° W  / 39,5011558; -119,4295537 Стори Каунти - 2017 г. — куплено 1210 акров земли в промышленном центре Тахо-Рино. [46]

2018 г. - объявлено

2018, ноябрь — проект одобрен штатом Невада. [47] [48]

Северная Америка Солт-Лейк-Сити (Юта), США - Солт-Лейк-Сити (США-Запад3) 2020 г. - запущен [49]
Азия Сеул, Южная Корея - Сеул

(Азия-Северо-Восток3)

2020 г. - запущен [50]
Тихий океан Сидней, Австралия - Сидней

(Австралия-Юго-Восток1)

2017 г. - запущен [51]
Средний Восток Тель-Авив, Израиль [52] - Тель-Авив (me-west1) 2022 г. - запущен [53]
Северная Америка Даллес (Орегон), США 45 ° 37'57,04 дюйма с.ш. 121 ° 12'8,16 дюйма з.д.  /  45,6325111 ° с.ш. 121,2022667 ° з.д.  / 45,6325111; -121.2022667 Даллес Орегон (США-Запад1) 2006 г. - запущен 80 штатных сотрудников
Северная Америка Торонто, Канада - Торонто (Северная Америка-северо-восток2) 2021 г. - запущен [54]
Европа Турин, Италия 45 ° 08'48 "N 7 ° 44'32" E  /  45,146729 ° N 7,742147 ° E  / 45,146729; 7.742147 - Турин (Европа-Запад12) 2023 г. - запущен [55]
Южная Америка Винхедо, Сан-Паулу, Бразилия Сан-Паулу (Южная Америка-Восток1)
Европа Варшава, Польша - Варшава (центральная Европа2) 2019 - объявлено

2021 г. - запущен [56]

Азия Венья, Джуронг Вест, Сингапур 1 ° 21'04,8 "N 103 ° 42'35,2" E  /  1,351333 ° N 103,709778 ° E  / 1,351333; 103,709778 Сингапур Сингапур (Азия-Юго-Восток1) 2011 г. - объявлено

2013 г. - запущен

2015 г. - расширен

Северная Америка Вдовс-Крик (Бриджпорт) (Алабама), США 34 ° 54'48,4 "N 85 ° 44'53,1" W  /  34,913444 ° N 85,748083 ° W  / 34,913444; -85,748083 [57] Джексон Каунти - 2018 год – прорыв
Европа Цюрих, Швейцария 47 ° 26'45 "N 8 ° 12'39" E  /  47,4459257 ° N 8,2109085 ° E  / 47,4459257; 8.2109085 [58] - Цюрих (Европа-Запад6) 2018 г. - объявлено

2019 г. - запущен [59]

Европа Австрия 2022 г. - объявлено [60]
Европа Берлин, Германия [61] Берлин (Европа-Запад10) 2021 г. - объявлено [62] 2023 август - запущен [63]
Средний Восток Даммам, Саудовская Аравия 2021 г. - объявлено [64]
Европа Афины, Греция 2022 г. - объявлено [60]
Северная Америка Канзас-Сити, Миссури 2019 - объявлено [65]
Средний Восток Кувейт 2023 г. - объявлено [66]
Азия Малайзия 2022 г. - объявлено [67]
Тихий океан Окленд, Новая Зеландия 2022 г. - объявлено [67]
Европа Осло, Норвегия 2022 г. - объявлено [60]
Северная Америка Керетаро, Мексика 2022 г. - объявлено [68]
Африка Йоханнесбург, Южная Африка Йоханнесбург (Африка-Юг1) 2022 г. - объявлено [60] 2024 г. - запущен
Европа Швеция 2022 г. - объявлено [60]
Азия Тайнань, Тайвань - Тайвань

(Азия-Восток1)

2019 сентябрь - объявлено [69] [70] [71]
Азия Таиланд 2022 г. - объявлено [67]
Азия Округ Юньлинь, Тайвань - Тайвань (Азия-Восток1) 2020 сентябрь - объявлено [72]
Европа Уолтем-Кросс, Хартфордшир, Великобритания 51 ° 41'44 "N 0 ° 02'55" W  /  51,695666 ° N 0,048728 ° W  / 51,695666; -0,048728 2024 Январь - объявлено [73]

Аппаратное обеспечение

[ редактировать ]

Оригинальное оборудование

[ редактировать ]
Первая серверная стойка Google, около 1998 г.

Исходное оборудование (около 1998 года), которое использовалось Google, когда оно располагалось в Стэнфордском университете, включало: [74]

  • Sun Microsystems Ultra II с двумя процессорами по 200 МГц и 256 МБ памяти оперативной . Это была основная машина оригинальной системы Backrub .
  • 2 двойных сервера Pentium II с тактовой частотой 300 МГц, подаренные Intel , они включали 512 МБ ОЗУ и 10 жестких дисков по 9 ГБ между ними. Именно по ним и шел основной поиск.
  • F50 IBM RS/6000, подаренный IBM , включал 4 процессора, 512 МБ памяти и 8 × 9 ГБ жестких дисков.
  • Две дополнительные коробки включали в себя 3 жестких диска по 9 ГБ и 6 жестких дисков по 4 ГБ соответственно (исходное хранилище для Backrub). Они были прикреплены к Sun Ultra II.
  • Блок расширения SSD-диска с еще одним жестким диском 8 × 9 ГБ, подаренным IBM.
  • Самодельный дисковод, в котором находились 10 SCSI емкостью 9 ГБ. жестких дисков

Производственное оборудование

[ редактировать ]

По состоянию на 2014 год Google использовал сильно модифицированную версию Debian Linux . В 2013 году они постепенно перешли с системы на базе Red Hat. [75]

Цель настройки — приобрести поколения процессоров, которые предлагают наилучшую производительность за доллар, а не абсолютную производительность. Как это измеряется, неясно, но, скорее всего, сюда будут включены эксплуатационные расходы всего сервера, а энергопотребление ЦП может быть существенным фактором. [76] Серверы по состоянию на 2009–2010 годы представляли собой изготовленные на заказ системы с открытым верхом, содержащие два процессора (каждый с несколькими ядрами). [77] ), значительный объем оперативной памяти, распределенный по 8 слотам DIMM, в которых размещены модули DIMM двойной высоты, и как минимум два жестких диска SATA, подключенных через нестандартный блок питания размера ATX. [78] Серверы были с открытым верхом, поэтому в стойку можно было поместить больше серверов. Согласно CNET и книге Джона Хеннесси , каждый сервер имел новую 12-вольтовую батарею для снижения затрат и повышения энергоэффективности. [77] [79]

По данным Google, электрическая мощность их глобального центра обработки данных колеблется от 500 до 681 мегаватт . [80] [81] В 2008 году совокупная вычислительная мощность этих серверов могла достигать от 20 до 100 петафлопс . [82]

Топология сети

[ редактировать ]

Подробная информация о всемирных частных сетях Google не является общедоступной, но публикации Google [83] [84] ссылайтесь на отчет «Atlas Top 10», в котором Google занимает третье место по величине интернет-провайдера после уровня 3 .

Чтобы управлять такой большой сетью с прямыми подключениями к как можно большему количеству интернет-провайдеров с минимально возможными затратами, Google придерживается очень открытой политики пиринга . [85]

На этом сайте мы видим, что доступ к сети Google можно получить из 67 общедоступных точек обмена и 69 различных мест по всему миру. По состоянию на май 2012 года у Google было 882 Гбит/с общедоступного подключения (не считая соглашений о частном пиринге, которые Google заключил с крупнейшими интернет-провайдерами). Эта общедоступная сеть используется для распространения контента среди пользователей Google, а также для сканирования Интернета для создания поисковых индексов.Частная сторона сети является секретом, но недавнее раскрытие информации от Google [86] указывают, что они используют специально построенные коммутаторы-маршрутизаторы с большим основанием (с емкостью порта 128 × 10 Gigabit Ethernet ) для глобальной сети . Запустив не менее двух маршрутизаторов на центр обработки данных (для резервирования), можно сделать вывод, что сеть Google масштабируется в диапазоне терабит в секунду (при двух полностью загруженных маршрутизаторах двухсекционная пропускная способность составляет 1280 Гбит/с).

Эти специальные коммутаторы-маршрутизаторы подключаются к устройствам DWDM для соединения центров обработки данных и точек присутствия (PoP) через темное оптоволокно .

С точки зрения центра обработки данных сеть начинается на уровне стойки, где 19-дюймовые стойки изготавливаются по индивидуальному заказу и содержат от 40 до 80 серверов (от 20 до 40 серверов высотой 1 U с каждой стороны, а новые серверы представляют собой системы для монтажа в стойку 2U). [87] В каждой стойке имеется коммутатор Ethernet ). Серверы подключаются через Ethernet- канал 1 Гбит/с к коммутатору верхней части стойки (TOR). Затем коммутаторы TOR подключаются к коммутатору гигабитного кластера с использованием нескольких гигабитных или десятигигабитных восходящих каналов. [88] Сами коммутаторы кластера соединены между собой и образуют структуру межсоединений центра обработки данных (скорее всего, с использованием конструкции «стрекозы», а не классической схемы «бабочка» или «плоской бабочки»). [89] ).

С точки зрения эксплуатации, когда клиентский компьютер пытается подключиться к Google, несколько DNS-серверов разрешают www.google.com на несколько IP-адресов с помощью политики циклического перебора . Более того, это действует как первый уровень балансировки нагрузки и направляет клиента в разные кластеры Google. Кластер Google состоит из тысяч серверов , и как только клиент подключается к серверу, выполняется дополнительная балансировка нагрузки для отправки запросов на наименее загруженный веб-сервер. Это делает Google одной из крупнейших и наиболее сложных сетей доставки контента . [90]

У Google есть множество центров обработки данных, разбросанных по всему миру. По меньшей мере 12 крупных дата-центров Google расположены в США. Крупнейшие известные центры расположены в Даллесе, штат Орегон ; Атланта, Джорджия ; Рестон, Вирджиния ; Ленуар, Северная Каролина ; и Монкс Корнер, Южная Каролина . [91] В Европе крупнейшие известные центры находятся в Эмсхафене и Гронингене в Нидерландах и Монсе . Бельгии в [91] Дата-центр Google в Океании расположен в Сиднее , Австралия . [92]

Топология сети центра обработки данных

[ редактировать ]

Для поддержки отказоустойчивости , увеличения масштаба центров обработки данных и размещения коммутаторов с низким основанием Clos . в прошлом Google применяла различные модифицированные топологии [93]

Проект 02

[ редактировать ]
Дата-центр Google в Даллесе, штат Орегон

Один из крупнейших дата-центров Google расположен в городке Даллес, штат Орегон , на реке Колумбия , примерно в 80 милях (129 км) от Портленда . Комплекс под кодовым названием «Проект 02» был построен в 2006 году и имеет размер примерно двух полей для американского футбола , с . четырехэтажными градирнями [94] [95] Это место было выбрано для того, чтобы воспользоваться преимуществами недорогой гидроэлектроэнергии и задействовать большой избыток волоконно -оптического кабеля в регионе, оставшийся после бума доткомов . Проект сайта появился в 2008 году. [96]

Бумажная фабрика Сумма

[ редактировать ]

В феврале 2009 года Stora Enso объявила, что продала бумажную фабрику Summa в Хамине , Финляндия, компании Google за 40 миллионов евро. [97] [98] Google инвестировала 200 миллионов евро в строительство центра обработки данных и объявила о дополнительных инвестициях в 150 миллионов евро в 2012 году. [99] [100] Google выбрал это место из-за наличия и близости возобновляемых источников энергии. [101]

Плавающие дата-центры

[ редактировать ]
См. также: Баржи Google

В 2013 году пресса сообщила о существовании плавучих центров обработки данных Google вдоль побережий штатов Калифорния ( здание 3 острова сокровищ ) и Мэн. Проект разработки держался в строжайшей тайне. Центры обработки данных имеют длину 250 футов, ширину 72 фута и глубину 16 футов. Патент на технологию охлаждения океанских центров обработки данных был куплен Google в 2009 году. [102] [103] (вместе с патентом на корабельный центр обработки данных с использованием волновой энергии в 2008 г.) [104] [105] ). Вскоре после этого Google заявил, что две массивные и тайно построенные инфраструктуры были просто «интерактивными учебными центрами, [...] пространством, где люди могут узнавать о новых технологиях». [106]

Google остановила работы над баржами в конце 2013 года и начала их продажу в 2014 году. [107] [108]

Программное обеспечение

[ редактировать ]

Большая часть программного обеспечения , которое Google использует на своих серверах, была разработана собственными силами. [109] По словам известного сотрудника Google, C++ , Java , Python и (в последнее время) Go имеют преимущество перед другими языками программирования. [110] Например, серверная часть Gmail написана на Java, а серверная часть Google Search — на C++. [111] Google признал, что Python играл важную роль с самого начала и продолжает играть эту роль по мере роста и развития системы. [112]

Программное обеспечение, управляющее инфраструктурой Google, включает в себя: [113]

  • Веб-сервер Google (GWS) — специальный веб-сервер на базе Linux, который Google использует для своих онлайн-сервисов.
  • Системы хранения:
    • Файловая система Google и ее преемник Colossus [114] [115]
    • Bigtable — структурированное хранилище, построенное на базе GFS/Colossus. [114]
    • Spanner - база данных планетарного масштаба, поддерживающая внешне согласованные распределенные транзакции. [114] [116]
    • Google F1 – распределенная квази- SQL СУБД на базе Spanner, заменяющая пользовательскую версию MySQL. [117]
  • Служба блокировки пухлых
  • MapReduce и Sawzall Язык программирования
  • Системы индексирования/поиска:
    • TeraGoogle – крупный поисковый индекс Google (запущен в начале 2006 г.) [118]
    • Кофеин (Percolator) – система непрерывной индексации (запущена в 2010 г.). [119]
    • Hummingbird — крупное обновление поискового индекса, включая сложный поиск и голосовой поиск. [120]
  • Borg Программное обеспечение для декларативного планирования процессов

Google разработал несколько абстракций, которые использует для хранения большей части своих данных: [121]

  • Протокольные буферы - «Лингва-франка Google для данных», [122] формат двоичной сериализации, широко используемый в компании.
  • SSTable (таблица отсортированных строк) — постоянная, упорядоченная, неизменяемая карта ключей и значений, где и ключи, и значения представляют собой произвольные байтовые строки. Он также используется как один из строительных блоков Bigtable. [123]
  • RecordIO — последовательность записей переменного размера. [121] [124] [125]

Практики разработки программного обеспечения

[ редактировать ]

Большинство операций доступны только для чтения. Когда требуется обновление, запросы перенаправляются на другие серверы, чтобы упростить проблемы согласованности. Запросы делятся на подзапросы, причем эти подзапросы могут отправляться в разные каналы параллельно , что сокращает время задержки. [87]

Чтобы уменьшить последствия неизбежных сбоев оборудования , программное обеспечение разрабатывается как отказоустойчивое . Таким образом, когда система выходит из строя, данные по-прежнему доступны на других серверах, что повышает надежность.

Поисковая инфраструктура

[ редактировать ]
Дата-центр Google в Даллесе, штат Орегон

Индекс

[ редактировать ]

Как и большинство поисковых систем, Google индексирует документы, создавая структуру данных, известную как инвертированный индекс . Такой индекс получает список документов по слову запроса. Индекс очень большой из-за количества документов, хранящихся на серверах. [90]

Индекс разделен по идентификаторам документов на множество частей, называемых шардами . Каждый осколок реплицируется на несколько серверов. Первоначально индекс обслуживался с жестких дисков , как это делается в традиционных системах поиска информации (IR). Google справился с растущим объемом запросов, увеличив количество реплик каждого сегмента и, таким образом, увеличив количество серверов. Вскоре они обнаружили, что у них достаточно серверов, чтобы хранить копию всего индекса в основной памяти (правда, с низкой репликацией или вообще без репликации), и в начале 2001 года Google перешел на систему индексирования в памяти . Этот переключатель «радикально изменил многие параметры конструкции» их поисковой системы и позволил значительно увеличить пропускную способность и значительно уменьшить задержку запросов. [126]

В июне 2010 года Google представил систему индексирования и обслуживания нового поколения под названием «Caffeine», которая может непрерывно сканировать и обновлять поисковый индекс. Раньше Google обновлял свой поисковый индекс пакетно, используя серию заданий MapReduce . Индекс был разделен на несколько слоев, некоторые из которых обновлялись быстрее других, а основной слой не обновлялся в течение двух недель. При использовании Caffeine весь индекс постоянно обновляется постепенно. Позже Google представила систему распределенной обработки данных под названием «Percolator». [127] который считается основой системы индексации кофеина. [119] [128]

Типы серверов

[ редактировать ]

Серверная инфраструктура Google разделена на несколько типов, каждый из которых предназначен для разных целей: [87] [90] [129] [130] [131]

  • Веб-серверы координируют выполнение запросов, отправленных пользователями, а затем форматируют результат в HTML- страницу. Выполнение состоит из отправки запросов на индексные серверы, объединения результатов, вычисления их ранга, получения сводки для каждого обращения (с использованием сервера документов), запроса предложений от серверов правописания и, наконец, получения списка рекламных объявлений с рекламного сервера. .
  • Серверы сбора данных постоянно предназначены для работы в сети. Веб-сканер Google известен как GoogleBot. Они обновляют базы данных индексов и документов и применяют алгоритмы Google для присвоения рейтингов страницам.
  • Каждый индексный сервер содержит набор сегментов индекса. Они возвращают список идентификаторов документов («docid»), так что документы, соответствующие определенному документу, содержат слово запроса. Этим серверам требуется меньше дискового пространства, но они испытывают наибольшую нагрузку на процессор.
  • Серверы документов хранят документы. Каждый документ хранится на десятках серверов документов. При выполнении поиска сервер документов возвращает сводку документа на основе слов запроса. Они также могут получить полный документ, когда их об этом попросят. Этим серверам требуется больше дискового пространства.
  • Рекламные серверы управляют рекламой, предлагаемой такими службами, как AdWords и AdSense .
  • Серверы проверки правописания вносят предложения по написанию запросов.

Безопасность

[ редактировать ]
Внешние видео
Логотип YouTube
Ютуб
значок видео Безопасность центра обработки данных Google: 6 уровней глубины

В октябре 2013 года газета The Washington Post США сообщила, что Агентство национальной безопасности перехватило связь между дата-центрами Google в рамках программы под названием MUSCULAR . [132] [133] Такое прослушивание стало возможным, поскольку в то время Google не шифровала данные, передаваемые внутри собственной сети. [134] Это было исправлено, когда в 2013 году Google начал шифровать данные, передаваемые между центрами обработки данных. [135]

Воздействие на окружающую среду

[ редактировать ]
Дата-центр Google в округе Мейс, штат Оклахома, в промышленном парке MidAmerica

Самый эффективный центр обработки данных Google работает при температуре 35 °C (95 °F) и использует только охлаждение приточным воздухом и не требует кондиционирования воздуха с электроприводом. [136]

В декабре 2016 года Google объявила, что начиная с 2017 года она будет закупать достаточное количество возобновляемой энергии, чтобы обеспечить 100% энергопотребление ее центров обработки данных и офисов. Это обязательство сделает Google «крупнейшим в мире корпоративным покупателем возобновляемой энергии с обязательствами достичь 2,6 гигаватт (2600 мегаватт) ветровой и солнечной энергии». [137] [138] [139]

Ссылки

[ редактировать ]
  1. ^ «Сколько серверов у Google?» . Знание дата-центра . 16 марта 2017 г. Проверено 20 сентября 2018 г.
  2. ^ «Центры обработки данных Google, местоположения» . Проверено 21 июля 2014 г.
  3. ^ «ISO/IEC 27001 – Соответствие» . Гугл облако . Проверено 11 июля 2023 г.
  4. ^ Перейти обратно: а б Отчет, Times-Mirror Staff (19 июня 2019 г.). «Google ограничивает инвестиции в размере 600 миллионов долларов в округе Лаудоун» . LoudounTimes.com . Проверено 12 февраля 2021 г.
  5. ^ Перейти обратно: а б «Google планирует построить 2 центра обработки данных Loudoun» . LoudounNow.com . 29 ноября 2017 г. Проверено 12 апреля 2023 г.
  6. ^ Арельяно (CIPER), Альберто (25 мая 2020 г.). «Темные области экологической экспертизы, которая «слепо» санкционировала мегапроект Google в Серрильосе» . CIPER Чили (на испанском языке) . Проверено 10 июля 2023 г.
  7. ^ «Google установил новый центр обработки данных в Чили» . diarioeldia.cl (на испанском языке). Архивировано из оригинала 22 сентября 2021 года . Проверено 28 сентября 2019 г.
  8. ^ «Новый регион Google Cloud в Сантьяго, весь потенциал облака теперь ближе» . Google . 1 декабря 2021 г. . Проверено 10 июля 2023 г.
  9. ^ «Регион Google Cloud теперь доступен в Колумбусе, штат Огайо» . Блог Google Cloud . Проверено 10 июля 2023 г.
  10. ^ «Намасте, Индия. Наш новый облачный регион в Дели, НКР, уже запущен» . Cloudonair.withgoogle.com .
  11. ^ «Новый регион Google Cloud теперь открыт в Катаре» . Блог Google Cloud . Проверено 10 июля 2023 г.
  12. ^ «Дублин, Ирландия – Центры обработки данных – Google» . www.google.com . Проверено 2 апреля 2019 г.
  13. ^ «ПРОЕКТ В ГАНАУ: ЦЕНТР ДАННЫХ, РАЗРАБОТАННЫЙ ДЛЯ GOOGLE» . НДЦ ГАРБЕ . 2 сентября 2021 г.
  14. ^ «Google Cloud инвестирует в Германию в новую инфраструктуру и устойчивую энергетику» . Блог Google Cloud . Проверено 10 июля 2023 г.
  15. ^ «Первый центр обработки данных Google в Дании» . Google . 20 ноября 2018 г. Проверено 10 июля 2023 г.
  16. ^ «Google получает зеленый свет для своего шестого центра обработки данных в Хамине, Финляндия» . 11 сентября 2020 г.
  17. ^ «Инвестирование в инфраструктуру Google, инвестирование в Неваду» . Блог Google Cloud . Проверено 10 июля 2023 г.
  18. ^ Торрес-Кортес, Рикардо (16 сентября 2020 г.). «Google инвестирует дополнительные 600 миллионов долларов в дата-центр Хендерсона – газета Las Vegas Sun» . lasvegassun.com . Проверено 12 февраля 2021 г. «Благодаря этому последнему объявлению Google доведет общий объем инвестиций в город Хендерсон до 1,2 миллиарда долларов», — заявила мэр Дебра Марч в своем пресс-релизе.
  19. ^ Бакстел. «Центр обработки данных Google Хендерсон, штат Невада» . baxtel.com . Проверено 12 февраля 2021 г.
  20. ^ «Скоро: регион Гонконга GCP» . Блог Google Cloud . Проверено 10 июля 2023 г.
  21. ^ «Расширение нашего присутствия в Азиатско-Тихоокеанском регионе: новые регионы GCP в Гонконге и Джакарте» . Блог Google Cloud . Проверено 10 июля 2023 г.
  22. ^ «Новый регион Google Cloud в Джакарте открыт» . Блог Google Cloud . Проверено 15 сентября 2021 г.
  23. ^ «Регион Google Cloud Platform в Токио теперь открыт для бизнеса» . Блог Google Cloud . Проверено 10 июля 2023 г.
  24. ^ «Гугл – Сингапур» . www.streetdirectory.com . Проверено 11 июля 2023 г.
  25. ^ «Облачная платформа Google теперь открыта в Лондоне» . Блог Google Cloud . Проверено 10 июля 2023 г.
  26. ^ «Открыт новый регион Google Cloud в Мадриде, Испания» . Блог Google Cloud . Проверено 10 июля 2023 г.
  27. ^ «Регион Google Cloud в Мельбурне теперь открыт» . Блог Google Cloud . Проверено 10 июля 2023 г.
  28. ^ "Добро пожаловать" . Agriport A7 (на голландском языке) . Проверено 10 июля 2023 г.
  29. ^ «Google потратит 1,1 миллиарда долларов на новые центры обработки данных в Нидерландах» . Знание дата-центра . 24 июня 2019 г.
  30. ^ «Регион Google Cloud теперь доступен в Далласе, штат Техас» . Блог Google Cloud . Проверено 10 июля 2023 г.
  31. ^ «Огромный дата-центр Google стоимостью 600 миллионов долларов формируется в округе Эллис, поскольку технологический гигант расширяет свое присутствие в Техасе» . Далласские новости . 14 июня 2019 г. Проверено 12 февраля 2021 г.
  32. ^ «Открыт новый регион Google Cloud в Милане, Италия» . Блог Google Cloud . Проверено 10 июля 2023 г.
  33. ^ «Проект по расширению деятельности Google в Квебеке — Будущий компьютерный центр обработки данных в Богарнуа» . www.quebec.ca (на французском языке) . Проверено 10 мая 2021 г.
  34. ^ «GCP прибывает в Канаду с запуском региона Монреаль» . Блог Google Cloud . Проверено 10 июля 2023 г.
  35. ^ «Постоянные обязательства Google в Квебеке» . Блог Google — Новости компании . Проверено 12 февраля 2021 г.
  36. ^ Стивер, Дэйв (1 ноября 2017 г.). «GCP прибывает в Индию с запуском региона Мумбаи» . Блог Google Cloud . Проверено 30 июля 2019 г.
  37. ^ Уильямс, Марк. «Google присоединяется к высокотехнологичному сообществу Нью-Олбани с центром обработки данных стоимостью 600 миллионов долларов» . Сообщение «Колумбус» . Архивировано из оригинала 30 декабря 2020 года . Проверено 12 февраля 2021 г.
  38. ^ «Нью-Олбани, Огайо – Центры обработки данных – Google» . Дата-центры Google . Проверено 12 февраля 2021 г.
  39. ^ «Google Cloud запускает новый регион Осака для поддержки растущей клиентской базы в Японии» . Блог Google Cloud . Проверено 10 июля 2023 г.
  40. ^ «GCP прибывает в Южную Америку с запуском региона Сан-Паулу!» . Блог Google Cloud . Проверено 10 июля 2023 г.
  41. ^ «Google подтверждает, что стоит за проектом центра обработки данных Papillion стоимостью 600 миллионов долларов» . www.datacenterdynamics.com . Проверено 12 февраля 2021 г.
  42. ^ «Папиллион, Небраска – Центры обработки данных – Google» . Дата-центры Google . Проверено 12 февраля 2021 г.
  43. ^ «Регион Google Cloud в Париже, Франция, теперь открыт» . Блог Google Cloud . Проверено 10 июля 2023 г.
  44. ^ Дон-Хискокс, Танвен (20 февраля 2018 г.). «Google потратит миллионы долларов на расширение дата-центра Pryor» . Динамика центра обработки данных . Архивировано из оригинала 23 апреля 2019 года . Проверено 23 апреля 2019 г.
  45. ^ «Google решила инвестировать миллионы долларов в свой дата-центр в Чили» . Newtechmag.net (на испанском языке). 28 сентября 2018. Архивировано из оригинала 30 марта 2019 года . Проверено 8 декабря 2018 г.
  46. ^ Танвен Дон-Хискокс (18 апреля 2017 г.). «Google планирует построить огромный центр обработки данных в Неваде» . Датацентрдинамика.com . Проверено 8 декабря 2018 г.
  47. ^ Джейсон Идальго (16 ноября 2018 г.). «Невада одобряет центр обработки данных Google M недалеко от Лас-Вегаса, M в налоговых льготах» . Rgj.com . Проверено 8 декабря 2018 г.
  48. ^ Джейсон Идальго (16 сентября 2020 г.). «Google инвестирует $600 млн в дата-центр недалеко от Рино и получает налоговые льготы» . Журнал Reno Gazette . Проверено 26 октября 2020 г. Благодаря нашему новому центру обработки данных в округе Стори и расширению инвестиций в наш сайт в Хендерсоне у Google появится два объекта в Неваде, в результате чего общий объем наших инвестиций превысит 1,88 миллиарда долларов.
  49. ^ «Регион Google Cloud в Солт-Лейк-Сити теперь открыт» . Блог Google Cloud . Проверено 10 июля 2023 г.
  50. ^ «Новый регион GCP в Сеуле» . Блог Google Cloud . Проверено 10 июля 2023 г.
  51. ^ «Google Cloud расширяется в Австралии с новым регионом Сидней» . Блог Google Cloud . Проверено 10 июля 2023 г.
  52. ^ «Google запускает регион GCP в Тель-Авиве, Израиль» . datacenterdynamics.com .
  53. ^ «Регион Google Cloud в Тель-Авиве, Израиль, теперь открыт» . Блог Google Cloud . Проверено 10 июля 2023 г.
  54. ^ «Регион Google Cloud Торонто теперь открыт» . Блог Google Cloud . Проверено 10 июля 2023 г.
  55. ^ «Открыт новый регион Google Cloud в Турине, Италия» . Блог Google Cloud . Проверено 10 июля 2023 г.
  56. ^ «Google построит облачные центры обработки данных в Польше» . Знание дата-центра . 27 сентября 2019 г.
  57. ^ «Google начинает строительство дата-центра в штате Алабама» . Сделано в Алабаме . 9 апреля 2018 года . Проверено 19 августа 2019 г.
  58. ^ «Швейцарская облачная платформа Google переезжает в зеленый район Аргау» . Swiss IT Magazine (на немецком языке) . Проверено 10 июля 2023 г.
  59. ^ <<Cite web|url= https://www.datacenterknowledge.com/google-alphabet/google-building-cloud-data-centers-close-swiss-banks%7Ctitle=Google [ постоянная мертвая ссылка ] Создание облачных центров обработки данных рядом со швейцарскими банками ||
  60. ^ Перейти обратно: а б с д и «Представляем 5 новых регионов Google Cloud» . Блог Google Cloud . Проверено 10 июля 2023 г.
  61. ^ «Google планирует построить большой центр обработки данных к югу от аэропорта BER» . Зеркало (на немецком языке). 30 сентября 2022 г. ISSN   2195-1349 . Проверено 10 июля 2023 г.
  62. ^ «Google Cloud инвестирует в Германию в новую инфраструктуру и устойчивую энергетику» . Блог Google Cloud . Проверено 10 июля 2023 г.
  63. ^ «Регион Google Cloud Берлин-Бранденбург открыт» . Блог Google Cloud . Проверено 3 февраля 2024 г.
  64. ^ «Обновления региона Google Cloud Platform» . Блог Google Cloud . Проверено 10 июля 2023 г.
  65. ^ «Последний шаг филиала Google сигнализирует о выборе KC для центра обработки данных стоимостью 600 миллионов долларов» . www.bizjournals.com . Проверено 12 февраля 2021 г.
  66. ^ «Открытие нового региона Google Cloud в Кувейте» . Блог Google Cloud . Проверено 10 июля 2023 г.
  67. ^ Перейти обратно: а б с «Анонс новых регионов Google Cloud в Азиатско-Тихоокеанском регионе» . Блог Google Cloud . Проверено 10 июля 2023 г.
  68. ^ «Анонсируем новый регион Google Cloud в Мексике» . Блог Google Cloud . Проверено 10 июля 2023 г.
  69. ^ «Google покупает землю для нового дата-центра в Тайнане» . Тайбэй Таймс . 12 сентября 2019 г. . Проверено 20 декабря 2019 г.
  70. ^ «Google создаст центр обработки данных в Тайнане» . Фокус Тайвань . 11 сентября 2019 года . Проверено 20 декабря 2019 г.
  71. ^ «Google создаст второй дата-центр на Тайване» . Новости Тайваня . 11 сентября 2019 года . Проверено 20 декабря 2019 г.
  72. ^ «Google подтверждает планы построить третий дата-центр на Тайване» . Новости Тайваня . 3 сентября 2020 г. Проверено 3 сентября 2020 г.
  73. ^ «Наши инвестиции в размере 1 миллиарда долларов в новый центр обработки данных в Великобритании» . Google . 18 января 2024 г. . Проверено 19 января 2024 г.
  74. ^ " "Google Стэнфордское оборудование" " . Архивировано из оригинала 9 февраля 1999 года . Проверено 23 марта 2017 г. {{cite web}}: CS1 maint: bot: исходный статус URL неизвестен ( ссылка ) . Стэнфордский университет (предоставлено Интернет-архивом ). Проверено 10 июля 2006 г.
  75. ^ Мерлин, Марк (2013). «Кейс-стади: живое обновление многих тысяч серверов с древнего дистрибутива Red Hat на более новый, основанный на Debian, выпущенный на 10 лет» (PDF) . Фонд Linux . Проверено 9 июня 2017 г.
  76. ^ Тауфик Джеласси; Альбрехт Эндерс (2004). «Пример 16 — Google». Стратегии электронного бизнеса . Пирсон Образование. п. 424. ИСБН  978-0-273-68840-2 .
  77. ^ Перейти обратно: а б Компьютерная архитектура, пятое издание: количественный подход, ISBN   978-0123838728 ; Глава шестая; 6.7 «Компьютер масштаба склада Google», стр. 471 «Разработка материнских плат, которым требуется только один источник питания 12 В, чтобы функция ИБП могла обеспечиваться от стандартных батарей, связанных с каждым сервером»
  78. ^ Секретные источники питания Google на YouTube.
  79. ^ Google раскрывает некогда секретный сервер , 1 апреля 2009 г.
  80. ^ «Устойчивое развитие Google» . Google Устойчивое развитие .
  81. ^ «Аналитика Пресс-рост потребления электроэнергии в центрах обработки данных с 2005 по 2010 год» . Архивировано из оригинала 11 января 2012 года . Проверено 22 мая 2012 г.
  82. ^ Google превосходит сообщество суперкомпьютеров, незаметно? Архивировано 5 декабря 2008 г. в Wayback Machine , 20 мая 2008 г.
  83. ^ Лам, Седрик Ф.; Лю, Хун; Колей, Бикаш; Чжао, Сяосюэ; Камалов, Валей; Гилл, Виджей (2010 г.), «Технологии оптоволоконной связи: что необходимо для работы сети центра обработки данных», Research , vol. 48
  84. ^ Лам, Седрик Ф. (2010), Взгляд в будущее FTTH — технологии и архитектуры (PDF) , стр. 4
  85. ^ «кумара ASN15169», пиринговая база данных
  86. ^ «Урс Хольцле», Спикеры , Open Network Summit, заархивировано из оригинала 10 мая 2012 г. , получено 22 мая 2012 г.
  87. ^ Перейти обратно: а б с Веб-поиск планеты: кластерная архитектура Google (Луис Андре Баррозу, Джеффри Дин, Урс Хёльцле)
  88. ^ «Компьютеры складского размера» (PDF) . Архивировано из оригинала (PDF) 19 июня 2012 года . Проверено 22 мая 2012 г.
  89. ^ Денис Абт Высокопроизводительные сети центров обработки данных: архитектуры, алгоритмы и возможности
  90. ^ Перейти обратно: а б с Фиах Рид (2004). «Пример: поисковая система Google» . Сетевое программирование в .NET . Цифровая пресса. стр. 251–253 . ISBN  978-1-55558-315-6 .
  91. ^ Перейти обратно: а б Рич Миллер (27 марта 2008 г.). «Часто задаваемые вопросы о центрах обработки данных Google» . Знание дата-центра . Архивировано из оригинала 13 марта 2009 года . Проверено 15 марта 2009 г.
  92. ^ Бретт Винтерфорд (5 марта 2010 г.). «Найдено: секретная сеть передачи данных Google Australia» . ITНовости . Проверено 20 марта 2010 г.
  93. ^ Сингх, Арджун; Онг, Джун; Агарвал, Амит; Андерсон, Глен; Армистед, Эшби; Бэннон, Рой; Бовинг, Себ; Десаи, Гаурав; Фелдерман, Боб; Джермано, Поли; Канагала, Ананд (2015). «Восход Юпитера: десятилетие закрытых топологий и централизованного управления в сети центров обработки данных Google» . Сигкомм '15 . дои : 10.1145/2785956.2787508 . S2CID   2817692 .
  94. ^ Маркофф, Джон; Ханселл, Сол. « Скрываясь на виду, Google ищет больше власти » . New York Times . 14 июня 2006 г. Проверено 15 октября 2008 г.
  95. ^ Google " Центр обработки данных в Даллесе, Орегон " Получено 3 января 2011 г.
  96. ^ Стрэнд, Джинджер.« Центр обработки данных Google », журнал Harper's Magazine . Март 2008 г. Проверено 15 октября 2008 г. Архивировано 30 августа 2012 г. в Wayback Machine.
  97. ^ «Stora Enso продает помещения завода Summa Mill в Финляндии за миллион» . Стора Энсо . 12 февраля 2009 года. Архивировано из оригинала 13 апреля 2009 года . Проверено 2 декабря 2009 г.
  98. ^ [ мертвая ссылка ] «Большой сюрприз: Google покупает завод «Сумма»» . Кауппалехти (на финском языке). Хельсинки. 12 февраля 2009. Архивировано из оригинала 14 февраля 2009 года . Проверено 12 февраля 2009 г.
  99. ^ «Google инвестирует 200 миллионов евро в Хамину» . Финансовые новости (на финском языке). Хельсинки. 4 февраля 2009 года . Проверено 15 марта 2009 г.
  100. ^ «Хамина, Финляндия» . Проверено 23 апреля 2018 г.
  101. ^ Финляндия — лучший выбор для размещения вашего центра обработки данных облачных вычислений. Архивировано 6 июля 2013 г. на Wayback Machine , по состоянию на 4 августа 2010 г.
  102. ^ Рори Кэрролл (30 октября 2013 г.). «Самый тщательно охраняемый секрет Google: плавучие центры обработки данных у берегов США» . Theguardian.com . Проверено 8 декабря 2018 г.
  103. ^ Рич Миллер (29 апреля 2009 г.). «Google получает патент на баржи для центров обработки данных» . Datacenterknowledge.com . Проверено 8 декабря 2018 г.
  104. ^ Мартин Ламоника (8 сентября 2008 г.). «Google подает патент на плавучий центр обработки данных, работающий на волнах» . Cnet.com . Проверено 8 декабря 2018 г.
  105. ^ «Появляется патентная заявка на корабельный центр обработки данных Google» . Датацентрдинамика.com . 7 сентября 2008 года . Проверено 8 декабря 2018 г.
  106. ^ «Тайна барж Google раскрыта: они предназначены для «интерактивных учебных центров» » . Theguardian.com . 6 ноября 2013 г. Проверено 8 декабря 2018 г.
  107. ^ Брэндон Бэйли (1 августа 2014 г.). «Google подтверждает продажу загадочной баржи» . Сан-Хосе Меркьюри Ньюс . Проверено 7 апреля 2015 г.
  108. ^ Крис Морран (7 ноября 2014 г.). «Что случилось с этими баржами Google?» . Потребитель . Проверено 15 января 2017 г.
  109. ^ Марк Левен (2005). Введение в поисковые системы и веб-навигацию . Пирсон Образование. п. 73. ИСБН  978-0-321-30677-7 .
  110. ^ «Обновление статуса Python» . Артима. 10 января 2006 года . Проверено 17 февраля 2012 г.
  111. ^ "Предупреждение" . Панела . Блог-город. Архивировано из оригинала 28 декабря 2011 года . Проверено 17 февраля 2012 г.
  112. ^ «Цитаты о Python» . Питон . Проверено 17 февраля 2012 г.
  113. ^ «Архитектура Google» . Высокая масштабируемость. 22 ноября 2008 года . Проверено 17 февраля 2012 г.
  114. ^ Перейти обратно: а б с Файкс, Эндрю (29 июля 2010 г.), «Архитектура хранения данных и проблемы», TechTalk (PDF) [ постоянная мертвая ссылка ]
  115. ^ «Колосс: преемник файловой системы Google (GFS)» . Системные учебники. 29 ноября 2012 года . Проверено 10 мая 2016 г.
  116. ^ Дин, Джеффри «Джефф» (2009), «Проектирование, уроки и советы по созданию больших распределенных систем», Ладис (основной доклад) , Корнелл
  117. ^ Шут, Джеффри «Джефф»; Оанча, Мирча; Эллнер, Стефан; Хэнди, Бенджамин «Бен»; Роллинз, Эрик; Сэмвел, Барт; Вингалек, Радек; Уипки, Чад; Чен, Синь; Егерленер, Бит; Литтлфилд, Кайл; Тонг, Феникс (2012), «F1 — отказоустойчивая распределенная СУБД, поддерживающая рекламный бизнес Google», Исследование (презентация) , Sigmod {{citation}}: CS1 maint: отсутствует местоположение издателя ( ссылка )
  118. ^ «Выпускники Google создают новую поисковую систему» ​​. Лос-Анджелес Таймс . 28 июля 2008 года . Проверено 15 сентября 2021 г.
  119. ^ Перейти обратно: а б Регистр. Google Caffeine встряхивает поисковую систему по всему миру
  120. ^ «Официальное примечание к выпуску Google» . Проверено 28 сентября 2013 г.
  121. ^ Перейти обратно: а б «Google разрабатывает систему хранения кофеина | TechWeekEurope UK» . Eweekeurope.co.uk. 18 августа 2009 года. Архивировано из оригинала 15 ноября 2011 года . Проверено 17 февраля 2012 г.
  122. ^ «Руководство разработчика – Буферы протоколов – Код Google» . Проверено 17 февраля 2012 г.
  123. ^ http://static.googleusercontent.com/media/research.google.com/en/us/archive/bigtable-osdi06.pdf . [ пустой URL PDF ]
  124. ^ Уиндли он (24 июня 2008 г.). «Технометрия Фила Уиндли | Скорость 08: Хранение в масштабе» . Windley.com . Проверено 17 февраля 2012 г.
  125. ^ «Ограничение количества сообщений – Буферы протокола | Группы Google» . Проверено 17 февраля 2012 г.
  126. ^ «Выступление Джеффа Дина на WSDM 2009» (PDF) . Проверено 17 февраля 2012 г.
  127. ^ Дэниел Пэн, Фрэнк Дабек. (2010). Крупномасштабная инкрементная обработка с использованием распределенных транзакций и уведомлений . Материалы 9-го симпозиума USENIX по проектированию и внедрению операционных систем.
  128. ^ Регистр. Google Percolator – глобальный поисковый толчок без отказа MapReduce
  129. ^ Чендлер Эванс (2008). «Платформа Google». Будущее Google Планета Земля . Издательство Мэдисон. п. 299. ИСБН  978-1-4196-8903-1 .
  130. ^ Крис Шерман (2005). «Как работает Google». Гугл Сила . МакГроу-Хилл Профессионал. стр. 10–11 . ISBN  978-0-07-225787-8 .
  131. ^ Майкл Миллер (2007). «Как работает Google». Гуглпедия . Пирсон Технолоджи Груп. стр. 17–18 . ISBN  978-0-7897-3639-0 .
  132. ^ Геллман, Бартон; Солтани, Ашкан (30 октября 2013 г.). «АНБ проникает в центры обработки данных Yahoo и Google по всему миру, говорится в документах Сноудена» . Вашингтон Пост . Проверено 1 ноября 2013 г.
  133. ^ Сэвидж, Чарли; Миллер, Клэр Кейн; Перлрот, Николь (30 октября 2013 г.). «АНБ приказало использовать Google и Yahoo за рубежом» . Нью-Йорк Таймс . Проверено 9 марта 2017 г.
  134. ^ Галлахер, Шон (31 октября 2013 г.). «Как MUSCULAR АНБ прослушивал частные сети Google и Yahoo» . Арс Техника . Конде Наст . Проверено 9 марта 2017 г.
  135. ^ Миллер, Клэр Кейн (31 октября 2013 г.). «Разгневанные наблюдением США, технологические гиганты укрепляют оборону» . Нью-Йорк Таймс . Проверено 9 марта 2017 г.
  136. ^ Хамфрис, Мэтью (27 марта 2012 г.). «Самый эффективный центр обработки данных Google работает при температуре 95 градусов» . geek.com . Архивировано из оригинала 13 июня 2016 года . Проверено 13 июня 2016 г.
  137. ^ Хёльцле, Урс (6 декабря 2016 г.). «Мы намерены достичь 100% возобновляемой энергии — и это только начало» . Ключевое слово Блог Google . Проверено 8 декабря 2016 г.
  138. ^ Статт, Ник (6 декабря 2016 г.). «Google только что одержал большую победу в борьбе с изменением климата» . Грань . Вокс Медиа . Проверено 8 декабря 2016 г.
  139. ^ Этерингтон, Даррелл (7 декабря 2016 г.). «Google заявляет, что к 2017 году достигнет 100% возобновляемой энергии» . ТехКранч . АОЛ . Проверено 8 декабря 2016 г.

Дальнейшее чтение

[ редактировать ]
[ редактировать ]
Retrieved from "https://en.wikipedia.org/w/index.php?title=Google_data_centers&oldid=1229898625"
Arc.Ask3.Ru: конец переведенного документа.
Arc.Ask3.Ru
Номер скриншота №: ce19a8d3999883a2a2c7ec0cf148a588__1718775960
URL1:https://arc.ask3.ru/arc/aa/ce/88/ce19a8d3999883a2a2c7ec0cf148a588.html
Заголовок, (Title) документа по адресу, URL1:
Google data centers - Wikipedia
Данный printscreen веб страницы (снимок веб страницы, скриншот веб страницы), визуально-программная копия документа расположенного по адресу URL1 и сохраненная в файл, имеет: квалифицированную, усовершенствованную (подтверждены: метки времени, валидность сертификата), открепленную ЭЦП (приложена к данному файлу), что может быть использовано для подтверждения содержания и факта существования документа в этот момент времени. Права на данный скриншот принадлежат администрации Ask3.ru, использование в качестве доказательства только с письменного разрешения правообладателя скриншота. Администрация Ask3.ru не несет ответственности за информацию размещенную на данном скриншоте. Права на прочие зарегистрированные элементы любого права, изображенные на снимках принадлежат их владельцам. Качество перевода предоставляется как есть. Любые претензии, иски не могут быть предъявлены. Если вы не согласны с любым пунктом перечисленным выше, вы не можете использовать данный сайт и информация размещенную на нем (сайте/странице), немедленно покиньте данный сайт. В случае нарушения любого пункта перечисленного выше, штраф 55! (Пятьдесят пять факториал, Денежную единицу (имеющую самостоятельную стоимость) можете выбрать самостоятельно, выплаичвается товарами в течение 7 дней с момента нарушения.)