Как Вы масштабируете сервер HTTP как Google?

Question

Как Вы масштабируете сервер HTTP как Google?

Что такое NullPointerException?

Хорошим местом для начала является JavaDocs . Они охватывают это:

Брошено, когда приложение пытается использовать null в случае, когда требуется объект. К ним относятся:

Вызов метода экземпляра нулевого объекта.

Доступ или изменение поля нулевого объекта.

Выполнение длины null, как если бы это был массив.

Доступ или изменение слотов с нулевым значением, как если бы это был массив.

Бросать нуль, как если бы это было значение Throwable.

Приложения должны бросать экземпляры этого класса для указания других незаконных видов использования нулевого объекта.
blockquote>
Также, если вы попытаетесь использовать нулевую ссылку с synchronized, который также выдаст это исключение, за JLS :
SynchronizedStatement:
    synchronized ( Expression ) Block
В противном случае, если значение выражения равно null, NullPointerException.

blockquote>
Как это исправить?

Итак, у вас есть NullPointerException. Как вы это исправите? Возьмем простой пример, который выдает NullPointerException:
public class Printer {
    private String name;

    public void setName(String name) {
        this.name = name;
    }

    public void print() {
        printString(name);
    }

    private void printString(String s) {
        System.out.println(s + " (" + s.length() + ")");
    }

    public static void main(String[] args) {
        Printer printer = new Printer();
        printer.print();
    }
}
Идентифицирует нулевые значения

. Первый шаг - точно определить , значения которого вызывают исключение . Для этого нам нужно выполнить некоторую отладку. Важно научиться читать stacktrace . Это покажет вам, где было выбрано исключение:
Exception in thread "main" java.lang.NullPointerException
    at Printer.printString(Printer.java:13)
    at Printer.print(Printer.java:9)
    at Printer.main(Printer.java:19)
Здесь мы видим, что исключение выбрано в строке 13 (в методе printString). Посмотрите на строку и проверьте, какие значения равны нулю, добавив протоколирующие операторы или используя отладчик . Мы обнаруживаем, что s имеет значение null, а вызов метода length на него вызывает исключение. Мы видим, что программа перестает бросать исключение, когда s.length() удаляется из метода.

Трассировка, где эти значения взяты из

Затем проверьте, откуда это значение. Следуя вызовам метода, мы видим, что s передается с printString(name) в методе print(), а this.name - null.

Трассировка, где эти значения должны быть установлены

Где установлен this.name? В методе setName(String). С некоторой дополнительной отладкой мы видим, что этот метод вообще не вызывается. Если этот метод был вызван, обязательно проверьте порядок , что эти методы вызывают, а метод set не будет называться после методом печати.

Этого достаточно, чтобы дать нам решение: добавить вызов printer.setName() перед вызовом printer.print().

Другие исправления

Переменная может иметь значение по умолчанию (и setName может помешать ему установить значение null):
private String name = "";
Либо метод print, либо printString может проверить значение null например:
printString((name == null) ? "" : name);
Или вы можете создать класс, чтобы name всегда имел ненулевое значение :
public class Printer {
    private final String name;

    public Printer(String name) {
        this.name = Objects.requireNonNull(name);
    }

    public void print() {
        printString(name);
    }

    private void printString(String s) {
        System.out.println(s + " (" + s.length() + ")");
    }

    public static void main(String[] args) {
        Printer printer = new Printer("123");
        printer.print();
    }
}
См. также:

Избегание операторов «! = null» в Java?

Я все еще не могу найти проблему

Если вы попытались отладить проблему и до сих пор не имеете решения, вы можете отправить вопрос для получения дополнительной справки, но не забудьте включить то, что вы пробовали до сих пор. Как минимум, включите stacktrace в вопрос и отметьте важные номера строк в коде. Также попробуйте сначала упростить код (см. SSCCE ).

31

scalability webserver http

задан surfmuggle 8 October 2014 в 12:20

9 ответов

Другие вопросы по тегам:

scalability webserver http

Похожие вопросы:

score 15 · Answer 1

Эта статья может быть интересной для Вас:

Google Platform: технологическая инфраструктура позади веб-сайтов Google

score 44 · Answer 2

google.com, update.microsoft.com и другие сервисы, которые обрабатывают удивительно высокую совокупную пропускную способность, делают большую часть их волшебства через DNS.

маршрутизация Передачи любому из узлов BGP используется для объявления о IP-адресе их серверов DNS от нескольких точек во всем мире. Каждый сервер DNS настроен для разрешения google.com к IP-адресам в дата-центре, который географически близок. Таким образом, это сначала находится на одном уровне выравнивания нагрузки, базирующегося географически.

Затем, хотя запрос DNS для google.com возвратит только небольшое количество IP-адресов, сервер DNS быстро циклы через большой спектр адресов в его ответах. Каждый клиент, запрашивающий google.com, получит конкретный ответ и будет разрешен кэшировать тот ответ некоторое время, но следующий клиент получит другой IP-адрес. Таким образом, это - второй уровень выравнивания нагрузки.

В-третьих, они используют традиционные подсистемы балансировки нагрузки сервера для отображения сессий на единственный IP-адрес к нескольким серверам бэкэнда. Таким образом, это - третий уровень выравнивания нагрузки.

score 7 · Answer 3

В дне открытых дверей Google в Остине вчера вечером, Alan Eustace показал изображение дата-центра Google в Даллес, Орегон и сказал, что это был размер приблизительно 3 футбольных полей.

Это - один из более новых, но Google имеет несколько дата-центров. Это не похоже на каждый запрос, переходит к тому же компьютеру.

, Несмотря на это, если Вы предполагаете, сколько компьютерный Google имеет, и сколько запросов делается против Google каждую секунду, каждый отдельный сервер должен обрабатывать очень много запросов.

Вот являются некоторые продолжением читать, как это упрощено:

http://research.google.com/archive/bigtable.html
http://labs.google.com/papers/gfs.html

И всего http://research.google.com/ в целом, много прохладной информации там.

score 3 · Answer 4

http://www.akamai.com

Или, переведенный на английский язык (и возможно уточняющий ответ Chris), использует сеть доставки контента (CDN) с узлами во всем мире - отмечают, что это не просто центры обработки данных, но и фактические веб-серверы (хотя я уверен, что большинство не сделало бы огромные кости по различию). Akamai является всего лишь одним примером; поразите Google для "сети доставки контента", и Вы обязаны найти других.

можно также реализовать кэширующуюся стратегию, хотя это, вероятно, не получит Вас вполне как далеко. ;)

score 4 · Answer 5

Moishe является правильным: хотя простая поставка статического веб-контента в масштабе Google бросает вызов достаточно, это вполне прилично понято, и много других людей делает то же.

Однако это - действительно доставка динамического контента, для которого Google был новатором, начиная с их статьи, которая запустила все это: Анатомия Поисковой системы . Существует много умных методов, некоторые из которых были упомянуты здесь, но все еще... Сделайте любой запрос на Google с условиями запроса, которые не принадлежат вместе - они не будут кэшироваться - и Вы все еще вернете набор результатов Вам в нескольких сотнях миллисекунд: это абсолютно невероятно.

Для создания этого еще более сложным существует новое функциональность SearchWiki , которая добавляет динамический контент на каждый результат поиска и ограниченную персонализацию результатов, если Вы зарегистрированы.

Google был хорош в открытии (в некоторой степени) ума, который заставляет все это произойти. В конце все это сводится к проектированию всего для масштабирования хорошо горизонтально. Это - то, как Google мог не отставать от экспоненциального роста Интернета: просто добавьте больше аппаратных средств к своему BigTable, Отобразите/Уменьшите и фермы Google File System. При помощи большого количества потребительского оборудования, с хорошей инфраструктурой и управлением вокруг этого, Google мог позволить себе сохранить целый индекс в памяти, и запросы от одной машины до другого были более быстрыми, чем движение к диску.

Между тем, Yahoo! купил более крупные и более крупные монолитные машины, пока Sun не мог сделать их достаточно большими больше, и они должны были переключиться на Hadoop!, слишком поздно.

Масштабирование серверов HTTP в Google является легкой частью!

score 0 · Answer 6

Это - нормальная обработка интернет-трафика. Google буквально имеет все дата-центры на всем протяжении планеты, которые отвечают на www.google.com

score 0 · Answer 7

У них также есть пользовательский веб-сервер, Стопка TCP/IP [наряду с инфраструктурой], я читал где-нибудь несколько лет назад... Я сомневаюсь, могут ли Apache или IIS или anyother коммерческий/популярный веб-сервер соответствовать этому...

score 1 · Answer 8

В дополнение к большим веб-фермам несомненно они делают большое кэширование. Они могли кэшировать что-либо от содержания страницы к частым критериям поиска. И кэширование - что-то, что смертные не-Google могут сделать также.

score 0 · Answer 9

Существует превосходная статья о масштабировании серверов HTTP:

http://www.kegel.com/c10k.html

0

ответ дан 27 November 2019 в 21:52