Многие из вас уже знают, а возможно кто-то еще нет, что не так давно стали доступны к свободной регистрации тематические доменные имена первого уровня, так называемые new gTLD домены. Можно по-разному относиться к этому глобальному нововведению. Скептики говорят о неизбежной путанице и вялом желании вообще что-то менять. Новаторы наоборот склоняются к тому, что Интернетом станет пользоваться […]

Nodeload, первому проекту команды GitHub, выполненному с использованием node.js, недавно исполнился 1 год. Nodeload, — это тот сервис, который упаковывает содержимое Git-репозитория в ZIP-архивы и тарболы. С тех пор нагрузка на сервис росла в течение года, и мы столкнулись с различными проблемами. Почитайте о происхождении Nodeload, если вы не помните, почему это работает так, как работает сейчас.

По существу, у нас стало слишком много запросов, проходящих через один сервер nodeload. Эти запросы запускали процессы git archive, которые запускали SSH-процессы для общения с файловыми серверами. Эти запросы постоянно записывали гигабайты данных, а также передавали их через nginx. Одной простой идеей было заказать больше серверов, но это создало бы дубликат кэша заархивированных репозиториев. Я хотел избежать этого, если возможно. Итак, я решил начать все сначала и переписать Nodeload с нуля.