Какой рейтинг вас больше интересует?
|
Главная / Главные темы / Тэг «высокой»
Масштабирование базы данных через шардирование и партиционирование 2016-09-09 12:17:42
+ развернуть текст сохранённая копия
Масштабирование базы данных через шардирование и партиционирование
Денис Иванов (2ГИС)
Всем привет! Меня зовут Денис Иванов, и я расскажу о масштабировании баз данных через шардирование и партиционирование. После этого доклада у всех должно появиться желание что-то попартицировать, пошардировать, вы поймете, что это очень просто, оно никак жрать не просит, работает, и все замечательно.
Немного расскажу о себе — я работаю в команде WebAPI в компании 2GIS, мы предоставляем API для организаций, у нас очень много разных данных, 8 стран, в которых мы работаем, 250 крупных городов, 50 тыс. населенных пунктов. У нас достаточно большая нагрузка — 25 млн. активных пользователей в месяц, и в среднем нагрузка около 2000 RPS идет на API. Все это располагается в трех датацентрах.
Перейдем к проблемам, которые мы с вами сегодня будем решать. Одна из проблем — это большое количество данных. Когда вы разрабатываете тот или иной проект, у вас в любой момент времени может случиться так, что данных становится очень много. Если бизнес работает, он приносит деньги. Соответственно, данных больше, денег больше, и с этими данными что-то нужно делать, потому что эти запросы очень долго начинают выполняться, и у нас сервер начинает не вывозить. Одно из решений, что с этими данными делать — это масштабирование базы данных.
Читать дальше →
Тэги: (онтико), highload, mysql, postgresql, блог, бунина, веб-сайтов, высокая, компании, конференции, олега, партиционирование, производительность, разработка, шардирование
Основы индексирования и возможности EXPLAIN в MySQL 2016-09-08 19:20:01
+ развернуть текст сохранённая копия
Темой доклада Василия Лукьянчикова является индексирование в MySQL и расширенные возможности EXPLAIN, т.е. нашей задачей будет ответить на вопросы: что мы можем выяснить с помощью EXPLAIN'а, на что следует обращать внимание?
Многие ограничения EXPLAIN'а связаны с оптимизатором, поэтому мы предварительно посмотрим на архитектуру, чтобы понять, откуда следуют ограничения и что, в принципе, с помощью EXPLAIN'а можно сделать.
По индексам мы пройдемся очень кратко, исключительно в плане того, какие нюансы есть в MySQL, в отличие от общей теории.
Доклад, таким образом, состоит из 3х частей:
- Архитектура;
- Основы индексирования;
- EXPLAIN (примеры).
Читать дальше →
Тэги: (онтико), explain, highload, mysql, performance, php, plan, sql, блог, бунина, веб-сайтов, высокая, компании, конференции, олега, производительность, разработка
Как устроена MySQL-репликация 2016-09-07 19:13:56
+ развернуть текст сохранённая копия
Андрей Аксенов (Sphinx), shodan
Мой доклад предназначен для тех людей, которые знают слово «репликация», даже знают, что в MySQL она есть, и, возможно, один раз ее настроили, 15 минут потратили и забыли. Больше про нее они не знают ничего.
Мы немного пройдемся по теории, попытаемся объяснить, как это все работает внутри, а после этого вы с утроенными силами сможете сами нырнуть в документацию.
Что такое репликация, в принципе? Это копирование изменений. У нас есть одна копия БД, мы хотим с какой-то целью еще одну копию.
Репликация бывает разных видов. Разные оси сравнения:
- степень синхронизации изменений (sync, async, semisync);
- количество серверов записи (M/S, M/M);
- формат изменений (statement-based (SBR), row-based (RBR), mixed);
- теоретически, модель передачи изменений (push, pull).
Читать дальше →
Тэги: (онтико), highload, mysql, php, базы, блог, бунина, веб-сайтов, высокая, данных, компании, конференции, олега, производительность, разработка, репликация
Анатомия веб-сервиса 2016-09-06 16:07:48
+ развернуть текст сохранённая копия
Анатомия веб-сервиса
Андрей Смирнов
Я попытаюсь залезть в «потроха» и «кишки» бэкенда веб-сервиса и расскажу, как это внутреннее устройство влияет на эффективность сервиса, а также на продукт, его характеристики, и как бы мы могли этим воспользоваться, чтобы наше приложение выдерживало большую нагрузку или работало бы быстрее.
Какую часть я называю веб-сервисом, бэкендом, application-сервером? В классической архитектуре это то, что стоит за http rеverse proxy или load-балансировщиком, а с другой стороны у него находятся база данных, memcached и др. Вот только об этом бэкенде и будет идти речь.
Читать дальше →
Тэги: (онтико), gevent, highload, node.js, блог, бунина, веб-сайтов, высокая, компании, конференции, многозадачность, нити, олега, параллелизм, параллельное, программирование, проектирование, производительность, разработка, рефакторинг
3 космические технологии, упрощающие жизнь на Земле уже сегодня 2016-09-04 21:00:01
Многие разработки создаются для военно-промышленного комплекса и космических нужд, и, как правило, ...
+ развернуть текст сохранённая копия
Многие разработки создаются для военно-промышленного комплекса и космических нужд, и, как правило, проходит несколько лет, а то и десятков лет, прежде чем новейшие чудеса науки и техники станут доступны простым смертным. Но мало кто задумывался о том, что некоторые космические технологии успешно используются уже достаточно давно. Причем о «космическом» происхождении некоторых из них вы могли […]
Тэги: высокие, карты, космос, технологии, энергетика
Главная / Главные темы / Тэг «высокой»
|
Взлеты Топ 5
Падения Топ 5
|