МОДИФИКАЦИЯ ДЕРЕВЬЕВ РАЗБОРА ДЛЯ ПАРАЛЛЕЛЬНОГО ИСПОЛНЕНИЯ ЗАПРОСА В СУБД > Полезные советы
Тысяча полезных мелочей    

МОДИФИКАЦИЯ ДЕРЕВЬЕВ РАЗБОРА ДЛЯ ПАРАЛЛЕЛЬНОГО ИСПОЛНЕНИЯ ЗАПРОСА В СУБД

МОДИФИКАЦИЯ ДЕРЕВЬЕВ РАЗБОРА ДЛЯ ПАРАЛЛЕЛЬНОГО ИСПОЛНЕНИЯ ЗАПРОСА В СУБД

Локшин М.В. Статья в формате PDF 115 KB

Основным средством для работы с таблицами, содержащими миллионы строк, является использование какой-либо формы разделения данных и применение алгоритмов для параллельной обработки данных с целью обеспечения приемлемой скорости ответа на пользовательский запрос.

Рассмотрим систему, обеспечивающую работу распределенной СУБД и состоящей из N серверов. Предположим, что пользователь может отправить запрос на языке SQL к любому из N серверов и получить один и тот же ответ от всех серверов (на момент начала исполнения запроса). Такую работу системы можно организовать, к примеру, с использованием одного из методов репликации данных (всей базы, или только части таблиц). В этих условиях возможно создание системы обеспечивающей параллельную обработку SQL запросов, принцип работы которой описан в [1].

Из [2] известно, что схема начальной стадии компиляции запроса состоит из четырех этапов: запрос (текстовое представление) - синтаксический анализатор - препроцессор - генератор логического плана запроса - переписчик логического плана запроса. Дополним эту схему двумя этапами - синтаксический анализатор параллельного запроса и препроцессор параллельного запроса, которые будут предшествовать четырем классическим этапам компиляции. Препроцессор параллельного запроса, в отличие от классической схемы (где он предназначен для замены обозначений деревьями разбора и семантического контроля), в предлагаемой новой схеме модифицирует дерево запроса с целью выделения поддеревьев запроса пригодных для параллельного исполнения. В результате его работы формируется набор новых запросов, обработка которых, в дальнейшем, строится по классической схеме. Преобразования деревьев разбора запроса проводятся препроцессором с использованием заранее известного набора правил, с целью получения эквивалентного запроса. В некоторых случаях после проведения преобразований могут потребоваться дополнительные операции над наборами отношений, возвращаемых запросами.

Под эквивалентностью двух запросов здесь и далее мы будем понимать такие запросы, в результате исполнения которых формируются одинаковые во всех атрибутах кортежей отношения с точностью до порядка следования кортежей, если не задана инструкция сортировки, и с учетом порядка следования в противном случае.

Очевидно, что некоррелированные запросы допускают параллельное исполнение, поэтому все получившиеся подзапросы в дереве разбора запроса могут быть вычислены независимо. Следует заметить, что в общем случае дальнейшее вычисление запроса согласно дереву разбора можно проводить только при получении результатов всех нижестоящих подзапросов и выражений.

Исходя из вышеизложенного замечания, можно сформулировать цели, которые должны достигаться посредством эквивалентных преобразований запросов:

1. Правило преобразования должно из исходного формировать новый запрос, содержащий заранее заданное число некоррелированных подзапросов.

2. Полученные запросы должны обладать приблизительно равной стоимостью исполнения, так как дальнейшее вычисление запроса возможно только после вычисления соответствующих подзапросов, и в случае существенного превышения времени исполнения одного подзапроса над остальными, друге узлы системы (не занятые вычислением подзапроса) могут простаивать. Таким образом, преобразования запроса должно контролировать баланс нагрузки между узлами системы путем соответствующего формирования подзапросов.

3. На верхних уровнях дерева разбора запроса преобразование должно оставлять наиболее «дешевые» операции. Под термином «дешевые» здесь подразумеваются операции, для реализации которых не требуется обработки большого количества записей, так как, к примеру, при их вычислении уже будет невозможно воспользоваться информацией содержащейся в индексах.

4. Преобразование, по возможности, не должно увеличивать объем отношений, получающихся при вычислении подзапросов, для того, чтобы исключить передачу больших объемов данных между узлами системы. Большие объемы таких передач могут серьезно замедлить исполнение запроса и уменьшить выигрыш от параллельного исполнения запроса.

СПИСОК ЛИТЕРАТУРЫ

  1. М. В. Локшин, О.Я. Кравец. Построение систем для параллельной обработки запросов к СУБД. // Телематика´2004: Труды XI Всероссийской научно-методической конференции (7-10 июня 2004). -СПб:ИТМО. 2004. С. 94-95.
  2.  Гарсиа-Молина Г., Ульман Д., Уидом Д. Системы баз данных. Полный курс. -М. «Вильямс», 2003. - 1088 С.


ГЕОМЕТРИЯ – НАУКА И УЧЕБНАЯ ДИСЦИПЛИНА

ГЕОМЕТРИЯ – НАУКА И УЧЕБНАЯ ДИСЦИПЛИНА Статья в формате PDF 141 KB...

08 07 2026 15:58:32

ДВС крови в морфологическом аспекте

ДВС крови в морфологическом аспекте Статья в формате PDF 113 KB...

04 07 2026 4:21:44

ВОЗРАСТНОЕ РАСПРЕДЕЛЕНИЕ ДЕРЕВЬЕВ РАЗНОВОЗРАСТНОГО СОСНЯКА ПО КАЧЕСТВУ СОРТИМЕНТОВ

ВОЗРАСТНОЕ РАСПРЕДЕЛЕНИЕ ДЕРЕВЬЕВ РАЗНОВОЗРАСТНОГО СОСНЯКА ПО КАЧЕСТВУ СОРТИМЕНТОВ Для налаживания лесной аренды и рационализации лесопользования, прежде всего, в части заготовки кругляка выборочными рубками деревьев по долгосрочным проектам освоения лесов, требуется сортиментацию проводить непосредственно в конкретном лесном древостое, причем задолго до проведения самой заготовки древесины. На основе применения биотехнических закономерностей и простой шкалы качества сортиментов показана методика сортиментации лесных деревьев. ...

26 06 2026 9:50:53

Молекулы средней массы плазмы крови при сифилисе

Молекулы средней массы плазмы крови при сифилисе Статья в формате PDF 106 KB...

25 06 2026 3:20:55

НОВЫЕ ПРОБЛЕМЫ ЗАГРЯЗНЕНИЯ ОКРУЖАЮЩЕЙ СРЕДЫ

НОВЫЕ ПРОБЛЕМЫ ЗАГРЯЗНЕНИЯ ОКРУЖАЮЩЕЙ СРЕДЫ Статья в формате PDF 230 KB...

23 06 2026 13:42:54

СОЗДАНИЕ КАРТЫ ШУМОВОГО ЗАГРЯЗНЕНИЯ Г. ЯКУТСКА

СОЗДАНИЕ КАРТЫ ШУМОВОГО ЗАГРЯЗНЕНИЯ Г. ЯКУТСКА Статья в формате PDF 1557 KB...

22 06 2026 0:21:40

ПОЛИТИЧЕСКАЯ ОППОЗИЦИЯ В РОССИИ

ПОЛИТИЧЕСКАЯ ОППОЗИЦИЯ В РОССИИ Статья в формате PDF 269 KB...

20 06 2026 12:12:40

ВИНДЖАММЕРЫ – «ВЫЖИМАТЕЛИ ВЕТРА»

ВИНДЖАММЕРЫ – «ВЫЖИМАТЕЛИ ВЕТРА» Статья в формате PDF 412 KB...

14 06 2026 11:10:42

К ВОПРОСУ СОЗДАНИЯ И РАЗВИТИЯ В РОССИИ ЦЕНТРОВ ЗДОРОВЬЯ

К ВОПРОСУ СОЗДАНИЯ И РАЗВИТИЯ В РОССИИ ЦЕНТРОВ ЗДОРОВЬЯ Современные социально-экономические преобразования в стране и переход на качественно новые требования к оказанию медицинской помощи диктуют необходимость анализа и разработки новых организационные форма работы медицинских учреждений, которыми призваны быть Центры здоровья. Но в связи со множеством проблем в нашей системе здравоохранения, остается множество вопросов связанных с программой развития Центров здоровья. В статье рассматриваются проблемы связанные с созданием и развитием таких центров в Росси. Затрагиваются вопросы финансирования здравоохранения в целом и Центров здоровья в частности. Существующая система российского здравоохранения действует в условиях жесткого финансового дефицита, что отражается на качестве предоставления медицинских услуг. В цифрах же – в 2007 году бюджет здравоохранения в России составил 5,4% ВВП, при этом в других развитых странах – около 10% (Германия – 10,4%, США – 15,7%). Расходы на здравоохранение в физическом выражении на человека в год в 2007 году в России составили 493 долл. США, при этом в том же году в США – 7,285 долл., в Германии – 4,209. В связи с этим вопрос создания Центров здоровья в России остается открытым. ...

06 06 2026 5:36:44

СТАТИСТИЧЕСКОЕ МОДЕЛИРОВАНИЕ ФУНКЦИОНАЛЬНОГО СОСТОЯНИЯ ПРИ ХРОНИЧЕСКОЙ СЕРДЕЧНОЙ НЕДОСТАТОЧНОСТИ У БОЛЬНЫХ ИШЕМИЧЕСКОЙ БОЛЕЗНЬЮ СЕРДЦА

СТАТИСТИЧЕСКОЕ МОДЕЛИРОВАНИЕ ФУНКЦИОНАЛЬНОГО СОСТОЯНИЯ ПРИ ХРОНИЧЕСКОЙ СЕРДЕЧНОЙ НЕДОСТАТОЧНОСТИ У БОЛЬНЫХ ИШЕМИЧЕСКОЙ БОЛЕЗНЬЮ СЕРДЦА В статье описываются математические модели в виде уравнения регрессии, которое позволяет по клиническим признакам хронической сердечной недостаточности со статистической достоверностью предсказать результаты 6-минутного теста. ...

30 05 2026 18:32:16

Еще:
Поддержать себя -1 :: Поддержать себя -2 :: Поддержать себя -3 :: Поддержать себя -4 :: Поддержать себя -5 :: Поддержать себя -6 :: Поддержать себя -7 :: Поддержать себя -8 :: Поддержать себя -9 :: Поддержать себя -10 :: Поддержать себя -11 :: Поддержать себя -12 :: Поддержать себя -13 :: Поддержать себя -14 :: Поддержать себя -15 :: Поддержать себя -16 :: Поддержать себя -17 :: Поддержать себя -18 :: Поддержать себя -19 :: Поддержать себя -20 :: Поддержать себя -21 :: Поддержать себя -22 :: Поддержать себя -23 :: Поддержать себя -24 :: Поддержать себя -25 :: Поддержать себя -26 :: Поддержать себя -27 :: Поддержать себя -28 :: Поддержать себя -29 :: Поддержать себя -30 :: Поддержать себя -31 :: Поддержать себя -32 :: Поддержать себя -33 :: Поддержать себя -34 :: Поддержать себя -35 :: Поддержать себя -36 :: Поддержать себя -37 :: Поддержать себя -38 ::