Заключение - Разработка программного средства, позволяющего оптимизировать SQL-скрипты

Оптимизация потребления ресурсов (хранение данных, ресурсы CPU) - важная задача при реализации ETL-процессов. Чем больше ресурсов системы будет свободно, тем дольше она не будет требовать подключения нового оборудования.

В ходе данной работы был разработан препроцессор SQL-скриптов, позволяющий автоматически исправить типичные проблемы, возникающие при разработке ETL-процессов:

Были решены все поставленные задачи, а именно:

1. Изучены архитектурные особенности СУБД Teradata и особенности диалекта SQL, используемого в данной СУБД 2. Исследованы аналоги, выявлены их достоинства и недостатки 3. Выявлены требования к программному средству 4. В соответствии с требованиями спроектирован и реализован препроцессор SQL-скриптов 5. Разработана техническая документация.

Направления дальнейшей работы включают в себя выявление новых проблем, которые могут быть исправлены данным программным средством, реализация на основе модулей программы новых приложений. Так, например, парсер может быть использован для конвертации SQL-скриптов в формат, используемый SAS Data Integration Studio для хранения ETL-процессов.

Похожие статьи

• Оптимизация запросов в Teradata - Разработка программного средства, позволяющего оптимизировать SQL-скрипты

  Встроенный оптимизатор запросов в Teradata может значительно ускорить запрос по сравнению тем, как если бы команды выполнялись ровно так, как подает...

• Оптимизатор - Разработка программного средства, позволяющего оптимизировать SQL-скрипты

  Задача оптимизатора в рамках данной дипломной работы - исправлять части SQL-кода, которые могут приводить к дополнительным тратам памяти и ресурсов. На...

• Введение - Разработка программного средства, позволяющего оптимизировать SQL-скрипты

  Актуальность. В настоящее время трудно найти фирму, которая не использовала бы базы данных в той или иной форме - учет сотрудников, клиентов, продаж....

• Заключение - Разработка программного приложения "Калькулятор коммунальных услуг"

  При выполнении дипломного проекта на тему: "Калькулятор коммунальных услуг" было получено много полезного опыта, углубилось и закрепилось теоретическое...

• Парсер - Разработка программного средства, позволяющего оптимизировать SQL-скрипты

  В приложении можно выделить 2 основных функциональных блока: парсер и оптимизатор. Данная глава посвящена первому из них. Задача парсера - разобрать...

• Описание программного средства, Общие сведения, Функциональное назначение - Разработка программного приложения "Калькулятор коммунальных услуг"

  Общие сведения Данное программное средство должно помочь в расчете коммунальных услуг, упростить ввод данных о квартиросъемщике и ЖЭС, осуществлять...

• Заключение - Разработка программно-аппаратного комплекса для удаленного контроля почтовой корреспонденции

  Автоматизированный почтовый драйвер аппаратный Результатом данной выпускной квалификационной работы стало создание прототипа умного почтового ящика,...

• Источники - Разработка программного средства, позволяющего оптимизировать SQL-скрипты

  1. William H. Inmon. Building the data warehouse. - 4Th edition. - Wiley Publishing, Inc., 2005. - С. 546. 2. Lawrence Corr, Jim Stagnitto, Agile Data...

• Обзор аналогов - Разработка программного средства, позволяющего оптимизировать SQL-скрипты

  Создание оптимизирующего препроцессора ограничивается несколькими условиями: 1. Частично написание и тестирование программы проводится на рабочих местах,...

• Встроенный оптимизатор в Teradata - Разработка программного средства, позволяющего оптимизировать SQL-скрипты

  СУБД Teradata имеет встроенный оптимизатор, который отвечает за выбор: интерфейс teradata парсер ? Способа доступа к данным - будет ли обращение к...

• Анализ предметной области, Архитектура Teradata - Разработка программного средства, позволяющего оптимизировать SQL-скрипты

  Архитектура Teradata Teradata Database - система массовой параллельной обработки данных. Поставляется она в виде комплекса оборудования и программного...

• Заключение - Разработка программной системы управления контентом портала с архивом конструкторской документации

  В результате проведенной работы были спроектированы и реализованы модули редактора и вебсайта. Были решены поставленные в работе задачи в полном объеме....

• Заключение - Разработка автоматических тестов для тестирования новой функциональности программного обеспечения

  В то время как цель проекта заключалась в оценке эффективности автоматизации тестирования функционала ядра, работа стала своего рода подведением итогов...

• Обоснование выбора инструментальных и программных средств - Разработка и тестирование автоматизированной системы контроля успеваемости студентов

  Для работы с базами данных созданы системы управлением базами данных. Существует довольно большое количество СУБД, особенно предназначенных для работы с...

• Состав аппаратных и программных средств и структура сети - Разработка модели системы информационной безопасности на предприятии

  Учебный процесс в ННГАСУ сопровождается значительной информационной базой, развитием компьютерного парка и внедрением в образовательный процесс...

• Разработка программного обеспечения, Выбор средств реализации информационной системы - Автоматизация процесса работы руководства ООО "Сервис партнер"

  Выбор средств реализации информационной системы Названные в параграфе 1.4. настоящей работы задачи могут быть решены тремя типами средств автоматизации:...

• Глава II. Особенности разработки программных агентов, 2.1 Среды разработки для построения программных агентов - Средства для создания программных агентов

  2.1 Среды разработки для построения программных агентов Инструментальные средства разработки программных агентов формируют среду, которая оптимизирована...

• Общая характеристика инструментальных средств для построения экспертных систем - Инструментальные средства разработки экспертных систем

  При разработке практически всех инструментальных средств за основу принимается методология автоматизации проектирования на базе использования прототипов....

• 2.2 Модель программного агента ресурсов - Средства для создания программных агентов

  Программный агент в мультиагентной системе имеет свое описание в виде BDI модели, которая содержит его знания, планы и цели, которые агент выполняет по...

• Некоторые максимы разработки экспертных систем - Инструментальные средства разработки экспертных систем

  Чтобы не заканчивать эту главу на такой печальной ноте, я решил включить в последний раздел избранные максимы о построении экспертных систем, почерпнутые...

• Введение - Разработка программно-аппаратного комплекса для удаленного контроля почтовой корреспонденции

  В данной выпускной квалификационной работе разработан прототип умного почтового ящика, удаленного сетевого устройства для контроля почтовой...

• Заключение - Программное обеспечение для пропускной системы на основе технологии NFC

  Обеспечение удобной пропускной системы - важная и актуальная задача. Появление новых технологий, таких как NFC и HCE, позволяет решить эту проблему. В...

• Обоснование выбора программных средств, Microsoft Access - Разработка справочной информационной системы "Рецепты"

  Microsoft Access База данных разработана в среде Microsoft Access. Microsoft Access - реляционная СУБД корпорации Microsoft. Имеет широкий спектр...

• ЗАКЛЮЧЕНИЕ - Разработка инвестиционного проекта по созданию организации, занимающейся сборкой и продажей компьютерной техники в среде программного комплекса "Project Expert"

  Основным документом, на основании которого потенциальные партнеры захотят иметь дело с компанией, а инвесторы вложат деньги, является бизнес-план....

• ЗАКЛЮЧЕНИЕ - Разработка программно-аппаратного комплекса для мониторинга рентгеновского симулятора SLS-9

  В рамках данной дипломной работы была произведена разработка программно-аппаратного комплекса для мониторинга рентгеновского симулятора SLS-9. Это...

• ЗАКЛЮЧЕНИЕ - Разработка модели программно-аппаратной защиты на предприятии

  В данном курсовом проекте я рассмотрела и проанализировала часть средств для обеспечения защиты информации на предприятиях разного уровня организации...

• Требования к программному продукту, Функциональные требования:, Нефункциональные требования:, Требования к надежности, Условия эксплуатации, .5 Требования к информационной и программной совместимости, .6 Требования к составу и параметрам технических средств - Разработка методов конвертирования данных из текстового в реляционный формат при проведении компьютерных экспериментов

  Функциональные требования: - Поиск и обработка информации в текстовых файлах при появлении файлов в соответствующей директории по запросу администратора...

• Разработка программного обеспечения, Постановка задачи на разработку программного обеспечения, Разработка состава программы - Методика обеспечения сбоеустойчивости программируемой логической интегральной схемы для ракетно-космического применения

  Постановка задачи на разработку программного обеспечения Для того чтобы предлагаемая схема была интегрирована в САПР, который не имеет функции интеграции...

• 1.3 Языки программирования и программные платформы для создания программных агентов - Средства для создания программных агентов

  Для программирования агентов могут применяться: универсальные языки (Java, C++ , Visual Basic и др.), языки представления знаний (SL, KIF), языки...

• 1.2 Описание инструментария для создания программных агентов - Средства для создания программных агентов

  Для создания программных агентов используют языки описания и реализации, которые удобно представить в виде многослойной структуры, включающей пять слоев:...

• Программная реализация системы регистрации речи диспетчерских переговоров, Общее описание программного обеспечения, реализующего разработанный алгоритм - Разработка системы регистрации новых пользователей

  Общее описание программного обеспечения, реализующего разработанный алгоритм Основной идеей дипломного проекта, является реализация алгоритма...

• Выбор средств разработки - Разработка автоматизированной информационной системы для устранения различий в структурах баз данных разработчиков, при работе над общим проектом с использованием системы контроля версий

  Для написания АИС использовались следующие языки программирования, программные средства и библиотеки: - Язык программирования PHP 5.4; -...

• Автоматизация тестирования - Разработка автоматических тестов для тестирования новой функциональности программного обеспечения

  Автоматизированное тестирование программного обеспечения - это процесс проверки программного обеспечения, который включает в себя такие шаги как запуск,...

• Особенности параллельного порта - Разработка программно-аппаратного комплекса для мониторинга рентгеновского симулятора SLS-9

  Основным достоинством интерфейса Centronics является его стандартность - он есть на каждом компьютере и на всех компьютерах работает одинакового (правда...

• Применение, Назначение программы, Условия применения, Справочная система - Разработка программного приложения "Калькулятор коммунальных услуг"

  Назначение программы Программное средство на тему "Калькулятор коммунальных услуг" предназначено для повышения эффективности расчета коммунальных...

• ВВЕДЕНИЕ - Разработка инвестиционного проекта по созданию организации, занимающейся сборкой и продажей компьютерной техники в среде программного комплекса "Project Expert"

  Бизнес - планирование, являясь нормой любой предпринимательской деятельности, необходимо для предвидения будущей ситуации, стратегических решений и для...

• Обзор существующих аналогов, Информационная база задачи, Входная и выходная информация, Формулировка задачи - Разработка и сопровождение программного обеспечения

  На данный момент существует множество аналогов данного приложения, можно выделить такие как стандартный проводник Windows и Total Commander. Заказчику...

• Глава I. Анализ предметной области, 1.1 Анализ существующих программных агентов - Средства для создания программных агентов

  1.1 Анализ существующих программных агентов Согласно классическому определению, программный агент -- это программа-посредник. Эти посредники...

• Применение технологий Big Data, Обоснование выбора средств разработки проекта - Технологии больших данных: анализ и выбор решения для реализации проекта

  Обоснование выбора средств разработки проекта Для реализации корпоративной информационной системы "Бюджетное планирование и отчетность" в исследуемой...

• Лабораторная работа № 6. Программирование шаблона классов - Технология разработки программного обеспечения систем управления

  Цель Работы - изучить приемы создания и использования шаблонов классов. - Теоретические сведения Достаточно часто встречаются классы, объекты которых...

Заключение - Разработка программного средства, позволяющего оптимизировать SQL-скрипты

Предыдущая | Следующая