Администрирование баз данных sql

ТОП 20 статей по Microsoft SQL Server для администратора

Приветствую Вас на сайте Info-Comp.ru! В этом материале я собрал 20 лучших своих статей, посвященных работе с Microsoft SQL Server. Подборка ориентирована на администраторов, которые выполняют различные задачи администрирования баз данных и управления SQL сервером.

Данная подборка статей поможет Вам повысить свой уровень знаний Microsoft SQL Server, так как здесь присутствуют статьи разной направленности и с разным уровнем сложности, начиная от инструкций по установке SQL Server и заканчивая написанием различных T-SQL инструкций для выполнения и автоматизации административных задач.

Все статьи написаны лично мной и расположены они на этом же сайте в открытом доступе, поэтому Вам не требуется посещать какие-то сторонние ресурсы, для того чтобы прочитать их.

В данной подборке статьи никак не упорядочены, можете читать их в произвольном порядке.

Если Вас интересует язык T-SQL, то рекомендую ознакомиться со следующими подборками:

Итак, давайте приступать.

Установка Microsoft SQL Server на Windows

В данной статье подробно рассмотрен процесс установки Microsoft SQL Server 2019 Express и SQL Server Management Studio (SSMS) на операционную систему Windows 10, также
Вы узнаете, где скачать данную СУБД.

Установка Microsoft SQL Server на Linux Ubuntu Server

Microsoft SQL Server, начиная с 2017 версии, поддерживает работу на операционной системе Linux, в этой статье подробно рассказано о том, как установить Microsoft SQL Server 2017 в редакции Express на Linux Ubuntu Server 18.04.

Установка SQL Server Management Studio

Из данного материала Вы узнаете, что такое SSMS, какие особенности у среды SQL Server Management Studio, а также как установить SSMS на компьютер.

Создание и удаление пользователей

В этом материале рассмотрены примеры создания и удаления пользователей в Microsoft SQL Server как с использованием инструкций T-SQL, так и с использованием среды SQL Server Management Studio.

Сжатие базы данных и журнала транзакций

Сжатие БД — это процесс удаления неиспользуемого пространства в файлах базы данных и журнала транзакций.

Если Вы столкнулись с проблемой значительного увеличения физического размера базы данных и файлов журнала транзакций, то, возможно, Вам поможет процедура сжатия БД, тем самым Вам не нужно будет предпринимать какие-либо действия, связанные с увеличением свободного пространства на жестком диске.

Из данного материала Вы узнаете, как выполнить процедуру сжатия базы данных в Microsoft SQL Server.

Отсоединение и присоединение баз данных

В Microsoft SQL Server есть возможность отсоединения и присоединения базы данных, в этом материале мы рассмотрим, в каких случаях эта возможность будет нам полезна и, конечно же, рассмотрим примеры реализации данной возможности, причем разными способами.

Перемещение файлов базы данных на другой диск

В данном материале мы рассмотрим возможность перемещения файлов базы данных Microsoft SQL Server на новый жесткий диск с помощью инструкции ALTER DATABASE…MODIFY FILE.

Настройка компонента Database Mail

В данной статье рассмотрен компонент Database Mail, входящий в состав Microsoft SQL Server, Вы узнаете, что это за компонент, для чего он нужен, как его настроить и, конечно же, как им пользоваться.

Настройка связанного сервера с Oracle

Microsoft SQL Server позволяет обращаться к различным источникам данных, которые расположены вне SQL сервера, это возможно благодаря технологии связанных серверов. В этом материале рассмотрен пример настройки связанного сервера с СУБД Oracle.

Полнотекстовый поиск (Full-Text Search)

В этой статье рассмотрен компонент Full-Text Search Microsoft SQL Server, с помощью которого можно реализовать полнотекстовый поиск.

Полнотекстовый поиск – это поиск слов или фраз в текстовых данных.

Системная процедура sp_configure

В Microsoft SQL Server для управления ресурсами сервера используются параметры конфигурации, в данном материале рассмотрена системная хранимая процедура sp_configure, с помощью которой можно просматривать и изменять эти параметры.

Массовое перестроение индексов (переиндексация БД)

В этом материале рассмотрен пример реализации процедуры для массовой переиндексации (перестроение, реорганизация индексов) базы данных в Microsoft SQL Server.

Данная процедура поможет Вам автоматизировать процесс обслуживания индексов в БД, при этом в ней учтены рекомендации Microsoft по поводу того, когда выполнять перестроение индексов, а когда их реорганизацию (на основе степени фрагментации).

Как узнать размер базы данных

Из данного материала Вы узнаете несколько способов, как можно определить размер базы данных в Microsoft SQL Server.

Как получить список баз данных

В этой статье рассмотрено два способа, как можно получить список баз данных на языке T-SQL в Microsoft SQL Server. Первый способ заключается в использовании системного представления sys.databases, второй — в использовании системной хранимой процедуры sp_helpdb.

Как получить список всех таблиц в базе данных

Из данной статьи Вы узнаете несколько способов, как можно получить список всех пользовательских таблиц в Microsoft SQL Server, включая некоторые их характеристики с помощью SQL запроса.

Как сгенерировать SQL скрипт создания объектов и данных

Из данного материала Вы узнаете, как сгенерировать SQL скрипт создания объектов базы данных Microsoft SQL Server, используя графическую среду SQL Server Management Studio (SSMS). Также Вы узнаете, что вообще такое SQL скрипт объектов базы данных.

Как узнать дату и время запуска или перезапуска SQL Server

В этом материале представлено несколько способов, как можно узнать дату и время запуска или перезапуска Microsoft SQL Server, так как иногда данная информация бывает очень полезной.

Как узнать, относится ли пользователь к определенной группе или роли

В данной статье рассмотрены функции IS_MEMBER и IS_SRVROLEMEMBER языка T-SQL, с помощью которых можно определить принадлежность пользователя к группе или роли.

Обращение к Excel из Microsoft SQL Server

Из данного материала Вы узнаете, как из Microsoft SQL Server встроенными средствами языка T-SQL обратиться к данным в файле Excel, а также какие условия для этого необходимо выполнить.

Сравнение и синхронизация баз данных

В этом материале рассмотрен пример сравнения и синхронизации двух баз данных Microsoft SQL Server. Кроме того, Вы узнаете, зачем вообще может потребоваться выполнять данную процедуру.

На сегодня это все, надеюсь, подборка была Вам полезна, пока!

Введение в администрирование MySQL

С развитием систем баз данных процедуры инсталляции и использования MySQL становятся все проще. Судя по всему, именно простота работы с MySQL стала основной причиной широкой ее популярности среди пользователей. Особенно это относится к тем из них, которые не являются, да и не желают быть программистами. Безусловно, знания компьютерного профессионала могут оказаться весьма полезными, но для успешного использования MySQL быть опытным программистом вовсе не обязательно.

Однако и полностью без управления MySQL работать также не может. Администратор должен хотя бы иногда проверять согласованность и эффективность ее работы и знать, что делать при возникновении проблем. Вся эта информация представлена далее

Этот курс посвящен рассмотрению различных аспектов администрирования MySQL . В этой лекции представлено описание всех основных вопросов, которыми необходимо владеть для успешного выполнения задач по администрированию инсталляцией MySQL. Она же включает краткий обзор всех обязанностей администратора. Инструкции по их выполнению рассматриваются в следующих лекциях.

Представленный далее в этой лекции длинный список обязанностей может не на шутку напугать начинающего или неопытного администратора. Каждая указанная в списке задача действительно очень важна, однако не стоит пробовать освоить их все сразу. Гораздо лучше использовать лекции этого курса в качестве справочного руководства, которое всегда под рукой и в которое при необходимости можно заглянуть.

Уже имеющие опыт работы администраторы могут заметить, что администрирование MySQL подобно администрированию других систем управления базами данных. Опыт администрирования других систем просто неоценим. В то же время, администрирование MySQL имеет свои уникальные особенности, которые и описываются в этом курсе.

Обзор задач администрирования

СУБД MySQL состоит из нескольких основных компонентов. Знание их сути и предназначения поможет лучше понять природу управляемой системы и принципы работы различных ее средств. Настоятельно рекомендуется потратить немного времени, чтобы хорошенько разобраться в представленном далее материале. Это значительно упростит дальнейшую работу. В частности, необходимо вникнуть в следующие аспекты работы MySQL.

• Сервер MySQL. Сервер mysqld выполняет все операции с базами данных и таблицами. Для запуска сервера, мониторинга его работы и перезапуска в случае сбоя применяется программа safe_mysqld (демон)
• Клиентские программы и утилиты MySQL. Для взаимодействия с сервером и выполнения ряда административных задач используются различные программы MySQL, наиболее важными среди которых являются следующие:
  • mysql. Интерактивная программа, позволяющая отправлять SQL-запросы на сервер и просматривать результаты их выполнения.
  • mysqladmin. Административная программа, позволяющая выполнять такие операции, как завершение работы сервера, создание и удаление баз данных. Эту же программу можно применять для проверки состояния сервера, если что-то в его работе не так.
  • isamchk или myisamchk. Утилиты, предназначенные для анализа и оптимизации таблиц, а также восстановления их в случае повреждения.
  • mysqldump. Средство резервирования баз данных или их копирования на другой сервер.
  • SQL — язык сервера. Некоторые задачи администрирования можно выполнить только с помощью утилиты командной строки mysqladmin . Иногда гораздо эффективней справиться с задачей может администратор, который может «общаться» с сервером на его языке. Предположим, что необходимо проверить, почему привилегии пользователя работают вовсе не так, как ожидается. Напрямую «поговорить» с сервером на человеческом языке, к сожалению, нельзя. Зато можно воспользоваться программой-клиентом mysql и послать SQL-запрос для анализа таблиц разрешений.

  Незнакомым с операторами SQL пользователям следует разобраться по крайней мере в базовых принципах их работы. Незнание SQL — достаточно серьезное препятствие, и время, затраченное на изучение этого языка, окупится очень быстро. Конечно, чтобы стать настоящим «знатоком SQL «, придется напряженно учиться и достаточно долго практиковаться. Познакомиться же с основами этого языка можно за весьма короткий промежуток времени. Более детально о языке SQL и использовании клиентской программы, работающей с командной строкой, рассказывается в курсе «Введение в MySQL».

  Администрирование баз данных

  Все об администрировании БД

  Все подряд

  Лучшие

  Авторы

  Как мы делали ядро инвестиционного бизнеса «Альфа-Банка» на базе Tarantool

  
  Кадр из фильма «Our Secret Universe: The Hidden Life of the Cell»

  Инвестиционный бизнес — это одно из сложнейших направлений в банковском мире, потому что здесь есть не только кредиты, займы и депозиты, но и ценные бумаги, валюта, товары, деривативы и всякие сложности в виде структурных продуктов.

  В последнее время мы наблюдаем рост финансовой грамотности населения. Всё больше людей вовлекается в торговлю на рынках ценных бумаг. Индивидуальные инвестиционные счета появились не так давно. Они позволяют вам торговать на рынках ценных бумаг и при этом либо получать налоговые вычеты, либо не платить налоги. И все клиенты, которые к нам приходят, хотят управлять своим портфелем и видеть отчётность в реальном времени. Причем чаще всего этот портфель мультипродуктовый, то есть люди являются клиентами различных направлений бизнеса.

  Кроме того, растут и потребности регуляторов, как российских, так и зарубежных.

  Чтобы соответствовать текущим потребностям и заложить фундамент для будущих модернизаций, мы разработали ядро инвест-бизнеса на основе Tarantool.

  Новости

  Релиз InterSystems IRIS 2020.1

  

  В конце марта вышла новая версия платформы данных InterSystems IRIS 2020.1. Даже пандемия коронавируса не предотвратила релиз.

  Из важного в новом релизе — повышение быстродействия ядра, генерация REST-приложения по спецификации OpenAPI 2.0, шардинг для объектов, новый вид Портала Управления, поддержка MQTT, универсальный кеш запросов, новый фреймворк для создания элементов продукции на Java или .NET. Полный список изменений и Upgrade Checklist на английском языке можно найти по ссылке. Подробнее — под катом.

  Практика обновления версий PostgreSQL. Андрей Сальников

  Предлагаю ознакомиться с расшифровкой доклада 2018 года Андрея Сальникова «Практика обновления версий PostgreSQL»

  В большинстве своем, системные администраторы и ДБА бояться как огня делать мажорные обновления версий баз данных (RDBMS), особенно если эта база данных в эксплуатации и имеет достаточно высокую нагрузку. Главной причиной тому некоторый даунтайм базы данных, который всегда подразумевается при планировании таких работ.

  На практике, такого рода upgrade занимает довольно длительное время и зачастую администраторам с малым опытом подобных операций приходится откатываться на старую версию баз данных из-за достаточно банальных ошибок, которые можно было бы избежать еще на этапе подготовки.

  В Data Egret мы накопили огромный опыт проведения мажорных апгрейдов PostgreSQL в проектах, где нет права на ошибку. Я поделюсь своим опытом и расскажу о следующих шагах процесса: как правильно подготовиться к upgrade-у PostgreSQL? что необходимо сделать на этапе подготовки? как запланировать последовательность действий на сам upgrade? как провести процедуру upgrade-а успешно, без возврата на предыдущую версию бд? как минимизировать или вообще избежать простоя всей системы во время upgrade-а? какие действия необходимо выполнить после успешного upgrade-а PostgreSQL? Я также расскажу про две наиболее популярные процедуры апгрейда PostgreSQL — pg_upgrade и pg_dump/pg_restore, плюсы и минусы каждого из методов и расскажу про все типичные проблемы на всех этапах этой процедуры, и как их избежать.

  Доклад будет интересен как новичкам так и тем ДБА которые уже давно работают с PostgreSQL, но хотят побольше узнать о том как правильно планировать и проводить upgrade максимально безболезненно.

  

  Kilor 31 марта 2020 в 09:45

  PostgreSQL Antipatterns: вычисление условий в SQL

  В процессе оптимизации плана исполнения запроса PostgreSQL может произвольным образом «переставлять» эквивалентные условия, не вычислять какие-то из них для отдельных записей, относить к условию применяемого индекса… Короче, проще всего считать, что вы заранее не можете управлять тем, в каком порядке будут (и будут ли вообще) вычисляться равноправные условия.

  Поэтому если управлять приоритетом все-таки хочется, надо структурно сделать эти условия неравными с помощью условных выражений и операторов.

  

  Рекомендуем

  • 

  Умный асфальт и умный кастет: опрос про эти и другие умные вещи

  

  Идея на 10 миллионов: оцениваем потенциал стартапов вместе

  

  Тест для настоящих Java-чемпионов

  Резервные копии с WAL-G. Что там в 2019? Андрей Бородин

  Предлагаю ознакомиться с расшифровкой доклада начала 2019 года Андрея Бородина «Резервные копии с WAL-G. Что там в 2019?»

  

  Поиск и устранение проблем в Postgres с помощью pgCenter. Алексей Лесовский

  Предлагаю ознакомиться с расшифровкой доклада начала 2019 года Алексея Лесовского — «Поиск и устранение проблем в Postgres с помощью pgCenter»

  Время от времени при эксплуатации Postgres’а возникают проблемы, и чем быстрее найдены и устранены источники проблемы, тем благодарнее пользователи. pgCenter это набор CLI утилит которые является мощным средством для выявления и устранения проблем в режиме «здесь и сейчас». В этом докладе я расскажу как эффективно использовать pgCenter для поиска и устранения проблем, в каких направлениях осуществлять поиск и как реагировать на те или иные проблемы, в частности, как:

  • проверить, все ли в порядке с Postgres’ом;
  • быстро найти плохих клиентов и устранить их;
  • выявлять тяжелые запросы;
  • и другие полезные приемы с pgCenter.

  

  Kilor 26 марта 2020 в 10:20

  Рецепты для хворающих SQL-запросов

  За прошедшее время вы уже воспользовались им более 6000 раз, но одна из удобных функций могла остаться незамеченной — это структурные подсказки, которые выглядят примерно так:

  

  Прислушивайтесь к ним, и ваши запросы «станут гладкими и шелковистыми». 🙂

  А если серьезно, то многие ситуации, которые делают запрос медленным и «прожорливым» по ресурсам, типичны и могут быть распознаны по структуре и данным плана.

  В этом случае каждому отдельному разработчику не придется искать вариант оптимизации самостоятельно, опираясь исключительно на свой опыт — мы можем ему подсказать, что тут происходит, в чем может быть причина, и как можно подойти к решению. Что мы и сделали.

  

  Давайте чуть подробнее рассмотрим эти кейсы — как они определяются и к каким рекомендациям приводят.

  AdBlock похитил этот баннер, но баннеры не зубы — отрастут

  ClickHouse в Авито: посиделки в прямом эфире с Алексеем Миловидовым

  Привет, Хабр! 9 апреля с 17:00 до 20:00 наши инженеры соберутся на уютные посиделки с главным разработчиком ClickHouse Алексеем Миловидым. Поговорим про то, как мы используем систему управления базами данных в Авито, с какими сложностями сталкиваемся, и зададим Алексею вопросы о настоящем и будущем ClickHouse.

  По понятным причинам мы сейчас не проводим мероприятия в офисе, так что приглашаем всех смотреть прямую трансляцию встречи. Формат: три микродоклада и большая Q&A сессия, где зрители смогут задать свои вопросы.

  

  PostgreSQL. Добавляем not null constraints в большие таблицы

  

  Проекты развиваются, клиентская база увеличивается, базы данных разрастаются, и наступает момент, когда мы начинаем замечать, что некогда простые манипуляции над базами данных требуют более сложных действий, а цена ошибки сильно повышается. Уже нельзя за раз промигрировать данные с одного столбца в другой, индексы лучше накатывать асинхронно, добавлять столбцы с default значениями теперь нельзя.

  Одной из команд, с которой надо быть осторожным на таблицах с большим количеством записей, является добавление not null constraint на столбец. При добавлении данного constraint PostgreSQL приобретает access exclusive lock на таблицу, в результате чего другие сессии не могут временно даже читать таблицу; затем БД проверяет, что в столбце действительно ни одного null нет, и только после этого вносятся изменения. Под катом я рассмотрю различные варианты, как можно добавить not null constraint , лоча таблицу на минимально возможное время или даже не лоча ее совсем.

  Книга «Базы данных. Инжиниринг надежности»

  Привет, Хаброжители! В сфере IT произошла настоящая революция — с инфраструктурой стали работать как с кодом. Этот процесс создает не только новые проблемы, но и возможности для обеспечения безотказной работы баз данных. Авторы подготовили это практическое руководство для всех, кто желает влиться в сообщество современных инженеров по обеспечению надежности баз данных (database reliability engineers, DBRE).

  В этой книге: • требования к сервисам хранения данных и управление рисками. • создание и развитие архитектуры, обеспечивающей прозрачную поддержку базы данных. • оптимизация процесса управления релизами. • хранение, индексирование и репликация данных. • определение характеристик хранилища данных и подбор оптимальных вариантов его использования. • исследование компонентов архитектуры и создание архитектур, ориентированных на обработку больших данных.

  Основы администрирования SQL Server (шпаргалка начинающего администратора)

  

  SQL Server для чайников

  Анализ рынка вакансий показал, что Вакансий для начинающего администратора баз данных (далее Junior DBA) мало и работодатель требует как минимум некоторый опыт работы в информационных технологиях, чаще,конечно, требуется реальный опыт работы с БД. Такая ситуация приводит к тому, что устроиться на данную вакансию сложно.

  Почему компании не хотят нанимать Junior DBA

  Базы данных являются центральным ядром многих компаний, они хранят в себе платежи, личные данные и корпоративную информацию, без которой существование организации станет невозможным. Компании стремятся уменьшить риски потери или утечки информации и не хотят брать на роль DBA сотрудников без опыта работы. По этой причине компании более склонны обучить своих сотрудников, чем брать начинающего DBA (Junior DBA).

  Обычно, большие компании берут Junior DBA на определённую работу, которая, как правило, низкоквалифицирована и направлена на помощь опытным администраторам баз данных (Senior DBA). В такой компании вы можете столкнуться с тем, что вам будет сложно пробиться дальше, так как никто не хочет терять работу, но для стажа работы и некоторого опыта общения этот вариант может быть интересен.

  Сертификация не так полезна для Junior DBA

  Не стремитесь к сертификатам в начале вашей карьеры. Сертификат — это как украшение новогодней Ёлки, но если ёлка не может устойчиво стоять, то украшения ей не помогут. Сертификат будет служить дополнительным плюсом при поиске работы, но не тратьте на него времени, если у вас нет базовых знаний администрирования.

  Когда полезна сертификация

  1. Для прохождения первых этапов отбора
  2. Для принятия решения в вашу пользу если кандидаты одинаковы
  3. Для поддержания вашего интереса к технологии
  4. Необходим для организаций, где есть тендеры

  Как выбрать место работы для Junior DBA

  В начале вашей карьеры следует обращать больше внимание не на зарплату, а на коллектив. Вам необходимо найти такое место работы, где вы сможете перенять опыт у ваших коллег. Вам очень повезёт, если вы сможете найти достойного наставника, тогда ваш карьерный рост будет стремительным. Если вы устраиваетесь на работу где нет других ДБА, то вам придётся самостоятельно проходить все сложности обучения и очень вероятно что это обучение будет сопровождаться авариями и другими сложностями, в таком случае будет полезно иметь знакомых, опытных администраторов БД, которым можно задать вопросы по телефону.

  Чтобы стать Senior DBA вам необходимо постоянно развиваться. Вот несколько вариантов как вы можете это делать:

  1. Посещать курсы
  2. Посещать мероприятия
  3. Читать сайты и форумы
  4. Задавать вопросы на форумах и сайтах
  5. Смотреть обучающее видео
  6. Старайтесь делать на работе больше, чем вас просят (изучать каждую тему глубже)

  Пора переходить к нашей теме.

  Что нужно знать начинающим администраторам БД:

  1. Модели восстановления (обязательная тема для любого кто планирует заниматься работой администратора баз данных. Эту тему надо понимать в полном объёме (FULL,LOG) (https://msdn.microsoft.com/ru-ru/library/ms189275.aspx)
     — FULL https://technet.microsoft.com/ru-ru/library/ms190217(v=sql.105).aspx
     — LOG https://technet.microsoft.com/ru-ru/library/ms191164.aspx
  2. После изучения моделей восстановления, обязательно проведите самостоятельное тестирование с полным и частичным восстановлением (Restore)
  3. Безопасность уровня БД и сервера
  4. Изучение лога ошибок
  5. Конфигурация и установка
  6. Простые запросы
  7. Базовые понятия производительности сервера (плохо ему или хорошо)
  8. Индексы и статистика
  9. CHECKDB
  10. Варианты отказоустойчивости (Log Shipping, Mirroring, Failover Cluser, AlwaysOn). Отказоустойчивость ни в коем случае не отменяет необходимость делать резервные копии

  Советы начинающим администраторам БД

  1. Делайте Backup перед любыми изменениями в БД
  2. Если вы выполняете добавление, обновление или удаление данных, то можно явно открыть транзакцию BEGIN TRANSACTION > выполнить ваш код > прочитать таблицу с параметром NOLOCK (позволяет читать незафиксированные данные) SELECT * FROM MyTable WITH (NOLOCK)> если всё прошло успешно, можно зафиксировать транзакцию — COMMIT TRANSACTION
  3. Пишите комментарии, они не раз помогут вам при разборе вашего кода, когда вы вернётесь к нему спустя некоторое время
  4. Скачайте для практики SQL Server Developer Edition (2014/16 бесплатны). Данная редакция имеет только одно ограничение — запрет на использование в продуктивных системах, что позволит вам практиковаться на всех компонентах SQL Server.
  5. Старайтесь отслеживать любые изменения на сервере БД, так как отвечать придётся именно вам, даже если изменения сделали другие
  6. Не вносите критические изменения, которые могут повлиять на производительность или доступность системы, без согласования с пользователями и вашим руководством

  В конце хотелось бы добавить, что во время интенсивного обучения крайне важно отдыхать. Хороший сон позволит вам лучше усваивать материал, а периодические перерывы помогут по другому смотреть на ситуацию, но ни в коем случае не путайте полезные перерывы с ленью.

  Вам так же будет полезно изучить вопросы для собеседование на позицию Администратор MS SQL SERVER