Базы данных (Data Base)

2023-04-15 08:31:01 Оконные функции SQL простым языком с примерами

Сразу хочется отметить, что данная статья написана исключительно для людей, начинающих свой путь в изучении SQL и оконных функций. Здесь могут быть не разобраны сложные применения функций и могут не использоваться сложные формулировки определений - все написано максимально простым языком для базового понимания.

P.S. Если автор что-то не разобрал и не написал, значит он посчитал это не обязательным в рамках этой статьи)))

Для примеров будем использовать небольшую таблицу, которая показывает оценки учеников по разным предметам. В БД табличка выглядит следующим образом

https://habr.com/ru/articles/664000/

#db

@database_info Открыть/Комментировать

2023-04-14 10:36:06 MySQL. Работа с бекапами.

Делаем бекап
mysqldump -u USER -pPASSWORD DATABASE > /path/to/file/dump.sql

Создаём структуру базы без данных
mysqldump --no-data - u USER -pPASSWORD DATABASE > /path/to/file/schema.sql

Если нужно сделать дамп только одной или нескольких таблиц
mysqldump -u USER -pPASSWORD DATABASE TABLE1 TABLE2 TABLE3 > /path/to/file/dump_table.sql

Создаём бекап и сразу его архивируем
mysqldump -u USER -pPASSWORD DATABASE | gzip > /path/to/outputfile.sql.gz

Создание бекапа с указанием его даты
mysqldump -u USER -pPASSWORD DATABASE | gzip > `date +/path/to/outputfile.sql.%Y%m%d.%H%M%S.gz`

Заливаем бекап в базу данных
mysql -u USER -pPASSWORD DATABASE < /path/to/dump.sql

Заливаем архив бекапа в базу
gunzip < /path/to/outputfile.sql.gz | mysql -u USER -pPASSWORD DATABASE
или так
zcat /path/to/outputfile.sql.gz | mysql -u USER -pPASSWORD DATABASE

Создаём новую базу данных
mysqladmin -u USER -pPASSWORD create NEWDATABASE

Удобно использовать бекап с дополнительными опциями -Q -c -e, т.е.
mysqldump -Q -c -e -u USER -pPASSWORD DATABASE > /path/to/file/dump.sql, где:
-Q оборачивает имена обратными кавычками
-c делает полную вставку, включая имена колонок
-e делает расширенную вставку. Итоговый файл получается меньше и делается он чуть быстрее


Для просмотра списка баз данных можно использовать команду:
mysqlshow -u USER -pPASSWORD

А так же можно посмотреть список таблиц базы:
mysqlshow -u USER -pPASSWORD DATABASE

Для таблиц InnoDB надо добавлять --single-transaction, это гарантирует целостность данных бекапа.
Для таблиц MyISAN это не актуально, ибо они не поддерживают транзакционность.

Общие факты
Полезно под каждую базу на боевом сервере создавать своего пользователя
Кодировка базы может быть любой, если она UTF8
В большинстве случаев лучше использовать движок InnoDB
В php лучше забыть про сильно устаревшее расширение mysql и по-возможности использовать pdo или mysqli
Новую копию MySQL всегда можно настроить и оптимизировать
Без особой нужды не стоит открывать MySQL наружу. Вместо этого можно сделать проброс портов
ssh -fNL LOCAL_PORT:localhost:3306 REMOTE_USER@REMOTE_HOST

#db

@database_info Открыть/Комментировать

2023-04-13 11:30:47 Хотите научиться программировать, администрировать сети и развивать собственный бизнес? У вас есть отличная возможность получить необходимые знания и навыки, пройдя открытые практикумы по DevOps, Linux, Networks, Kubernetes, Docker, Ansible, Gitlab CI, Linux, Kafka, MySQL, Golang от REBRAIN.
️Более 20 бесплатных открытых практикумов каждый месяц!
Эти практикумы созданы опытными профессионалами, которые предоставят вам реальный опыт и знания в данных областях. Спикеры — профессиональные инженеры из лучших компаний ( Avito / Skyeng / AWS / Luxoft / DataArt и др.).

Наши открытые практикумы идеально подойдут как для новичков, так и для профессионалов, которые хотят улучшить свои навыки.

Присоединяйтесь к нашему Telegram-каналу уже сегодня и станьте настоящим профессионалом в области DevOps! Открыть/Комментировать

2023-04-13 07:07:01 Основные концепции баз данных

Реляционная модель данных - это модель представления и организации данных в базе данных. В реляционной модели данные хранятся в виде таблиц, состоящих из строк и столбцов. Каждая таблица имеет имя и структуру, определяемую набором столбцов и их типами данных.

Таблица - это основной объект в реляционной модели данных, который хранит данные в виде строк и столбцов. Каждая таблица имеет уникальное имя и структуру, определяемую набором столбцов и их типами данных. В таблице каждая строка представляет собой запись, а каждый столбец представляет собой конкретное свойство или атрибут объекта.

Столбец - это одно поле в таблице, которое хранит данные одного типа. Каждый столбец имеет уникальное имя и тип данных, который определяет, какой тип данных может храниться в столбце.

Строка - это одна запись в таблице, которая содержит данные для каждого столбца. Каждая строка в таблице имеет уникальный идентификатор, который называется ключом. Ключ может быть составным, т.е. может включать несколько столбцов.

Ключ - это уникальный идентификатор для каждой записи в таблице. Ключ может быть составным, т.е. может включать несколько столбцов, которые вместе обеспечивают уникальность записи в таблице. Ключ используется для связывания данных в разных таблицах и для обеспечения быстрого доступа к данным.

Внешний ключ - это связь между двумя таблицами, которая используется для связывания данных в этих таблицах. Внешний ключ - это столбец в одной таблице, который ссылается на ключ в другой таблице. Это позволяет связывать данные в разных таблицах и создавать отношения между ними.

Индекс - это структура данных, которая позволяет быстро находить данные в таблице. Индекс создается для одного или нескольких столбцов в таблице и хранит ссылки на соответствующие записи в таблице. Использование индексов может значительно ускорить выполнение запросов к таблице.

Запрос - это команда на извлечение данных из таблицы или таблиц в базе данных. Запросы могут включать операции выборки, сортировки, фильтрации и группировки данных. Результатом выполнения запроса является набор данных, который может быть использован для дальнейшей обработки или отображения пользователю.

SQL - это язык структурированных запросов, который используется для работы с реляционными базами данных. SQL позволяет выполнять операции на создание, изменение и удаление таблиц и данных в них, а также на извлечение данных из таблиц с помощью запросов. SQL является стандартом для работы с реляционными базами данных и используется в большинстве СУБД.

#db

@database_info Открыть/Комментировать

2023-04-11 21:45:09 Самоучитель PostgreSQL Полный курс 2022 (Eng ver)

В этом видеоуроке по PostgreSQL я предоставляю полный курс, который вы можете использовать для освоения PostgreSQL. Postgres - это объектно-реляционная база данных, которая так же быстра, как и MySQL, более точно придерживается стандартов SQL и превосходит ее по параллельности. Postgres также лучше предотвращает повреждение данных.

Postgres также предоставляет более продвинутые типы данных и позволяет создавать пользовательские типы, операторы и типы индексов.
Postgres обычно является лучшим вариантом, если для вас наиболее важны расширяемость, масштабируемость и целостность данных.

Code & Transcript https://github.com/derekbanas/postgresql-tutorial

#db

@database_info Открыть/Комментировать

2023-04-10 18:01:02 Roadmap по изучению SQL за 2 месяца

Неделя 1: Основы SQL
Изучение базовых концепций SQL, таких как таблицы, столбцы, строки и типы данных
Создание простых SELECT запросов для извлечения данных из таблицы
Изучение фильтрации данных с помощью операторов WHERE и LIKE

Неделя 2: Расширенные SELECT запросы
Изучение агрегирующих функций, таких как COUNT, SUM, AVG и MAX/MIN
Изучение GROUP BY и HAVING для группировки и фильтрации данных
Изучение операторов JOIN для объединения данных из нескольких таблиц

Неделя 3: Создание и изменение таблиц
Изучение команды CREATE TABLE для создания новых таблиц
Изучение команды ALTER TABLE для изменения структуры таблицы
Изучение команды DROP TABLE для удаления таблицы

Неделя 4: Изменение и удаление данных
Изучение команды INSERT для добавления новых строк в таблицу
Изучение команды UPDATE для изменения существующих строк
Изучение команды DELETE для удаления строк из таблицы

Неделя 5: Основы баз данных
Изучение концепций баз данных, таких как первичные и внешние ключи
Изучение команды CREATE DATABASE для создания новой базы данных
Изучение команды USE для выбора базы данных для работы

Неделя 6: Работа с индексами и ограничениями
Изучение индексов для ускорения поиска данных в таблице
Изучение ограничений для защиты данных и обеспечения целостности таблицы

Неделя 7: Работа с представлениями и хранимыми процедурами
Изучение представлений для создания виртуальных таблиц на основе запросов
Изучение хранимых процедур для создания пользовательских функций и процессов

Неделя 8: Закрепление изученного материала
Повторение и углубление знаний с помощью практических заданий и проектов
Подготовка к сертификационным экзаменам, если это необходимо

#db

@database_info Открыть/Комментировать

2023-04-10 13:00:22 Кафка — это будущее для всех, кто хочет работать с лучшим брокером сообщений. Kafka выступает «буфером» для нагрузки и позволяет добиться задержек доставки данных в несколько миллисекунд.

С каждым годом Kafka становится все более актуальной технологией, а специалисты со знанием Kafka все более востребованными . 

И задачи, с которыми они сталкиваются, очень разнообразны. Одна из таких — работа с Apache Kafka в приложениях на Spring Boot. 

Эту задачу разберем на открытом уроке 13 апреля в 20:00 мск в OTUS вместе с сертифицированным Java-разработчиком, Сергеем Петрелевичем. Занятие пройдет в рамках онлайн-курса «Apache Kafka» в OTUS.

Вебинар — это отличный способ не только расширить свои знания, но и познакомиться с курсом и преподавателем.  

Продолжить занятия и вырасти в профессии вы сможете на курсе. Главное — успеть, пока он доступен в рассрочку.

Чтобы присоединиться, пройдите вступительный тест https://otus.pw/NOMN/

 Реклама. Информация о рекламодателе на сайте otus.ru Открыть/Комментировать

2023-04-10 11:51:40 Подборка вопросов и задач по SQL на собеседовании с ответами

Назовите типы джойнов в SQL
Ответ:
INNER, JOIN LEFT, JOIN RIGHT, JOIN FULL, JOIN CROSS

Чем NULL отличается от 0
Ответ:
0 - это число.
NULL - это не число, а также NULL не является значением пустой строки. NULL используется для указания того, что данные отсутствуют, неизвестны, неприменимы. NULL не равен ничему, даже другому NULL.

Какие параметры используются в конструкции order by?
Ответ:
ASC и DESC

Какой оператор имеет больший приоритет AND или OR (если они используются совместно)?
Ответ:
AND имеет больший приоритет, нежели OR

Какие операторы обязательны при выборке данных с соединением таблиц (не учитывая cartesian product)?
Ответ:
SELECT, JOIN, FROM

Какие из операторов SQL могут быть использованы для выполнения CRUD (Create, Read, Update, Delete) операций над данными?
Ответ:
INSERT, DELETE, SELECT, UPDATE

С помощью какого запроса можно удалить все записи из таблицы?
Ответ:
DELETE FROM

Для чего нужен оператор UNION?
Ответ:
Для объединения двух таблиц, при условии что каждая имеет одинаковое количество столбцов, столбцы имеют схожие типы данных, столбцы располагаются в том же порядке.

Какой оператор используется для изменения объектов базы данных?
Ответ:
ALTER

Что такое оконная функция? И в чем отличие от функции агрегации с группировкой?
Ответ:
Оконная функция в SQL - функция, которая работает с выделенным набором строк (окном, партицией) и выполняет вычисление для этого набора строк в отдельном столбце.
При использовании агрегирующих функций предложение GROUP BY сокращает количество строк в запросе с помощью их группировки. При использовании оконных функций количество строк в запросе не уменьшается по сравнению с исходной таблицей.

#SQL

@database_info Открыть/Комментировать

2023-04-08 14:01:46 Юбилейная 35-я выставка "СВЯЗЬ 2023" и 250 компаний-экспонентов уже с 11 апреля!
Ждем профессионалов коммуникационных технологий, ИТ и телеком-отрасли на Российской неделе высоких технологий в Экспоцентре!
250 экспонентов выставки "СВЯЗЬ 2023" и НАВИТЕХ, эксклюзивные национальные экспозиции Китая и Ирана — посмотреть всех участников-2023
Регистрация и ваш бесплатный электронный билет
Знакомьтесь с Деловой программой «Российской недели высоких технологий - 2023»

Присоединяйтесь к сообществу единомышленников и экспертов, и принимайте участие в ключевом мероприятии отрасли!
Ждем на выставке "СВЯЗЬ 2023. ИТ-технологии. Телекоммуникации"!

#ИТ #софт #телеком #связь #технологии #инновации #hitech Открыть/Комментировать

2023-04-08 10:43:32 Что такое SQL ИНДЕКСЫ за 10 минут: Объяснение с примерами

В этом видео мы узнаем:
- Что такое индексация в SQL
- Для чего нужна индексация
- Как работает индексация
- Что такое двоичный поиск
- Что такое план выполнения запроса
- Когда лучше использовать индексы
- Когда лучше НЕ использовать индексы
- Что такое кластеризованный индекс
- Что такое некластеризованный индекс

источник

#db

@database_info Открыть/Комментировать