Твёрдотельные накопители (SSD) довольно прочно вошли в нашу жизнь. Даруя...
Примечание: Надстройка Power Query предлагается в Excel 2016 в виде группы команд Скачать и преобразовать . Информация в этой статье относится и к Power Query, и к новой группе. Дополнительные сведения см. в статье Функция "Скачать и преобразовать" в Excel 2016 .
В Power Query операция Добавить создает новый запрос, содержащий все строки из первого запроса, а затем все строки из второго запроса.
Примечание по безопасности: Уровни конфиденциальности предотвращают случайное объединение данных из нескольких источников, которые могут быть частными или организационными. При использовании некоторых запросов пользователь может непреднамеренно отправить данные из частного источника данных в другой источник. Этой возможностью могут воспользоваться злоумышленники. Power Query анализирует каждый источник данных и определяет для него уровень конфиденциальности: общедоступный, организационный и частный. Дополнительные сведения об уровнях конфиденциальности см. в статье Уровни конфиденциальности .
Выполнение добавления
Вы можете выполнить операцию добавления двух видов: промежуточное добавление или встроенное добавление . При использовании промежуточного добавления для каждой операции добавления создается новый запрос. При встроенном добавлении вы добавляете данные в существующий запрос, пока не достигнете конечного результата. Результатом является новый шаг в конце текущего запроса.
Встроенное добавление
Промежуточное добавление
См. также:
Примечание: Редактор запросов отображается только при загрузке, редактировании или создании нового запроса с помощью Power Query . В видео показано окно редактора запросов , которое отображается после изменения запроса в книге Excel. Чтобы просмотреть редактор запросов , не загружая и не изменяя существующий запрос в книге, в разделе Получение внешних данных на вкладке ленты Power Query выберите Из других источников > Пустой запрос . В видео показан один из способов отображения редактора запросов .
".
Возможно, ребятам из московского офиса некогда, поэтому далее будет вольный
перевод Query Language Reference (Version 0.7).
ИПП Визуализации Google. Язык запросов (Версия 0.7)
Язык
запросов ИПП Визуализации Google позволяет выполнять манипуляции с данными через запрос к источнику данных.
Язык запросов позволяет структурировать данные таким образом, которые нам необходимы для достижения результата.
Синтаксис языка запросов похож на SQL . Те, кто обладает навыком использования SQL, смогут быстро освоить язык запросов. В разделе синтаксиса указаны различия в этих языках.
Обратите внимание, что для визуализации не всегда есть необходимость использовать язык запросов. Требуется основание, чтобы его использовать. К содержанию .
Использование языка запросов
Вы можете добавить строку запроса к источнику данных двумя способами: из кода JavaScript или в качестве параметра к ссылке источника данных. Если ваша ссылка не содержит параметров запроса, то по умолчанию возвращается весь набор данных. Вы можете изменить этот набор, корректируя сам запрос к источнику данных. Если вы используете функцию QUERY в Таблицах Google, то вы можете пропустить следующие пункты и перейти к следующей части.Установка запроса из JavaScript
Чтобы установить строку запроса из кода JavaScript, необходимо вызвать метод setQuery класса google.visualization.Query .var query = new google.visualization.Query(DATA_SOURCE_URL);Строка запроса к источнику данных может быть добавлена с помощью параметра tq . Таким образом возможно использование визуализаций, которые были написаны другими разработчиками, просто корректируя свой набор данных.
query.setQuery("select dept, sum(salary) group by dept");
query.send(handleQueryResponse);
Строка запроса должна быть правильно закодирована как URL-параметр. Вы можете использовать функцию JavaScript encodeURIComponent для кодировки или сделать это вручную через инструмент в конце раздела .
Пример
Рассмотрим пример запроса для Таблицы Google (Запомните, что идентификаторы колонок это всегда буквы. Названия колонок при публикации это не идентификаторы. В запросе необходимо использовать именно идентификаторы колонок)После кодирования запрос будет выглядеть так:
select%20A%2C%20sum(B)%20group%20by%20AПоложим, что адрес Таблицы с данными следующий:
http://spreadsheets.google.com/a/google.com/tq?key=ABCDEДобавим параметр запроса &tq=YOUR_QUERY_STRING к ссылке на Таблицу и получим готовую строку запроса
http://spreadsheets.google.com/a/google.com/tq?key=ABCDE&tq=select%A%2C%20sum(B)%20group%20by%20A
Синтаксис языка
Обзор
Я зык запросов очень похож на SQL. Тем не менее есть некоторые особенности, которые необходимо учесть.Таблица данных
Этот документ содержит понятие "Таблица данных" для обозначения результатов запроса. Таблица состоит из строк и колонок. Каждая колонка обладает следующими свойствами:
- Идентификатор (или ID колонки) . Используется для ссылки на колонки Таблицы. Обратите внимание, что ссылаться на колонку необходимо только по идентификатору. Трюк : старайтесь не использовать пробелы в идентификаторах, это может вызвать затруднения в редактировании запроса. Кроме того, все идентификаторы с пробелами должны быть заключены в обратные кавычки.
- Метка . Это строка, которая как правило отображается для конечных пользователей. Например, легенда в круговой диаграмме или заголовок табличной диаграммы. Не применимо для функции QUERY() в Таблицах Google .
- Типы данных . Поддерживаются следующие типы данных: строка (string), число (number), логический тип (boolean), дата (date), дата и время (datetime), время (timeofday). Все значения в колонке будут иметь тип данных этой колонки или null. Эти типы данных очень похожи на типы из JavaScript, не не идентичны. Они описаны в разделе Литералы.
- Шаблоны форматирования . Таблицы данных может поддерживать шаблоны форматирования для всех или некоторых колонок. Они описаны в разделе Форматирование.
В данном документе в примерах используется таблица со следующими данными и типами колонок:
name string |
dept string |
lunchTime timeofday |
Salary |
hireDate date |
age number |
isSenior boolean |
seniorityStartTime datetime |
---|---|---|---|---|---|---|---|
John | Eng | 12:00:00 | 2005-03-19 | 35 | true | 2007-12-02 15:56:00 | |
Dave | Eng | 12:00:00 | 2006-04-19 | 27 | false | null | |
Sally | Eng | 13:00:00 | 2005-10-10 | 30 | false | null | |
Ben | Sales | 12:00:00 | 2002-10-10 | 32 | true | 2005-03-09 12:30:00 | |
Dana | Sales | 12:00:00 | 2004-09-08 | 25 | false | null | |
Mike | Marketing | 13:00:00 | 2005-01-10 | 24 | true | 2007-12-30 14:40:00 |
Операторы языка
Язык запросов состоит из следующих операторов, состоящих из одного или двух слов. Операторы должны следовать друг за другом в той последовательности, как они указаны в таблице:Оператор | Использование |
---|---|
select | Выбирает какие колонки и в каком порядке будут возвращены. Если оператор пропущен, то будут возвращены все колонки таблицы. |
Возвращает только те строки таблицы, которые соответствуют условию. Если оператор пропущен, то будут возвращены все строки таблицы. | |
group by | Группирует значения по строкам. |
pivot | Преобразует уникальные значения в колонках в новые колонки по примеру сводной таблицы. |
order by | Сортирует строки в зависимости от значений. |
limit | Устанавливает лимит строк, которые будут возвращены. |
offset | Пропускает заданное количество строк из выдачи. |
label | Устанавливает подписи для колонок. |
format | Форматирует значения в заданных колонках согласно шаблонам форматирования. |
options | Устанавливает дополнительные параметры. |
from | Оператор from не используется. |
Select
Оператор select указывает, какие колонки должны быть возвращены и в каком порядке. Если оператор не указан, или указан select * будут возвращены все колонки таблицы в их изначальном порядке. На колонки можно сослаться через идентификаторы, но не через метки. Идентификаторами в Таблицах Google являются имена столбцов из одной или двух букв (A, B, C, ..., AC, ... , DC, ...).Параметрами оператора могут быть идентификаторы колонок, агрегатные функции, скалярные функции или арифметические операторы.
Примеры:
select *email address date ):
select dept, salary
select max(salary)
Получим результат:
lunchTime | name |
---|---|
12:00:00 | John |
12:00:00 | Dave |
13:00:00 | Sally |
12:00:00 | Ben |
12:00:00 | Dana |
13:00:00 | Mike |
Для описания условий используются простые операторы сравнения <=, <, >, >=, =, !=, <> . Оба оператора!=, <> означают не равно . Строки сравниваются по их лексикографическому значению. Замечание, равенство проверяется через оператор = , а не через == как во многих языках . Сравнение с null производится через is null и is not null . При использовании QUERY() в Таблицах Google, обычно, строковое поле имеет пустое значение "" , а не null .
Вы можете объединить несколько условий используя логические операторы and, or, not . Чтобы определить явный приоритет используются скобки.
Оператор where также использует дополнительные операторы для более сложного сравнения строк. Эти операторы
используют два аргумента, которые должны быть строками, любой нестроковый аргумент (дата, число) будет преобразован в строку
перед сравнением. Сравнение зависит от регистра символов (для сглаживания этой особенности используйте скалярные функции
upper(), lower()).
contains - соответствие подстроке. Выражение вернет истину, если часть строки будет полностью соответствовать
заданному аргументу - подстроке. Например, where name contains "John" вернет "John", "John Adams", "Long John Silver"
но не "john adams"
.
Примеры:
select *Следующий пример показывает использование ссылок на идентификаторы с пробелами (email address ) и на идентификаторы, совпадающие с именами зарезервированных слов (date ):
select dept, salary
select max(salary)
select `email address`, name, `date`Применим следующий запрос к таблице из примера:
Получим результат:
lunchTime | name |
---|---|
12:00:00 | John |
12:00:00 | Dave |
13:00:00 | Sally |
12:00:00 | Ben |
12:00:00 | Dana |
13:00:00 | Mike |
В этой статье мы научимся отправлять запросы к базе данных через PHP . Данная статья очень важная, и её необходимо Вам обязательно понять. Однако, успокою Вас - материал очень простой, поэтому затруднений быть не должно.
Прежде, чем перейти к теме статьи, я заранее предупреждаю, что не буду подробно разбирать язык SQL . Вся необходимая информация разбирается в категории, посвящённой , а здесь мы только работаем с MySQL через PHP .
Теперь переходим к отправке запросов к базе данных в PHP :
}
$mysqli->query("INSERT INTO mytable (name, email) VALUES ("MyName", "[email protected]")");
$mysqli->close();
?>
В данном примере мы подключились к базе данных, проверили успешность подключения, отправили запрос с помощью метода query() , а затем закрыли подключение. Как видите, всё очень просто. Для отправки любых SQL-запросов достаточно всего одного метода - query() , поэтому в данном случае всё безумно просто.
Теперь чуть-чуть усложним задачу. Давайте с Вами разберём запросы, которые возвращают result_set - результат. Самый популярный запрос, возврающающий result_set - это выборка данных из таблицы. В следующем примере мы с Вами сделаем выборку данных, а затем выведем результат:
$mysqli = @new mysqli("localhost", "Admin", "pass", "mybase");
if (mysqli_connect_errno()) {
echo "Подключение невозможно: ".mysqli_connect_error();
}
$result_set = $mysqli->
while ($row = $result_set->fetch_assoc()) {
print_r($row);
echo "
";
}
$result_set->close();
$mysqli->close();
?>
Для начала немного поясню, что из себя представляет result_set . Result_set - это таблица с результатом. У этой таблицы есть набор записей (строки таблицы). И для вывода всех записей надо перебрать каждую строку таблицы и вывести её. А теперь поясняю пример: после отправки запроса у нас формируется result_set . Затем мы в цикле присваиваем переменной row значение очередной строки, то есть одномерный массив, который возвращает метод fetch_assoc() . Когда все строки закончатся, метод fetch_assoc() вернёт false , и будет произведён выход из цикла. Внутри цикла while мы просто выводим массив с использованием отладочной функции print_r() , хотя, безусловно, можно было бы вывести с использованием foreach , но сейчас это не нужно.
Давайте кратко подведём итог, как нужно работать с result_set :
- Получить result_set , отправив соответствующий запрос к базе данных.
- В цикле на каждой итерации присваивать следующую строку (запись) из result_set с использованием метода fetch_assoc() некоторой переменной row . Дальше Вы можете работать с этой переменной как с одномерным ассоциативным массивом, у которого ключи - это названия полей таблицы, а значения соответствуют текущей записи.
- Обязательно закройте result_set методом close() , чтобы осводить ресурсы.
Как Вы заметили, метод fetch_assoc() возвращает всегда следующую запись. То есть сначала 1-ю, потом 2-ю, потом 3-ю и так далее. Если у Вас есть неплохой опыт программирования, то Вы сразу догадаетесь, что это происходит благодаря внутреннему указателю, который Вы, разумеется, можете двигать. Где это используется? Например, это может использоваться, когда Вам необходимо поработать с result_set не 1 , а 2 и более раз. Чтобы заново не формировать тот же запрос, можно просто передвинуть указатель в начало. И тогда можно снова заниматься перебором result_set с помощью метода fetch_assoc().
Для изменения положения указателя существует метод data_seek() , который принимает целое число от 0 до "количества записей - 1 ", соответственно указатель встаёт на соответствующую параметру запись:
$mysqli = @new mysqli("localhost", "Admin", "pass", "mybase");
if (mysqli_connect_errno()) {
echo "Подключение невозможно: ".mysqli_connect_error();
}
$result_set = $mysqli->query("SELECT * FROM mytable");
$result_set->num_rows;
while ($row = $result_set->fetch_assoc()) {
print_r($row);
echo "
";
}
$result_set->data_seek(0);
while ($row = $result_set->fetch_assoc()) {
print_r($row);
echo "
";
}
$result_set->close();
$mysqli->close();
?>
В этом примере мы вывели количество записей в result_set с помощью свойства num_rows . А также познакомились с методом data_seek() . То есть мы перебрали весь результат, затем вернули указатель на 0-ю запись и вновь перебрали результат.
В этой статье мы с Вами повторили подключение к базе данных и закрытие подключения. А также узнали, как отправлять запросы к базе данных через PHP . Узнали, как получать result_set и как работать с ним. Это всё, что Вам необходимо знать для успешной работы с MySQL в PHP .
Думаю, все слышали о правиле Парето. В любой сфере 20% усилий дают 80% результата. Например, 20% своего гардероба вы носите 80% времени, 20% ваших клиентов приносят 80% дохода. Так же и в Google Таблицах: зная 20% существующих функций, вы сможете решить 80% всех возможных задач.
Я считаю Query одной из наиболее полезных функций Google Таблиц. Но в справке Google она описывается очень поверхностно, и вся мощь данной функции не раскрыта. При более детальном знакомстве становится ясно, что она способна заменить большую часть существующих функций.
Для работы с QUERY вам понадобятся базовые знания SQL. Для тех, кто не в курсе: пугаться не надо, функция QUERY на самом деле поддерживает самые простые возможности SQL.
Синтаксис QUERY
QUERY(данные; запрос; [заголовки])- данные — это диапазон ячеек, который будет служить базой данных для SQL запроса;
- запрос — текст SQL запроса;
- заголовки — необязательный аргумент, в котором вы можете указать, сколько первых строк массива содержат заголовки.
Для максимального восприятия дальнейшей информации предлагаю открыть и скопировать себе следующую Google Таблицу
В доксе, копию которого вы только что создали, существует несколько листов. Лист DB - это база данных, к которой мы будет обращаться с помощью функции QUERY. Листы Level содержат примеры, которые мы будем рассматривать в этой статье. C каждым новым уровнем пример будет усложняться.
План SQL запроса в функции Query
Любой SQL запрос состоит из отдельных блоков, которые часто называют кляузами. В SQL для функции Query заложен синтаксис языка запросов API визуализации Google, который поддерживает следующие кляузы:
- select — перечисление полей, которые будут возвращены запросом;
- where — содержит перечень условий, с помощью которых будет отфильтрован массив данных, обрабатываемый запросом;
- group by — содержит перечень полей, по которым вы хотите группировать результат;
- pivot — помогает строить перекрестные таблицы, используя значение одного столбца в качестве названий столбцов финальной таблицы;
- order by — отвечает за сортировку результатов;
- limit — с помощью этой части запроса вы можете задать предел количеству строк, возвращаемых запросом;
- offset — с помощью этой кляузы вы можете задать число первых строк, которые не надо обрабатывать запросом;
- label — данная кляуза отвечает за название полей, возвращаемых запросом;
- format — отвечает за формат выводимых данных;
- options — дает возможность задавать дополнительные параметры вывода данных.
Hello World для функции Query (Select)
Перейдем на лист Level_1 и посмотрим формулу в ячейке A1.
Query(DB!A1:L1143;"select * limit 100")
Часть формулы «DB!A1:L1143» отвечает за базу данных, с которой мы будем делать выборку. Вторая часть «select * limit 100 » содержит непосредственно текст запроса. Символ «*» в данном случае означает возвращение всех полей, содержащихся в базе данных. С помощью «limit 100 » мы ограничиваем вывод данных в 100 строк максимум. Это пример самого простого запроса. Мы выбрали 100 первых строк из базы данных. Это своего рода «Hello world» для функции Query.
Используем фильтры и сортировку (Where, Order by)
Переходим на лист Level_2. Выберем только некоторые нужные нам поля и зададим условия фильтрации и сортировки. Например, используем данные только по кампаниям Campaign_1 и Campaign_2 за период 22-25 октября 2015 года. Отсортируем их в порядке убывания по сумме сеансов. Для фильтра и сортировки в текст запроса необходимо добавить описание кляуз Where и Order . Для вывода в результирующую таблицу описанного выше примера нам понадобятся поля Campaign, Date и Sessions. Именно их и нужно перечислить в кляузе Select .
Обращение к полям базы данных осуществляется через названия столбцов рабочего листа, на котором располагается база данных.
В нашем случае данные, расположенные на листе DB, и обращение к определенным полям прописываются как название столбцов листа. Таким образом, нужные поля располагается в следующих столбцах:
- поле Date — столбец A;
- поле Campaign — столбец B;
- поле Sessions — столбец G.
Соответственно, часть запроса, отвечающая за перечень выводимых в результате данных, будет выглядеть так:
Select A, B, G
Далее в запросе идет кляуза Where . При написании запроса кляузы обязательно должны располагаться в таком порядке, в котором были описаны в первом разделе этой статьи. После объявления Where нам необходимо перечислить условия фильтрации. В данном случае мы фильтруем данные по названию кампании (Campaign) и дате (Date). Мы используем несколько условий фильтрации. В тексте запроса между всеми условиями должен стоять логический оператор OR или AND. Фильтрация по датам немного отличается от фильтрации по числовым и текстовым значениям, для ее применения необходимо использовать оператор Date. Часть запроса, отвечающая за фильтрацию данных, будет выглядеть так:
WHERE (A >= date"2015-10-22" AND A <= date"2015-10-25") AND (B = "Campaign_1" OR B = "Campaign_2")
Мы разбили с помощью скобок фильтрацию данных на две логических части: первая фильтрует по датам, вторая — по названию кампании. На данном этапе формула, описывающая данные, которые необходимо выбрать, и условия фильтрации данных, выглядит так:
Query(DB!A1:L1143;" Select A, B, G WHERE (A >= date"2015-10-22" AND A <= date"2015-10-25") AND (B = "Campaign_1" OR B = "Campaign_2")")
Вы можете скопировать ее и вставить, например, на новый лист документа, который используется в качестве примера в этом посте, и получите следующий результат:
Помимо обычных логических операторов (=, <, >) блок WHERE поддерживает дополнительные операторы фильтрации:
- contains — проверяет содержание определённых символов в строке. Например, WHERE A contains ‘John’ вернёт в фильтр все значения из столбца A, в которых встречается John, например, John Adams, Long John Silver;
- starts with — фильтрует значения по префиксу, то есть проверяет символы в начале строки. Например, starts with ‘en’ вернёт значения engineering и english;
- ends with — фильтрует значения по окончанию строки. Например, строка ‘cowboy’ будет возвращена конструкцией «ends with ‘boy’» или «ends with ‘y’»;
- matches — соответствует регулярному выражению. Например: where matches ‘.*ia’ вернёт значения India и Nigeria.
- like — упрощённая версия регулярных выражений, проверяет соответствия строки заданному выражению с использованиям символов подстановки. На данный момент like поддерживает два символа подстановки: «%» означает любое количество любых символов в строке, и «_» — означает один любой символ. Например, «where name like ‘fre%’» будет соответствовать строкам ‘fre’, ‘fred’, и ‘freddy’.
Запрос уже отфильтровал данные за определенный период и оставил только нужные нам кампании. Остается только отсортировать результат по убыванию в зависимости от количества сеансов. Сортировка в данных запросах осуществляется традиционно для SQL с помощью кляузы Order by . По синтаксису она довольна простая: необходимо только перечислить поля, по которым требуется отсортировать результат, а также указать порядок сортировки. По умолчанию — порядок asc, то есть по возрастанию. Если укажете после название поле параметр desc, запрос вернет результат в порядке убывания указанных в кляузе Order by полей.
В нашем случае за фильтрацию будет отвечать строчка в тексте запроса:
Order by G desc
Соответственно, окончательный результат формулы на листе Level_2, решающий нужную нам задачу, выглядит так:
Query(DB!A1:L1143;" SELECT A, B, G WHERE (A >= date"2015-10-22" AND A <= date"2015-10-25") AND (B = "Campaign_1" OR B = "Campaign_2") ORDER BY G DESC")
Теперь вы умеете с помощью простейшего SQL синтаксиса и функции QUERY фильтровать и сортировать данные.
resource mysql_query (string query [, resource link_identifier])mysql_query() посылает запрос активной базе данных сервера, на который ссылается переданный указатель. Если параметр link_identifier опущен, используется последнее открытое соединение. Если открытые соединения отсутствуют, функция пытается соединиться с СУБД, аналогично функции mysql_connect() без параметров. Результат запроса буфферизируется.
Замечание: Строка запроса НЕ должна заканчиваться точкой с запятой.
Только для запросов SELECT, SHOW, EXPLAIN, DESCRIBE,
mysql_query()
возвращает указатель на результат
запроса, или FALSE
если запрос не был выполнен.
В остальных случаях (INSERT, UPDATE, DELETE, DROP, и т.п.),
mysql_query()
возвращает TRUE
в случае успешного
запроса и FALSE
в случае ошибки. Значение не равное FALSE
говорит о
том, что запрос был выполнен успешно. Он не говорит о количестве
затронутых или возвращённых рядов. Вполне возможна ситуация, когда
успешный запрос не затронет ни одного ряда.
Следующий запрос составлен неправильно и mysql_query() вернёт FALSE :
mysql_query() также считается ошибочным и вернёт FALSE , если у вас не хватает прав на работу с указанной в запросе таблицей.
Работая с результатами запросов, вы можете использовать функцию mysql_num_rows() , чтобы найти число, возвращённых запросом SELECT, рядов, или mysql_affected_rows() , чтобы найти число рядов, обработанных запросами DELETE, INSERT, REPLACE, или UPDATE.
Только для запросов SELECT, SHOW, DESCRIBE, EXPLAIN, функция mysql_query() возвращает указатель на результат, который можно использовать в функции mysql_fetch_array() и других функциях, работающих с результатами запросов. Когда работа с результатом окончена, вы можете освободить ресурсы, используемые для его хранения, с помощью функции