Power Query. Получить данные из The Lord of the Rings API

Файлы к уроку:

Описание

Этот урок о том как в Power Query работать с API на примере The Lord of the Rings API. Сначала мы получим список фильмов и персонажей, а потом весь список реплик всех персонажей всех фильмов.

Решение

API описано по ссылке — https://the-one-api.dev/documentation

url — https://the-one-api.dev/v2
path
- quote
- movie
- character

Примененные функции

Json.Document
Web.Contents
Value.Metadata
Number.From
Function.InvokeAfter
List.Generate
List.Combine
Table.FromRecords
Table.NestedJoin
JoinKind.LeftOuter
Table.ExpandTableColumn
Table.SelectColumns

Код

Пример получения данных о фильмах

let
    data =
      Json.Document(
        Web.Contents("https://the-one-api.dev/v2",
                     [RelativePath="movie",
                      Headers= [Accept = "application/json",
                                Authorization = "Bearer " & "SlMNWO2lVjrP1aPAU8uz"]
                     ]
        )
      ),
    Пользовательский1 = data[docs],
    expanded = Table.FromRecords( Пользовательский1 )[[name],[_id]]
in
    expanded

Пример получения данных о персонажах

let
    data =
      Json.Document(
        Web.Contents("https://the-one-api.dev/v2",
                     [RelativePath="character",
                      Headers= [Accept = "application/json",
                                Authorization = "Bearer " & "SlMNWO2lVjrP1aPAU8uz"]
                     ]
        )
      ),
    Пользовательский1 = data[docs],
    expanded = Table.FromRecords( Пользовательский1 )[[name],[_id]]
in
    expanded

Пример получения данных о цитатах

Функция получения текущей страницы:

(optional p_page)=>
let
    json =
      Web.Contents("https://the-one-api.dev/v2", [
        Headers =
          [Accept = "application/json",
           Authorization = "Bearer " & "SlMNWO2lVjrP1aPAU8uz"],
           RelativePath = "quote",
        Query = [page = Text.From(p_page ?? 1)]
      ]),
    read_json = Json.Document( json )[docs] meta [pg =Json.Document( json )[page] ]
in
    read_json

Функция получения следующей страницы:

(prev) =>
let
  metadata = Value.Metadata( prev ),
  page = Number.From( metadata[pg] ),
  next = Function.InvokeAfter( ()=> f_get_cur_quotes( page + 1 ), #duration(0, 0, 0, 0.05) )
in
  next

Получение цитат:

let
  pages = 
    List.Generate(
      ()=> f_get_cur_quotes(1),
      each _ <> {},
      each f_get_next_quotes(_)
    ),
    combined = List.Combine(pages),
    expanded = Table.FromRecords(combined)[[dialog],[movie],[character]]
in
    expanded

Итоговый запрос:

let
    Источник = Table.NestedJoin(quotes, {"movie"}, movies, {"_id"}, "movies", JoinKind.LeftOuter),
    #"Объединенные запросы" = Table.NestedJoin(Источник, {"character"}, characters, {"_id"}, "characters", JoinKind.LeftOuter),
    #"Развернутый элемент movies" = Table.ExpandTableColumn(#"Объединенные запросы", "movies", {"name"}, {"movie_name"}),
    #"Развернутый элемент characters" = Table.ExpandTableColumn(#"Развернутый элемент movies", "characters", {"name"}, {"character_name"}),
    #"Другие удаленные столбцы" = Table.SelectColumns(#"Развернутый элемент characters",{"movie_name", "character_name", "dialog"})
in
    #"Другие удаленные столбцы"

Другие уроки из курса Разное

Номер урока	Урок	Описание
1	Power Query. Знакомство с Power Query	В этом уроке мы познакомимся в Power Query. Зачем нужен Power Query Как установить Power Query Как его Настроить Как изменить запрос
2	Power Query. Подключение XML	В этом уроке мы научимся подключаться к файлам в формате XML и импортировать эти данные в Excel.
3	Power Query. Уникальные значения двух столбцов	В этом уроке мы получим уникальные значения из двух столбцов таблицы.
4	Power Query. Импорт таблиц PDF	Импорт таблиц из файла PDF, импорт таблиц из множества PDF файлов с объединением в один датасет.
5	Power Query. Собрать разбитую строку	В этом практическом уроке мы научимся соединять разбитую строку. Этот пример взят из реальной практики одного из спонсоров канала.
6	Power Query. Пивот со счетом	В этом уроке мы создадим пивот, в котором будут пронумерованы столбцы.
7	Power Query. Минимальное значение в диапазоне	В этом уроке мы найдем минимальное значение в диапазоне строк.
8	Power Query. Нарастающий итог 2	В этом уроке мы изучим еще один способ сделать нарастающий итог в Power Query.
9	Power Query. Нарастающий итог 3	В этом уроке мы разберем еще один способ выполнить нарастающий итог в Power Query.
10	Power Query. Прирост населения Китая	В этом уроке мы сравним прирост населения Китая с приростом населения мира в целом за последние 200 лет.
11	Power Query. Повторяющиеся значения в строке	В этом уроке разберем как определить есть ли в строке повторения.
12	Power Query. Таблица навигации по функциям М	В этом уроке вы узнаете как создать таблицу навигации по всем функциям языка Power Query.
13	Power Query. Удалить запросы и модель данных из книги	Разберем как быстро удалить все запросы и модель данных из текущей книги.
14	Power Query. Открыть еще 1 Excel и еще 3 трюка	В этом видео я покажу как открыть еще 1 файл Excel, если у вас уже запущен Power Query.
15	Power Query. Подключиться к ZIP архиву	Пользовательская функция для подключения к zip файлу. Подключимся к txt файлу, который находится в zip архиве.
16	Power Query. Импорт Word	Импортируем таблицу из документа Word. Для спонсоров разберем импорт таблицы с объединенными ячейками.
17	Power Query. Фильтрация списком	В этом уроке мы хотим отфильтровать таблицу при помощи списка, например, хотим получить продажи определенных товаров.
18	Power Query. Пользовательская функция Switch	В этом уроке мы создадим пользовательскую функцию Switch.
19	Power Query. Информация о формате, Чтение zip	В этом уроке мы узнаем как получить информацию о формате ячеек при помощи Power Query.
20	Power Query. Импорт данных из gz	В этом уроке мы разберем как импортировать файл в формате gz.
21	Power Query. Удалить лишние пробелы, Text.Split	В этом уроке мы научимся удалять лишние пробелы в текстовом столбце таблицы.
22	Power Query. Параметры в SQL-запросе	Вы хотите, чтобы в ваш SQL-запрос подставлялось значение из параметра, источником которого является ячейка с листа Excel.
23	Power Query. Параметры в SQL-запросе 2	Ваш запрос очень большой и количество параметров в нем большое. Как организовать все так, чтобы было удобно работать.
24	Power Query. Добавить столбец в каждую таблицу табличного столбца	В этом уроке вы узнаете как трансформировать табличный столбец, например, вы сможете добавить столбец индекса внутрь каждой таблицы табличного столбца.
25	Power Query. Интервальный просмотр 1 (ВПР 1)	Объединить 2 таблицы с интервальным просмотром = 1.
26	Power Query. Относительный путь к файлу и папке	Если ваш источник находится в той же папке, что и отчет, то вы можете указать относительный путь. В таком случае подключение не будет ломаться, если вы запустите файл на другом компьютере.
27	Power Query. Нарастающий итог в каждой категории	Применим функцию нарастающего итога не ко всей таблице, а к определенному окну.
28	Power Query. ВПР без Merge или Join	Вам нужно подставить данные из столбца другой таблицы. Как это сделать без объединения таблиц.

Номер урока	Урок	Описание
29	Power Query. Создать N копий выбранного столбца	Создадим функцию, чтобы пользователь мог указать нужное количество копий.
30	Power Query. Текст содержит подстроку из списка (Text.ContainsAny)	Нам нужно, чтобы отфильтровались строки, в которых содержится любая подстрока из списка.
31	Power Query. Генерация таблицы для веб-запросов	С помощью List.Generate сгенерируем таблицу для запросов к API
32	Power Query. Фильтрация табличного столбца с помощью столбца таблицы	Нужно отфильтровать табличный столбец с помощью другого столбца.
33	Power Query. Количество вхождений подстроки	Нужно посчитать сколько раз подстрока входит в строку.
34	Power Query. Скученные данные 4	Еще один интересный пример работы со скученными данными.
35	Power Query. Антизаполнение / Unfill	То же самое, что Fill Down, но наоборот: вместо значений вернуть null.
36	Power Query. Получить код из текста	Есть текстовый файл с М-кодом. Как подключиться к файлу и выполнить этот код.
37	Power Query. Повторить строку N раз	Если строку нужно повторить определенное количество раз.
38	Power Query. Обработка PDF выписки	PDF выписку с результатами медицинских анализов преобразуем в таблицу.
39	Power Query. Объединить по вертикали файлы из разных папок	Папки с нужными файлами находятся в разных места.
40	Power Query. Объединение со знаками сравнения	Объединить таблицы по горизонтали со знаками сравнения.
41	Power Query. ABC анализ по категориям	ABC анализ отдельно для каждой категории.
42	Power Query. Более 2000 вакансий на лист Excel (API HH)	Дополним урок о получении вакансий HH. Разберем как получить более 2000 вакансий.
43	Power Query. Получить данные из Ice and Fire API	Учимся работать с API на примере Ice and Fire API.
44	Power Query. Получить данные из The Lord of the Rings API	Учимся работать с API на примере The Lord of the Rings API.

предыдущая запись

Excel тренинг. Умные таблицы

следующая запись