В современном бизнесе объём файлов растёт ежедневно. Ручная загрузка данных в BI-систему становится трудоёмкой, увеличивает риск ошибок и задерживает формирование отчётности.
AW BI позволяет автоматизировать этот процесс: подключать облачные хранилища, загружать отдельные файлы и архивы, а также обновлять данные автоматически для актуальных отчётов.
AW BI позволяет автоматизировать этот процесс: подключать облачные хранилища, загружать отдельные файлы и архивы, а также обновлять данные автоматически для актуальных отчётов.
Загрузка файлов и архивов
AW BI поддерживает загрузку:
Архивы извлекаются рекурсивно, включая все вложенные папки. При этом структура файлов должна быть идентичной, так как данные объединяются в один источник по принципу union all.
Если формирование архивов не требуется, можно использовать подключение облачных хранилищ.
- отдельных файлов;
- архивов в форматах: zip, rar, 7z, tar, gz.
Архивы извлекаются рекурсивно, включая все вложенные папки. При этом структура файлов должна быть идентичной, так как данные объединяются в один источник по принципу union all.
Если формирование архивов не требуется, можно использовать подключение облачных хранилищ.
Подключение облачных источников
AW BI позволяет загружать данные напрямую:
- из SFTP-папок;
- из хранилищ S3;
- из Яндекс.Диска с использованием функции загрузки файлов по ссылке.
Начиная с версии 1.35 добавлена возможность подключения HDFS, Samba, FTP(S) и WebDAV.
В версии 1.36 расширен функционал источников файлов и облака: поддержка кастомных коннекторов, FTP/FTPS и WebDAV, инспектор источников для диагностики подключений и live‑модели для расширенного списка источников.
В версии 1.36 расширен функционал источников файлов и облака: поддержка кастомных коннекторов, FTP/FTPS и WebDAV, инспектор источников для диагностики подключений и live‑модели для расширенного списка источников.
Как подключить Яндекс.Диск к AW BI
Для интеграции с Яндекс.Диск используется строка подключения:
yadisk://< TOKEN >@disk.yandex.ru/< PATH >
Где:
Примеры строк подключения:
yadisk://< TOKEN >@disk.yandex.ru/< PATH >
Где:
- yadisk:// — обязательный для подключения к Яндекс.Диску префикс;
- TOKEN — необязательный токен доступа (если он не указан в строке подключения, его можно задать в поле «Пароль» в окне редактирования);
- PATH — путь к папке или файлу внутри Диска.
Примеры строк подключения:
- yadisk://disk.yandex.ru/Моя папка
- yadisk://disk.yandex.ru/Моя папка/Мой файл.xlsx
- yadisk://y0_AfAAAAAADKnZsmCHoAAAAAThkWHZZFzWPe6tTQcSM4fFjyWlGA-2aSQ2cWSRAb3@disk.yandex.ru/Моя папка
Получение токена доступа для Яндекс.Диска
1.Перейдите на страницу: https://oauth.yandex.ru/ и авторизуйтесь.
2.Создайте новое приложение: https://oauth.yandex.ru/client/new/
3.Укажите:
4.Добавьте права доступа:
5.Получите ClientID приложения.
6.После создания приложения перейдите по ссылке:
7.Log in 6<id_приложения> и замените <id_приложения> на ClientID вашего приложения. Он будет показан сразу после создания.
8.Скопируйте выданный токен и храните в секрете.
2.Создайте новое приложение: https://oauth.yandex.ru/client/new/
3.Укажите:
- название сервиса (например, AW BI);
- установите флажок в поле «Веб-сервисы»;
- Redirect URL — «Подставить URL для отладки».
4.Добавьте права доступа:
- доступ к папке приложения на Диске;
- чтение всего Диска;
- доступ к информации о Диске.
5.Получите ClientID приложения.
6.После создания приложения перейдите по ссылке:
7.Log in 6<id_приложения> и замените <id_приложения> на ClientID вашего приложения. Он будет показан сразу после создания.
8.Скопируйте выданный токен и храните в секрете.
Для удобства прикрепляем короткое видео, демонстрирующее процесс получения токена и подключения к Яндекс.Диску.
Настройка автоматической загрузки файлов и обновления отчётов
После подключения Яндекс.Диска можно настроить регулярное обновление данных.
Пример использования:
Пошаговая настройка:
Пример использования:
- есть файлы с данными по продажам за январь, февраль, март, апрель;
- задача: загружать новые файлы автоматически и обновлять отчёты.
Пошаговая настройка:
- в списке источников данных создайте новый источник типа «Файл»;
- выберите способ загрузки: «Ссылка»;
- укажите путь к папке на Яндекс.Диске;
- введите токен в поле «Пароль»;
- нажмите «Сохранить».
В коротком видео демонстрируем процесс загрузки файла по ссылке через AW (папка на Я.Диске: …/Test_Files)
AW BI загрузит файлы из указанной папки. При добавлении нового файла система автоматически обновит показатели в источнике данных.
Интеграция с моделью и виджетами
- Добавьте источник в модель данных.
- Постройте первый виджет аналитики (например, товары, проданные более 100 штук, выделить зелёным).
- Настройте расписание обновления модели.
Теперь данные будут автоматически подтягиваться с Яндекс.Диска, а дашборды обновляться в соответствии с расписанием.
Важные особенности работы с облачными источниками
Рекурсивный обход папок не выполняется — подключаются только файлы, находящиеся в указанной папке (вложенные подпапки игнорируются). Можно использовать как отдельные файлы, так и архивы.
Вывод
Настройка подключения облачных хранилищ к AW BI — это первый шаг к эффективной автоматизации работы с данными. Один раз настроив интеграцию, вы:
С AW BI вы получаете не просто инструмент для хранения файлов, а полноценную систему, которая поддерживает принятие быстрых и обоснованных бизнес-решений, позволяя сосредоточиться на анализе данных, а не на их обработке.
- экономите время сотрудников;
- минимизируете ошибки при загрузке данных;
- всегда получаете актуальные отчёты и дашборды;
- создаёте прозрачный и надёжный процесс аналитики для всей компании.
С AW BI вы получаете не просто инструмент для хранения файлов, а полноценную систему, которая поддерживает принятие быстрых и обоснованных бизнес-решений, позволяя сосредоточиться на анализе данных, а не на их обработке.