Блог

Главная / Блог / Получите расширенную интеграцию Snowflake с Astera Centerprise

Содержание
Автоматизированный, Без кода Стек данных

Научиться Astera Data Stack может упростить и оптимизировать управление данными вашего предприятия.

Получите расширенную интеграцию Snowflake с Astera Centerprise

6-е февраля, 2024

Что такое снежинка?

Snowflake — это реляционное хранилище данных SQL, разработанное в облаке. Он широко используется специалистами по обработке данных в различных отраслях для хранения корпоративных данных и облегчения обмена данными. Способность Snowflake обрабатывать аналитические данные делает его подходящим для бизнес-пользователей, желающих получить информацию для более эффективных и быстрых бизнес-решений. База данных используется в качестве центральной точки для ETL и конвейеров данных в различных операциях с данными благодаря своей уникальной архитектуре, которая обеспечивает независимое масштабирование для хранения, вычислений и услуг.

В качестве облачного решения для хранения данных, Снежинка в основном используется для отчетности более высокого уровня. Чтобы использовать этот репозиторий для операционных задач, таких как обработка заказов клиентов или операции продаж, необходима интеграция с другими локальными и облачными системами. Собранные в Snowflake данные могут предоставить консолидированное представление об активах предприятия.

Astera Centerprise предлагает бесшовную интеграцию с базой данных Snowflake через встроенный разъем в интерфейсе перетаскивания. Вы можете легко подключиться к своим серверным корпоративным системам и приложениям для обработки данных, например SalesforceSQL Server, SAP HANAи многое другое без написания кода и переключения платформ. Легко извлекайте, загружайте и преобразовывайте данные в Snowflake и обратно с помощью этого инструмента интеграции данных!

Помимо подключения к этому облачному хранилищу данных, Centerprise также позволяет бизнес-пользователям очищать, стандартизировать и манипулировать необработанными данными, чтобы современные данные более высокого качества были доступны для совместного использования внутри организации и за ее пределами, в дополнение к отчетности, анализу и бизнес-аналитике.

Включение интеграции Snowflake без кода с Astera Centerprise

Предлагая встроенную связь со Snowflake, Astera Centerprise упрощает пользователю настройку базы данных в качестве источника или места назначения для приема и загрузки данных соответственно. Возможности подключения расширены для поддержки других функций в Centerprise, Таких как:

  • Источник SQL-запроса – Используя операторы SELECT в запросах SQL или хранимых процедурах, вы можете получать данные из базы данных Snowflake.
  • Поиск в базе данных – Эта функция может выполнять поиск значений в одной или нескольких таблицах базы данных Snowflake и возвращать их в качестве выходных полей из записи, в которой искомые значения соответствуют входящим.
  • Поиск SQL-запроса – Это позволяет вам искать значения в Snowflake с помощью операторов запроса SQL.
  • Оптимизация Pushdown – Вы можете сократить время выполнения процесса, толкая вниз данные в базу данных Snowflake. Нагрузка обработки обрабатывается собственными вычислительными возможностями базы данных, а не собственными вычислительными возможностями. Centerprise сервер, который оптимизирует производительность.

Встроенный Centerprise Коннектор устраняет разрыв между базой данных Snowflake и различными форматами файлов, системами баз данных и онлайн-приложениями, обеспечивая интеграцию без кода и без проблем.

Вот как Centerprise может помочь вам использовать данные, хранящиеся в Snowflake:

Упрощение поиска данных

Настроив базу данных Snowflake в качестве исходного объекта в Centerprise, вы можете получить из него данные, обработать их в соответствии с бизнес-требованиями и перенести в целевую систему.

Вот простой поток данных, который считывает данные о клиентах из объекта Snowflake и фильтрует их на основе Контактное лицо поле и записывает его в файл Excel.

разъем снежинка

Рисунок 1. Поток данных, использующий Snowflake в исходной точке.

Настройка разъем источника для Snowflake так же просто, как перетащить значок базы данных из Ящик для инструментов и ввод данных о подключении. На снимке экрана ниже показано, что мы выбрали поставщика данных в качестве Снежинка и ввел учетные данные своей учетной записи.

Рисунок 2. Настройка подключения к базе данных Snowflake.

Рисунок 2. Настройка подключения к базе данных Snowflake.

После того, как соединение настроено, вы можете выбрать необходимую таблицу базы данных и указать стратегию чтения в Объекты окно. В Centerprise, вы можете получить данные одновременно или постепенно. Здесь мы выбрали Полная нагрузка опцию.

Вы даже можете разделить входящие данные на разделы, и Centerprise прочитает его в соответствии с указанным количеством разделов. Секционированное чтение используется для ограничения объема данных, сканируемых каждым запросом, что повышает производительность и снижает нагрузку на базу данных.

интеграция хранилища снежинок

Рисунок 3. Указание параметров чтения базы данных.

В этом соединителе исходной базы данных вы также можете указать параметры, которым должны быть присвоены значения из файла конфигурации. После запуска потока данных соответствующие значения свойств будут переопределены параметрами конфигурации, и пользователям не придется вносить какие-либо изменения вручную.

После указания соединения и свойств запускается поток данных, а данные Snowflake обрабатываются и сохраняются на листе Excel.

Ускорение загрузки данных

Базу данных Snowflake также можно настроить в качестве целевой базы данных, что позволит вам консолидировать и записывать информацию в облачное хранилище данных или озеро данных.

Чтобы проиллюстрировать, как Snowflake можно использовать в качестве конечной точки назначения, давайте возьмем простой поток данных:

Рисунок 4. Простой поток данных, использующий Snowflake в качестве целевой системы.

Рисунок 4. Простой поток данных, использующий Snowflake в качестве целевой системы.

Этот поток данных объединяет Оформить заказ данные из двух разных таблиц SQL Server и загружает их в Snowflake. Метод настройки соединителя базы данных идентичен соединителю источника данных, за исключением случаев, когда пользователь хочет загрузить данные в пакетном режиме. Включив Amazon S3 Bucket для промежуточного хранения, вы можете в полной мере воспользоваться преимуществами своей существующей учетной записи AWS и использовать сегменты S3 для обработки, управления и хранения данных.

Рисунок 5. Включение корзины Amazon S3.

Рисунок 5. Включение корзины Amazon S3.

Следующий шаг предполагает указание свойств путем выбора одной из существующих таблиц в базе данных или создания новой. Кроме того, вы можете указать, как будет работать сопоставление входных портов. Здесь мы выбрали Отдельные порты для действий который вставляет все записи индивидуально в новые таблицы базы данных.

параметры загрузки данных

Рисунок 6. Указание свойств целевой базы данных.

Centerprise поддерживает различные варианты загрузки базы данных, как вы можете видеть на скриншоте выше, чтобы вы могли выбрать предпочтительный вариант в зависимости от характера вашего потока данных. В этом потоке данных мы загружаем несколько строк данных в базу данных, используя метод Массовая вставка с размером партии опцию.

После указания свойств при запуске потока данных обработанные данные будут загружены в базу данных Snowflake.

Раскройте возможности базы данных Snowflake с помощью Astera Centerprise

Вот как интеграция хранилищ Snowflake может помочь вам улучшить ваш бизнес и технологические операции:

Обеспечьте непрерывное подключение

Легко подключайте и получайте корпоративные данные из разрозненных локальных и облачных источников в Snowflake на AWS без ручного кодирования. Предлагая поддержку ряда структурированных, неструктурированных и полуструктурированных источников, Centerprise обеспечивает бесшовное соединение между разнородными корпоративными системами и базой данных Snowflake.

Включить интеграцию самообслуживания

Простой в использовании визуальный пользовательский интерфейс, предопределенные преобразования и встроенные соединители в Centerprise предоставить бизнес-пользователям возможность выполнять задания по интеграции Snowflake с минимальной поддержкой со стороны своих ИТ-команд.

Масштабирование для нужд предприятия

Организуйте потоки ETL, чтобы использовать гибкую архитектуру и параллелизм Snowflake, а также безопасно передавать данные в гибридных средах со скоростью, соответствующей требованиям вашего предприятия.

Принимайте решения быстрее

Получайте ценную информацию на основе данных Snowflake и дайте заинтересованным сторонам и партнерам возможность безопасного доступа к информации, когда им необходимо принимать более быстрые решения на основе данных и оптимизировать повседневные бизнес-операции.

Автоматизируйте интеграцию Snowflake

Использовать автоматизации технологических процессов и возможности планирования заданий в Centerprise чтобы автоматизировать интеграцию хранилища Snowflake и сократить время получения аналитической информации, одновременно сокращая время выполнения процесса.

Эластичная масштабируемость Snowflake делает его лучшим выбором для компаний, которым нужны облачные хранилища данных корпоративного уровня. Использование родного разъема Snowflake в Astera CenterpriseБизнес-пользователи могут безопасно подключаться к базе данных и использовать ее данные для поддержки своих конечных процессов.

Скачать Пробная версия of Astera Centerprise и испытайте на собственном опыте возможности интеграции нашей платформы.

Вам также может понравиться
7 лучших инструментов агрегирования данных в 2024 году
Структура управления данными: что это такое? Важность, основные принципы и передовой опыт
Лучшие инструменты приема данных в 2024 году
принимая во внимание Astera Для ваших потребностей в управлении данными?

Установите соединение без кода с вашими корпоративными приложениями, базами данных и облачными приложениями для интеграции всех ваших данных.

Давайте соединимся сейчас!
давайте соединимся