Совок
 | |
| Разработчик(и) | Фонд программного обеспечения Apache |
|---|---|
| Первоначальный выпуск | 1 июня 2009 г |
| Финальный выпуск | 1.4.7 / 6 декабря 2017 г |
| Репозиторий | Репозиторий Sqoop |
| Написано в | Ява |
| Операционная система | Кросс-платформенный |
| Тип | Управление данными |
| Лицензия | Лицензия Апач 2.0 |
| Веб-сайт | черпак |
Sqoop — это приложение с интерфейсом командной строки для передачи данных между реляционными базами данных и Hadoop . [1]
Проект Apache Sqoop был закрыт в июне 2021 года и перенесен на чердак Apache. [2]
Описание
[ редактировать ]Sqoop поддерживает добавочную загрузку одной таблицы или SQL-запроса произвольной формы , а также сохраненные задания, которые можно запускать несколько раз для импорта обновлений, внесенных в базу данных с момента последнего импорта. Импорт также можно использовать для заполнения таблиц в Hive или HBase . [3] Экспорт можно использовать для помещения данных из Hadoop в реляционную базу данных. Sqoop получил название от «SQL-to-Hadoop». [4] верхнего уровня Sqoop стал проектом Apache в марте 2012 года. [5]
Informatica на основе Sqoop предоставляет соединитель начиная с версии 10.1. Pentaho предоставляет с открытым исходным кодом шаги по подключению на основе Sqoop , Sqoop Import [6] и Sqoop Export , [7] в своем ETL пакете Pentaho Data Integration, начиная с версии 4.5 программного обеспечения. [8] Microsoft использует соединитель на основе Sqoop для передачи данных из баз данных Microsoft SQL Server в Hadoop. [9] Couchbase, Inc. также предоставляет соединитель Couchbase Server – Hadoop посредством Sqoop. [10]
См. также
[ редактировать ]Ссылки
[ редактировать ]- ^ «Hadoop: Apache Sqoop» . Проверено 8 сентября 2012 г.
- ^ «переезд Скуп на чердак» . mail-archives.apache.org . Проверено 27 июня 2021 г.
- ^ «Apache Sqoop — Обзор» . Проверено 8 сентября 2012 г.
- ^ «Представляем Sqoop» . Проверено 1 января 2019 г.
- ^ «Apache Sqoop завершает инкубатор» . Проверено 8 сентября 2012 г.
- ^ «Скуп Импорт» . Пентахо . 10 декабря 2015 г. Архивировано из оригинала 10 декабря 2015 г. Проверено 10 декабря 2015 г.
Задание Sqoop Import позволяет импортировать данные из реляционной базы данных в распределенную файловую систему Hadoop (HDFS) с помощью Apache Sqoop.
- ^ «Скуп Экспорт» . Пентахо . 10 декабря 2015 г. Архивировано из оригинала 10 декабря 2015 г. Проверено 10 декабря 2015 г.
Задание Sqoop Export позволяет экспортировать данные из Hadoop в СУБД с помощью Apache Sqoop.
- ^ «Поставщик аналитики больших данных Pentaho объявляет о более тесной интеграции с Cloudera; расширяет визуальный интерфейс, включив в него Hadoop Sqoop и Oozie» . Тенденции и приложения баз данных (dbta.com). 27 июля 2012 г. Архивировано из оригинала 8 декабря 2015 г. Проверено 8 декабря 2015 г.
Business Analytics 4.5 от Pentaho теперь сертифицирован для последних версий Cloudera — Cloudera Enterprise 4.0 и CDH4. Pentaho также объявила, что возможности ее студии визуального дизайна были расширены на компоненты Hadoop Sqoop и Oozie.
- ^ «Коннектор Microsoft SQL Server для Apache Hadoop» . Майкрософт . Проверено 8 сентября 2012 г.
- ^ «Коннектор Couchbase Hadoop» . Архивировано из оригинала 25 августа 2012 г. Проверено 8 сентября 2012 г.
Библиография
[ редактировать ]- Уайт, Том (2010). «Глава 15: Совок» . Hadoop: Полное руководство (2-е изд.). О'Рейли Медиа . стр. 477–495 . ISBN 978-1-449-38973-4 .
