Совок
 | |
| Разработчик(и) | Фонд программного обеспечения Apache |
|---|---|
| Первоначальный выпуск | 1 июня 2009 г |
| Финальный выпуск | 1.4.7
/ 6 декабря 2017 г |
| Репозиторий | Репозиторий Sqoop |
| Написано в | Ява |
| Операционная система | Кросс-платформенный |
| Тип | Управление данными |
| Лицензия | Лицензия Апач 2.0 |
| Веб-сайт | черпак |
Sqoop — это приложение с интерфейсом командной строки для передачи данных между реляционными базами данных и Hadoop . [ 1 ]
Проект Apache Sqoop был закрыт в июне 2021 года и перенесен на чердак Apache. [ 2 ]
Описание
[ редактировать ]Sqoop поддерживает добавочную загрузку одной таблицы или SQL-запроса произвольной формы , а также сохраненные задания, которые можно запускать несколько раз для импорта обновлений, внесенных в базу данных с момента последнего импорта. Импорт также можно использовать для заполнения таблиц в Hive или HBase . [ 3 ] Экспорт можно использовать для помещения данных из Hadoop в реляционную базу данных. Sqoop получил название от «SQL-to-Hadoop». [ 4 ] верхнего уровня Sqoop стал проектом Apache в марте 2012 года. [ 5 ]
Informatica на основе Sqoop предоставляет соединитель начиная с версии 10.1. Pentaho предоставляет с открытым исходным кодом шаги по подключению на основе Sqoop , Sqoop Import [ 6 ] и Sqoop Export , [ 7 ] в своем ETL пакете Pentaho Data Integration, начиная с версии 4.5 программного обеспечения. [ 8 ] Microsoft использует соединитель на основе Sqoop для передачи данных из баз данных Microsoft SQL Server в Hadoop. [ 9 ] Couchbase, Inc. также предоставляет соединитель Couchbase Server -Hadoop посредством Sqoop. [ 10 ]
См. также
[ редактировать ]Ссылки
[ редактировать ]- ^ «Hadoop: Apache Sqoop» . Проверено 8 сентября 2012 г.
- ^ «переезд Скуп на чердак» . mail-archives.apache.org . Проверено 27 июня 2021 г.
- ^ «Apache Sqoop — Обзор» . Проверено 8 сентября 2012 г.
- ^ «Представляем Sqoop» . Проверено 1 января 2019 г.
- ^ «Apache Sqoop завершает инкубатор» . Проверено 8 сентября 2012 г.
- ^ «Скуп Импорт» . Пентахо . 10 декабря 2015 г. Архивировано из оригинала 10 декабря 2015 г. Проверено 10 декабря 2015 г.
Задание Sqoop Import позволяет импортировать данные из реляционной базы данных в распределенную файловую систему Hadoop (HDFS) с помощью Apache Sqoop.
- ^ «Скуп Экспорт» . Пентахо . 10 декабря 2015 г. Архивировано из оригинала 10 декабря 2015 г. Проверено 10 декабря 2015 г.
Задание Sqoop Export позволяет экспортировать данные из Hadoop в СУБД с помощью Apache Sqoop.
- ^ «Поставщик аналитики больших данных Pentaho объявляет о более тесной интеграции с Cloudera; расширяет визуальный интерфейс, включив в него Hadoop Sqoop и Oozie» . Тенденции и приложения баз данных (dbta.com). 27 июля 2012 г. Архивировано из оригинала 8 декабря 2015 г. Проверено 8 декабря 2015 г.
Business Analytics 4.5 от Pentaho теперь сертифицирован для последних версий Cloudera — Cloudera Enterprise 4.0 и CDH4. Pentaho также объявила, что возможности ее студии визуального дизайна были расширены на компоненты Hadoop Sqoop и Oozie.
- ^ «Коннектор Microsoft SQL Server для Apache Hadoop» . Майкрософт . Проверено 8 сентября 2012 г.
- ^ «Коннектор Couchbase Hadoop» . Архивировано из оригинала 25 августа 2012 г. Проверено 8 сентября 2012 г.
Библиография
[ редактировать ]- Уайт, Том (2010). «Глава 15: Совок» . Hadoop: Полное руководство (2-е изд.). О'Рейли Медиа . стр. 477–495 . ISBN 978-1-449-38973-4 .
