Sqoop - Sqoop
Разработчики) | Фонд программного обеспечения Apache |
---|---|
изначальный выпуск | 1 июня 2009 г. |
Стабильный выпуск | 1.4.7 / 6 декабря 2017 г. |
Репозиторий | Репозиторий Sqoop |
Написано в | Ява |
Операционная система | Кроссплатформенность |
Тип | Управление данными |
Лицензия | Лицензия Apache 2.0 |
Интернет сайт | sqoop |
Sqoop это Интерфейс командной строки приложение для передачи данных между реляционные базы данных и Hadoop.[1]
Описание
Sqoop поддерживает инкрементную загрузку одной таблицы или произвольной формы SQL запрос а также сохраненные задания, которые можно запускать несколько раз для импорта обновлений, внесенных в базу данных с момента последнего импорта. Импорт также можно использовать для заполнения таблиц в Улей или же HBase.[2] Экспорт можно использовать для помещения данных из Hadoop в реляционную базу данных. Sqoop получил название от «SQL-to-Hadoop».[3]Sqoop стал топ-уровнем Apache проект в марте 2012 года.[4]
Informatica предоставляет на основе Sqoop соединитель с версии 10.1.Пентахо обеспечивает Открытый исходный код Шаги соединителя на основе Sqoop, Sqoop Import[5] и Sqoop экспорт,[6] в их ETL сюита Интеграция данных Pentaho начиная с версии 4.5 программы.[7] Microsoft использует коннектор на основе Sqoop для передачи данных из Microsoft SQL Server базы данных в Hadoop.[8]Couchbase, Inc. также предоставляет Couchbase Сервер -Hadoop коннектор с помощью Sqoop.[9]
Смотрите также
Рекомендации
- ^ "Hadoop: Apache Sqoop". Получено 8 сен, 2012.
- ^ «Apache Sqoop - Обзор». Получено 8 сен, 2012.
- ^ "Представляем Sqoop". Получено 1 января, 2019.
- ^ «Выпускники Apache Sqoop из инкубатора». Получено 8 сен, 2012.
- ^ «Импорт Sqoop». Пентахо. 2015-12-10. Архивировано из оригинал на 2015-12-10. Получено 2015-12-10.
Задание Sqoop Import позволяет импортировать данные из реляционной базы данных в распределенную файловую систему Hadoop (HDFS) с помощью Apache Sqoop.
- ^ «Экспорт Sqoop». Пентахо. 2015-12-10. Архивировано из оригинал на 2015-12-10. Получено 2015-12-10.
Задание Sqoop Export позволяет экспортировать данные из Hadoop в СУБД с помощью Apache Sqoop.
- ^ «Поставщик аналитики больших данных Pentaho объявляет о более тесной интеграции с Cloudera; расширяет визуальный интерфейс, добавив Hadoop Sqoop и Oozie». Тенденции и приложения баз данных (dbta.com). 2012-07-27. Архивировано из оригинал на 2015-12-08. Получено 2015-12-08.
Pentaho Business Analytics 4.5 теперь сертифицирован для последних выпусков Cloudera, Cloudera Enterprise 4.0 и CDH4. Pentaho также объявила, что возможности ее студии визуального дизайна были расширены до компонентов Sqoop и Oozie Hadoop.
- ^ «Коннектор Microsoft SQL Server для Apache Hadoop». Получено 8 сен, 2012.
- ^ «Коннектор Couchbase Hadoop». Архивировано из оригинал на 2012-08-25. Получено 8 сен, 2012.
Библиография
- Белый, Том. «Глава 15: Sqoop». Hadoop: полное руководство (2-е изд.). O'Reilly Media. стр.477–495. ISBN 978-1-449-38973-4.