Аллюксио
| Оригинальный автор(ы) | Хаоюань Ли |
|---|---|
| Разработчик(и) | Калифорнийский университет в Беркли AMPLab |
| Первоначальный выпуск | 8 апреля 2013 г |
| Стабильная версия | v2.9.3
/ 24 марта 2023 г [1] |
| Репозиторий | https://github.com/Alluxio/alluxio |
| Написано в | Ява |
| Операционная система | макОС , Линукс |
| Доступно в | Ява |
| Лицензия | Лицензия Апач 2.0 |
| Веб-сайт | www |
Alluxio — это с открытым исходным кодом виртуальная распределенная файловая система (VDFS). Первоначально как исследовательский проект «Тахион», Alluxio был создан в Калифорнийского университета в Беркли под AMPLab руководством Хаоюаня Ли, доктора философии. Диссертация, [2] Консультируют профессор Скотт Шенкер и профессор Ион Стойка . Alluxio находится между вычислениями и хранилищем в стеке анализа больших данных . Он обеспечивает уровень абстракции данных для вычислительных сред, позволяя приложениям подключаться к многочисленным системам хранения через общий интерфейс. Программное обеспечение распространяется под лицензией Apache .
Приложения, управляемые данными, такие как анализ данных, машинное обучение и искусственный интеллект, используют API (например, Hadoop HDFS API, S3 API, FUSE API), предоставляемые Alluxio, для быстрого взаимодействия с данными из различных систем хранения. Популярные фреймворки, работающие поверх Alluxio, включают Apache Spark , Presto , TensorFlow , Trino , Apache Hive , PyTorch и т. д.
Alluxio можно развернуть локально, в облаке (например, Microsoft Azure , AWS , Google Compute Engine ) или в гибридной облачной среде. Он может работать на «голом железе» или в контейнерных средах, таких как Kubernetes , Docker , Apache Mesos .
История
[ редактировать ]Первоначально Alluxio был запущен Хаоюань Ли Калифорнийского университета в Беркли в AMPLab в 2013 году, а исходный код был открыт в 2014 году. В 2018 году у Alluxio было более 1000 участников. [3] что делает его одним из самых активных проектов в экосистеме данных.
| Версия | Исходная дата выпуска | Последняя версия | Дата выпуска |
|---|---|---|---|
| 0.2. | 2013-04-08 | 0.2.1 | 2013-04-25 |
| 0.3. | 2013-10-21 | 0.3.0 | 2013-10-21 |
| 0.4. | 2014-02-02 | 0.4.1 | 2014-02-25 |
| 0.5. | 2014-07-20 | 0.5.0 | 2014-07-20 |
| 0.6. | 2015-03-01 | 0.6.4 | 2015-04-23 |
| 0.7. | 2015-07-17 | 0.7.1 | 2015-08-10 |
| 0.8. | 2015-10-21 | 0.8.2 | 2015-11-10 |
| 1.0. | 2016-02-23 | 1.0.1 | 2016-03-27 |
| 1.1. | 2016-06-06 | 1.1.1 | 2016-07-04 |
| 1.2. | 2016-07-17 | 1.2.0 | 2016-07-17 |
| 1.3. | 2016-10-05 | 1.3.0 | 2016-10-05 |
| 1.4. | 2017-01-12 | 1.4.0 | 2017-01-12 |
| 1.5. | 2017-06-11 | 1.5.0 | 2017-06-11 |
| 1.6. | 2017-09-24 | 1.6.1 | 2017-11-02 |
| 1.7. | 2018-01-14 | 1.7.1 | 2018-03-26 |
| 1.8. | 2018-07-07 | 1.8.2 | 2019-08-05 |
| 2.0. | 2019-06-27 | 2.0.1 | 2019-09-03 |
| 2.1. | 2019-11-06 | 2.1.2 | 2020-02-04 |
| 2.2. | 2020-03-11 | 2.2.2 | 2020-06-24 |
| 2.3. | 2020-06-30 | 2.3.0 | 2020-06-30 |
| 2.4. | 2020-10-19 | 2.4.1 | 2020-11-20 |
| 2.5. | 2021-03-10 | 2.5.0 | 2021-03-10 |
| 2.6. | 2021-06-23 | 2.6.2 | 2021-09-17 |
| 2.7. | 2021-11-16 | 2.7.4 | 2022-04-19 |
| 2.8. | 2022-05-04 | 2.8.1 | 2022-08-17 |
| 2.9. | 2022-11-16 | 2.9.3 | 2023-03-27 |
Легенда: Старая версия Старая версия, все еще поддерживается Последняя версия Последняя предварительная версия | |||
Предприятия, использующие Alluxio
[ редактировать ]Ниже приводится список известных предприятий, которые использовали или используют Alluxio:
См. также
[ редактировать ]- Кластерная файловая система
- Сравнение распределенных файловых систем
- Глобальное пространство имен
- Список файловых систем
Ссылки
[ редактировать ]- ^ «Релизы · Аллюксио/аллюксио» . github.com . Проверено 4 марта 2023 г.
- ^ Ли, Хаоюань (7 мая 2018 г.). Alluxio: виртуальная распределенная файловая система (технический отчет). Департамент EECS, Калифорнийский университет, Беркли. UCB/EECS-2018-29.
- ^ Открытая деятельность по разработке HUB Alluxio.
- ^ «Этот новый проект с открытым исходным кодом в 100 раз быстрее, чем Spark SQL при производстве петабайтных масштабов» .
- ^ «Делаем невозможное возможным с помощью Tachyon: ускорьте работу Spark с часов до секунд» .
- ^ «Большая ставка China Unicom на открытый исходный код» .
- ^ «Внедрение машинного обучения — управление происхождением от необработанных данных до прогнозов» .
- ^ «Cray Analytics и Alluxio — решение проблем корпоративного хранилища» . Архивировано из оригинала 14 июля 2019 г. Проверено 19 февраля 2019 г.
- ^ «Использование и практика Аллюксио в Диди» .
- ^ «Трансформация данных в финансовых услугах» .
- ^ «ArcGIS и Alluxio — использование Alluxio для расширения возможностей данных ArcGIS и более быстрого получения аналитической информации из всех ваших данных» .
- ^ «Huawei обнимает Alluxio с открытым исходным кодом: спасибо за воспоминания» . Регистр .
- ^ «Как Alluxio ускоряет рабочие нагрузки Apache Spark» . Архивировано из оригинала 14 июля 2019 г. Проверено 19 февраля 2019 г.
- ^ «Начало работы с Tachyon по вариантам использования» .
- ^ «Использование Alluxio в качестве отказоустойчивого подключаемого компонента оптимизации вычислительных инфраструктур JD.com» .
- ^ «Крупнейший в мире производитель компьютеров Lenovo выбирает Alluxio для управления данными смартфонов по всему миру» .
- ^ «Повышение ценности Alluxio с помощью твердотельных накопителей Samsung NVMe» .
- ^ «Tencent предоставляет персонализированные новости более чем 100 миллионам пользователей в месяц с помощью Alluxio» .
- ^ «Практика Alluxio на платформе данных почти в реальном времени в VIPShop» .
- ^ «Воплощение данных в жизнь — методы управления данными и визуализации» .