Apache Hadoop

Apache Hadoop с открытым исходным кодом и свободной библиотеки программного обеспечения, предназначенный в качестве основы, что позволяет распределение больших наборов данных через компьютерные кластеры, используя ничего, кроме простых моделей программирования.
Apache Hadoop разработан таким образом, что он может масштабироваться до от отдельных машин серверных тысяч машин, при том у каждой локального хранения и вычислений.
Программное обеспечение включает в себя следующие модули: Hadoop Common, Hadoop Distributed File System (HDFS), Hadoop пряжа, и Hadoop MapReduce. Он распространяется как отдельное приложение по Apache Software Foundation.
Среди некоторых Hadoop связанных проектов, связанных распространяются Apache Software Foundation, мы можем отметить, Apache Ambari, Apache Cassandra, Apache Chukwa, Apache HBase, Apache Hive, Apache Mahout, Apache Pig, и Apache Zookeeper.

< сильный> Что нового В этом выпуске:

• Важные замечания
• Этот релиз падает поддержку JDK6 выполнения и работает с JDK 7+ только.
• Этот релиз еще не готов для использования в производстве. Важнейшие вопросы в настоящее время устранены с помощью тестирования и вниз по течению принятия. Пользователи производственного следует ждать релиза 2.7.1 / 2.7.2.
• Hadoop Общие
• Hadoop-9629 - Поддержка Windows Azure Storage -. Blob в качестве файловой системы Hadoop в
• Hadoop HDFS
• HDFS-3107 - Поддержка файлов усечение
• HDFS-7584 - поддержка квот для каждого типа хранения
• HDFS-3689 - Поддержка файлов с переменной длиной блоков
• Hadoop ПРЯЖА
• ПРЯЖА-3100 - авторизация ПРЯЖА Сделайте замены
• ПРЯЖА-+1492 - Автоматическая общая, глобальная кэширование пряжи локализованных ресурсов (бета-версия)
• Hadoop MapReduce
• MapReduce-5583 - Возможность ограничить работает Map / Reduce задачи работы
• MapReduce-4815. - Ускорить FileOutputCommitter для очень больших рабочих мест с многих выходных файлов

Что нового в версии 1.2.1 / 2.1.0 Beta:

• HDFS Снимки
• Поддержка запуска Hadoop на Microsoft Windows
• стабилизация ПРЯЖА API
• Двоичная совместимость для MapReduce приложений построен на Hadoop-1.x
• Существенное количество интеграционного тестирования с остальной проектов в экосистеме

Что нового в версии 1.2.1:

• Этот релиз включает новую разработчиков и пользователей обращенных несовместимости , признаки и основные улучшения.

Требования

• Java 2 Standard Edition Runtime Environment