Использование Apache Hive для создания Data WareHouse из текстовых файлов

Подготовим среду Hive для использования запросов и управления большими данными, находящихся в распределённых хранилищах.   Для создания таблицы в HDFS необходимо в командной строке прописать следующий код hadoop fs -mkdir /user/hive/warehouse/<имя директории>/. Нам необходимо создать три файла и переместить их в файловое хранилище HDFS. Создаем первый файл price hadoop fs -mkdir /user/hive/warehouse/price/ hadoop fs -copyFromLocal … [Читать дальше…]

Песочница. Оценка ювелирного изделия

 Условия: Представьте, что вы аналитик на проекте разработки ПО, предназначенного для автоматизации учета выдачи ссуд в микро кредитной организации (ломбард). Заказчик выслал Вам следующее описание бизнес-процесса своей деятельности: Клиент приносит в ломбард ювелирное изделие. Приемщик производит оценку ювелирного изделия. Оценка зависит от следующих параметров: — Вес золота; — Проба золота; — Состояние изделия. Приемщик озвучивает … [Читать дальше…]