+ 2

MapReduce для анализа данных

Здравствуйте! Нужна помощь в написании программы. Может быть подскажите ресурсы, где подробно и понятно объясняется про BigData. Задача: На вход в программу подается список ключевых слов. Ищутся статьи, у которых в заголовке или в тексте встречаются данные слова. Задать вес слова в заголовке и статье. Ранжируем статьи, указывая суммарный вес, название, дату выпуска и гиперссылку на статью. Данные берутся тут: https://www.kaggle.com/yutkin/corpus-of-russian-news-articles-from-lenta Программу необходимо сделать, используя технологии Map Reduce.

1st Dec 2019, 10:32 PM
Liza Belova
Liza Belova - avatar
2 odpowiedzi
+ 3
Ярослав Вернигора (Yaroslav Vernigora) это можно распараллелить на любом языке. Питон тоже подходит
2nd Dec 2019, 9:23 AM
Liza Belova
Liza Belova - avatar
+ 1
Это Питон?
1st Dec 2019, 11:44 PM
Yaroslav Vernigora
Yaroslav Vernigora - avatar