Big Data Architect
Нижний Новгород
от 8 лет
Вам придется определить самые важные потоки, подготовить экосистему для их хранения с последующим быстрым доступом к ним. Масштаб такой системы измеряется петабайтами.
ТРЕБОВАНИЯ
- Понимание архитектуры BigData, технологий Hadoop стека(HDFS, HBase, Kafka, MapReduce, YARN, Spark, Hive)
- Понимание принципов реализации систем мониторинга инфраструктуры (Prometheus, Zabbix, Grafana, ELK)
- Опыт проектирования и внедрения больших гетерогенных хранилищ данных
- Опыт программирования на Python/Java
- Опыт применения Spark Streaming
- Опыт разворачивания кластеров Hadoop + GPU кластеры
- Опыт в СУБД (как реляционных так и не реляционных)
- отличное знание английского языка.