Библиотека вопросов
Вопросы с настоящих собесов. Любой можно отработать голосом за пару минут — с интервьюером, баллом и разбором.
Spark-джоба с джойном двух больших таблиц выполняется часами, и в Spark UI видно, что почти все таски закончились за минуту, а несколько висят очень долго. В чём может быть дело и как это лечить?MiddleSpark-джоба обрабатывает большой джойн: почти все задачи стейджа завершаются за минуту, а последние две висят час и иногда падают с OOM. Что происходит и как вы это исправите?Senior