Ctrl K
Аналитик данных · Senior · Теория

У вас есть pandas-скрипт, который обрабатывает CSV на двадцать гигабайт и падает по памяти на машине с тридцатью двумя гигабайтами. Что вы будете делать?

~4 мин голосом

Как подойти

Проверяют, понимаете ли вы, почему pandas раздувает данные в памяти, и умеете ли решать проблему системно: сначала измерить, потом сократить объём (колонки, типы, чанки), затем сменить формат или инструмент под задачу, а не просто просить больше железа.

Встречал этот вопрос на настоящем собесе?
Ответов0
Средний балл—
Сильных—
Тренировали0
Темы
Похожие вопросыЕсть два датафрейма pandas: orders с колонками order_id, user_id и amount и users с колонками user_id и country. Напишите функцию revenue_by_country, которая принимает оба датафрейма и возвращает датафрейм со страной, числом уникальных покупателей и суммарной выручкой, отсортированный по выручке по убыванию. JuniorКак в pandas найти и обработать пропущенные значения? JuniorУ вас скрипт на pandas, который обрабатывает таблицу на несколько миллионов строк, работает полчаса и иногда падает по памяти. Как будете его ускорять? Middle

Ответь голосом

Интервьюер задаст этот вопрос и послушает. Думай вслух, проси подсказку, если нужно. Закончил — пауза или «Я ответил», через минуту здесь балл и какие пункты закрыты.

Войти, чтобы ответить

Лучше в наушниках · ~4 мин