Счастье, оно в мелочах и улыбках16 читателей тэги

Слушала лекцию из курса подготовки для конкурса. Полезного в ней особо не нашла для себя. Высокомерно подумала, что не только все это знала, но и сама бы могла такую вести при необходимости. Устыдилась и решила себя напинать, чтобы вообще к нему готовиться а не только думать о том, как готовиться.

Вернулась к анализу данных. Как это все должно работать, я уже придумала. Один вариант программы уже есть, но его результатам верить не могу. Работать с настолько большим массивом данных не могу. Это выливается в постоянные вылеты из-за предела использования памяти. Единственный вариант это дробить шаги с потерей точности. Пыталась. Большую часть данных уже провела через это. Но. Как по мне результаты выглядят слишком подозрительно. Ну не может быть таких низких показателей.

Пока слушала эту лекцию, вспоминала учёбу в университете. И тут до меня дошло, что в общем-то мы раньше работали с большими данными в специальной среде.

Оказывается, если свободной памяти на компьютере остаётся несколько мегабайт, но первым ломается просмотр изображений, за ним начинает сбоить сохранение в Экселе.

Установила ту среду. С шаманством, иначе не назвать все эти этапы обработки данных в блокноте, экселе, трех написанных на коленке вспомогательных программах и основной выстраданной, все же смогла докрутить информациию и загнать в среду.

Одна из особенностей того языка - работа с запросами. Если в моем основном языке идёт работа с переменными, то тут логика иная. И написать функцию, чтобы получить переменную, чтобы получить результата анализа переменной превращается в копание в документации, чтобы найти расширение, которое владеет нужными методами, которые могут делать нужные запросы. Ы. Мозг нереально ломается от резкого перехода.

Сам язык не помню вообще. Что хуже, не помню и названия предметов, в рамках которых мы его использовали. Всё материалы есть где-то на облаке, но найти их не могу. Засада.

Нагуглила хороший учебник, десяток форумов в помощь. Написала. На малой выборке все работает. Большая третий час считается. Хожу туда-сюда и уговариваю отвлечься на книгу/сериал. Уже был один сбой из-за достижения лимита памяти, но вышаманила его увеличение. Надеюсь, что к утру получу первый результат. Потом точно придётся переделывать, чтобы точность повысить, но пусть уже хоть как-нибудь досчитается. Не зря на лекцию-то подключалась, вон она как мотивировала.