Конференция HighLoad++ 2020
Темы выступлений — все аспекты разработки и поддержки высоконагруженных систем. Спикеры расскажут про архитектуры и разные методологии.
— Читать дальше «Конференция HighLoad++ 2020»
…
Category: Big Data
Spark Java multiLine option не работает для CSV файла
Я сделал пример и поместил данные в CSV файл в котором не срабатывает корректный вывод data frame, а именно опция мультистрочность.
Мой CSV файл:
id;brand;model;engine;doors;color;date;description
1;Mercedes;W124;^6 straight^;5;black;12/31…
Как в нейронную сеть засунуть данные из CSV файла?
Как в нейронную сеть засунуть данные из CSV файла?
Работа с большими объемами данных в Python
Сам вопрос: существует ли способ работы с большими объемами данных в питоне, если количество оперируемых строк примерно 1-1,5 миллиарда, а объем ОЗУ ограничен 16ГБ? Структура данных следующая: список кортежей, которые всегда состоят из дву…
Какую технологию или сервис можно использовать для обработки, аналитики больших данных на PHP?
Всем привет.
Есть файл например xls или текстовый файл в котором 100 тыс. и более строк.
Вопрос.
Какую службу или технологию можно использовать чтобы например я этот файл передал допустим на сервер по API там ее обработал и получил результ…
Как грамотнее работать с фотографиями в маркетплейсе? PHP MYSQL
Как грамотнее хранить и выводить изображения товаров в маркетплейсе?
Мои варианты:
1. При добавлении товара фотки загрузить на сервер, а ссылку изображения сохранить в базу, после чего её вывести
2. Просто загрузить в определённый путь,…
Как автоматически чистить RAM с помощью python?
В наличии 96GB оперативной памяти. Работаю с большими данными.
Когда я запускаю инстансы на одном наборе данных, у меня используется примерно 60GB оперативки.
Соответственно, когда я запускаю другой инстанс на том же наборе данных (т. е…
Программы, сервисы для анимирования и визуализации данных статистики
На Youtube есть канал с названием “TheRankings”. Есть ли программы, сервисы для анимирования и визуализации данных? Или способ как это можно реализовать через Python?
…
8–9 февраля, Москва: хакатон Moscow Travel Hack
Хакатон, на котором от участников ждут решения, которые помогут создать новые проекты в области туризма и гостеприимства.
— Читать дальше «Хакатон Moscow Travel Hack»
…
30 ноября, Москва: конференция YaTalks 2019
На большой и неформальной конференции для веб-разработчиков можно познакомиться с поднаготной сервисов Яндекса и познакомиться с классными разработчиками.
— Читать дальше «Конференция YaTalks 2019»
…
8 ноября, Казань: конференция «DUMP Казань»
Конференция татарских разработчиков, на которой можно будет послушать доклады на 4 потоках: бэкенд, фронтенд, DevOps и менеджмент.
— Читать дальше «Конференция «DUMP Казань»»
…
Факультет «Аналитика Big Data» онлайн-университета GeekUniversity
Изучите основные инструменты и подходы для работы с данными в течение 1,5 лет обучения. Решите 6 проектных задач и будете готовы к трудоустройству.
— Читать дальше «Факультет «Аналитика Big Data» онлайн-университета GeekUniversity»
…
8 июня, Самара: Data Science Panda Meetup
Топовые специалисты по анализу данных и машинному обучению поговорят о лучших практиках, развитии и инструментах разработчика.
— Читать дальше «Data Science Panda Meetup»
…
9 сентября, Москва: курсы Ozon Masters
Преподаватели из крупнейших вузов России и учебных центров обучат студентов анализу данных и машинному обучению за два года.
— Читать дальше «Курсы Ozon Masters»
…
Конференция JEEConf 2019
Обязательное мероприятие для разработчиков на Java любого уровня. Заведёте знакомства, получите массу впечатлений, опыта и знаний по самым важным темам.
— Читать дальше «Конференция JEEConf 2019»
…
Конференция SECON’2019
На конференции узнаете последние тренды и новости из мира IT, пообщаетесь со специалистами и посоревнуетесь с другими гостями в логическом мышлении.
— Читать дальше «Конференция SECON’2019»
…
Конференция разработчиков DUMP-2019
Будут доклады и мастер-классы по ключевым направлениям современного IT: веб, менеджмент, DevOps, Mobile, тестирование, дизайн и интерфейсы, Science.
— Читать дальше «Конференция разработчиков DUMP-2019»
…
Конференция #ITsubbotnik Spring 2019
Топовые сотрудники EPAM поделятся последними новостями энтерпрайза, рассмотрят интересные кейсы и покажут необычные техники разработки сервисов.
— Читать дальше «Конференция #ITsubbotnik Spring 2019»
…
Курс «Python для анализа данных» от Mail.Ru Group
Mail.Ru Group совместно с МФТИ запустили на онлайн-платформе Coursera программу «Python для анализа данных». Кому подойдёт? Курс завершает специализацию «Программирование на Python», поэтому рассчитан на учащихся со средними знаниями разработки. Есть б…
Топ книг по программированию, вышедших на русском языке в 2018 году
2018 год был достаточно богат на выход русскоязычной литературы по программированию. К сожалению, всё вместить в одну подборку невозможно, поэтому мы отобрали лучшие книги по различным категориям: веб-разработка; языки программирования;
— Читать дальше…
Конференция MAKE IT REAL
17 декабря в Москве QIWI проведёт TECH DAY — MAKE IT REAL, призванный объединить увлечённых профессионалов в сфере информационных технологий. Кому будет интересно? IT-специалистам, уже опробовавшим инновации на практике или только готовящимся вне…
Митап SBERTECH Dev #2
13 декабря «Сбербанк Технологии» проведёт в Екатеринбурге вторую встречу MeetUP SBERTECH Dev. Для кого? Для разработчиков и IT-специалистов любого уровня. О чём пойдёт разговор на митапе? В рамках митапа лучшие спикеры «СберТех» поделятся своими нарабо…
Database Meetup
6 декабря в Омске пройдёт встреча администраторов и разработчиков баз данных Database Meetup. Кого ждут? Всех, кто работает с Java и PL/SQL для управления СУБД, а также администраторов других продуктов Oracle. Что в программе? Разговор пойдёт об оптими…
Хакатон Urban.Tech Challenge
С 7 по 10 декабря в Москве пройдёт крупнейший в России хакатон Urban.Tech Challenge, направленный на создание новых цифровых сервисов и продуктов для повышения качества городской среды и для улучшения цифрового ландшафта города Москвы. Кто может участв…
Практический курс по Machine Learning
26 ноября в Москве стартует практический курс по Machine Learning, организаторами которого выступают университет «Иннополис», BigData Team и «МегаФон». Нужны ли базовые знания чего-либо? Да. Курс рассчитан на опытных Python-разработчиков с базовыми зна…
Хакатон социальных проектов PublicData
24–25 ноября АНО «Информационная культура» проведёт в Москве хакатон PublicData, посвящённый социальным проблемам. Для кого? Организаторы приглашают мобильных и веб-разработчиков, дизайнеров, дата-журналистов и активистов. Что нужно делать? Участники х…
Курс «Python для анализа данных»
21 ноября начнётся восьминедельный онлайн-курс «Python для анализа данных», организованный SkillFactory. Для кого? Учебная программа ориентирована как на новичков в программировании, так и на разработчиков с опытом. Авторы подчёркивают, что тот Python,…
Конференция #ITsubbotnik SPB Autumn 2018
17 ноября EPAM проведёт в Санкт-Петербурге традиционную внешнюю конференцию для разработчиков #ITsubbotnik Autumn 2018. Кому будет интересно? Продвинутым разработчикам ПО уровня Senior и выше. О чём расскажут на #ITsubbotnik? В этот раз мероприятие раз…
Конференция #ITsubbotnik
27 октября в Москве состоится конференция EPAM #ITsubbotnik. О чем расскажут? На мероприятии специалисты EPAM поделятся лайфхаками и расскажут о необычных задачах на проектах и их решениях. Доклады пойдут в три потока. Бизнес-аналитика — расскажут про …
Ошибка многоклассовой классификация на python (xgboost)?
Моя первая многоклассовая классификация. У меня есть значения Xtrn и Ytrn. Ytrn имеет пять возможных исходов [0,1,2,3,4]. Но при запуске выдает ошибку
“multiclass format is not supported”.
Это пример данных:
Xtrn …
Свежие комментарии