Публикации по теме 'data-engineering'
Понимание NLP Pipeline
Введение в фазы трубопровода НЛП
Обработка естественного языка (NLP) - одна из самых быстрорастущих областей в мире. Это подраздел искусственного интеллекта, занимающийся взаимодействием человека с компьютером. Основные задачи в НЛП включают распознавание речи , понимание естественного языка и создание естественного языка . НЛП внедряется в ряд продуктов и услуг, которыми мы пользуемся каждый день. В этой статье дается обзор распространенного сквозного конвейера НЛП.
Общий..
Концепции обработки данных № 1 — «Медленно меняющиеся измерения»
Введение
Поскольку мы постоянно загружаем данные в хранилище данных, нам неизбежно придется иметь дело с изменениями в исторических данных.
Хранилища данных по определению содержат исторические данные. Что нам делать, когда приходит новый пакет данных и некоторые атрибуты в таблицах изменились? Это распространенная проблема в хранилищах данных, которая называется Медленно меняющиеся измерения (SCD) .
Методы работы с SCD применяются к таблицам измерений, а не к таблицам фактов ...
Красный или синий? Квадратный или круглый? Вверх или вниз? A/B-тестирование гипотез.
A/B тестирует все
Эффективность рекламной кампании
В этом посте мы обсудим A/B-тестирование, сосредоточившись на рекламной компании, которая запускает онлайн-рекламу для клиента с целью повышения узнаваемости бренда. Компания-рекламодатель зарабатывает деньги, взимая плату с клиента на основе взаимодействия пользователей с рекламой, которую она разработала и показывала на разных платформах. Чтобы повысить свою конкурентоспособность на рынке, рекламная компания предоставляет..
Обзор группы данных: понимание ролей инженера данных, специалиста по данным и данных…
Введение
Привет!! Меня зовут Санджай, мне 18 лет, и я учусь на первом курсе компьютерных наук. Я работаю в технике уже почти два года. Ранее я работал UI/UX дизайнером и Front-end разработчиком (в основном удаленная работа).
Это мой первый блог, связанный со специализацией/работой с данными. В течение нескольких месяцев я был в кроличьей норе, как крупные технологические компании и стартапы используют большие данные для облегчения принятия решений и улучшения качества продуктов или..
CSV переоценены! Я отказываюсь от некоторых преимуществ, чтобы получить больше.
Альтернатива, которую я использую, позволяет использовать меньшие размеры файлов и лучшую производительность.
CSV хороши, но их переоценивают.
Я давно пользуюсь CSV. Как и все остальное сообщество специалистов по данным. Потом Рассолить на некоторое время.
CSV работают в любой системе, ничего не устанавливая. В конце концов, они представляют собой простые текстовые файлы с разделителем-запятой. Этот факт также делает их очень простыми для понимания.
Но мы слишком долго..
Еженедельник по инженерии данных № 34
История представляет собой кросс-публикацию из еженедельника Data Engineering Weekly. Пожалуйста, подпишитесь на информационный бюллетень Data Engineering, чтобы быть в курсе последних обновлений.
www.dataengineeringweekly.com
Добро пожаловать в 34-й выпуск информационного бюллетеня по инженерии данных. Релиз на этой неделе представляет собой новый набор статей, посвященных массивно-параллельным вычислениям графов Google, пути передачи данных Uber, сетке данных Hyperight, подходящей..
Новые материалы
Объяснение документов 02: BERT
BERT представил двухступенчатую структуру обучения: предварительное обучение и тонкая настройка.
Во время предварительного обучения модель обучается на неразмеченных данных с помощью..
Как проанализировать работу вашего классификатора?
Не всегда просто знать, какие показатели использовать
С развитием глубокого обучения все больше и больше людей учатся обучать свой первый классификатор. Но как только вы закончите..
Работа с цепями Маркова, часть 4 (Машинное обучение)
Нелинейные цепи Маркова с агрегатором и их приложения (arXiv)
Автор : Бар Лайт
Аннотация: Изучаются свойства подкласса случайных процессов, называемых дискретными нелинейными цепями Маркова..
Crazy Laravel Livewire упростил мне создание электронной коммерции (панель администратора и API) [Часть 3]
Как вы сегодня, ребята?
В этой части мы создадим CRUD для данных о продукте. Думаю, в этой части я не буду слишком много делиться теорией, но чаще буду делиться своим кодом. Потому что..
Использование машинного обучения и Python для классификации 1000 сезонов новичков MLB Hitter
Чему может научиться машина, глядя на сезоны новичков 1000 игроков MLB? Это то, что исследует это приложение.
В этом процессе мы будем использовать неконтролируемое обучение, чтобы..
Учебные заметки: создание моего первого пакета Node.js
Это мои обучающие заметки, когда я научился создавать свой самый первый пакет Node.js, распространяемый через npm.
Оглавление
Глоссарий
I. Новый пакет
1.1 советы по инициализации..
Забудьте о Matplotlib: улучшите визуализацию данных с помощью умопомрачительных функций Seaborn!
Примечание. Эта запись в блоге предполагает базовое знакомство с Python и концепциями анализа данных.
Привет, энтузиасты данных! Добро пожаловать в мой блог, где я расскажу о невероятных..