Наука про дані

Я багато разів аналізував набір даних, на якому я не міг зробити жодної класифікації. Щоб побачити, чи можу я отримати класифікатор, я зазвичай використовую такі кроки: Створіть графіки графіки мітки проти числових значень. Зменшіть розмірність до 2 або 3, щоб побачити, чи розділяються класи, також іноді пробуйте LDA. Намагайтеся налаштувати …

11 machine-learning  classification  deep-learning  class-imbalance  bayes-error 

Зараз я беру статтю про Big Data, яка використовує R сильно для аналізу даних. У мене, здається, GTX1070 в моєму ПК з ігрових причин. Таким чином, я подумав, що це було б дуже здорово, якби я міг скористатися цим, щоб прискорити обробку деяких речей, які мені займаються мої викладачі, але …

11 r  gpu  parallel 

Вхідні дані: ХXX -> особливості футболки (колір, логотип тощо) YYY -> норма прибутку Я навчив випадковий ліс на вищезгаданих і і досяг розумної точності на даних тесту. Отже, маюYХXXYYY П( Y| Х)P(Y|X)P(Y|X) . Тепер я хотів би знайти тобто розподіл ймовірності ознак, враховуючи, що я очікую такої великої норми прибутку.П( …

11 machine-learning  random-forest  generative-models 

Ці дві згорткові операції зараз дуже поширені в глибокому навчанні. Про розширений згортковий шар я читав у цій статті: WAVENET: ЗАГАЛЬНА МОДЕЛЬ ДЛЯ RAW AUDIO і Деконволюція знаходиться в цій статті: Повністю згорткові мережі для семантичної сегментації Як здається, обидва знімають зображення, але в чому різниця?

11 machine-learning  deep-learning  convnet  computer-vision  convolution 

Я деякий час працював над машинним навчанням та біоінформатикою, і сьогодні я мав розмову з колегою про основні загальні питання видобутку даних. Мій колега (який є експертом з машинного навчання) сказав, що, на його думку, найважливішим практичним аспектом машинного навчання є те, як зрозуміти, чи ви зібрали достатньо даних для …

11 machine-learning  data-mining  dataset  data-cleaning  data 

На даний момент я намагаюся навчити модель на великому файлі csv (> 70 ГБ з більш ніж 60 мільйонами рядків). Для цього я використовую tf.contrib.learn.read_batch_examples. Я намагаюся зрозуміти, як ця функція насправді читає дані. Якщо я використовую розмір партії, наприклад, 50 000, чи читає вона перші 50 000 рядків файлу? …

11 python  tensorflow 

Я створюю просту нейронну мережу за допомогою tensorflow, а дані, які я зібрав сам, однак, це не співпрацює: PI зіткнувся з помилкою, яку я не можу виправити або знайти виправлення, і я би радив вашій допомозі. Повідомлення про помилку: TypeError: Аргумент вилучення 2861.6152 з 2861.6152 має недійсний тип, повинен бути …

11 machine-learning  python  neural-network  tensorflow 

Я створюю простий чат. Я хочу отримати інформацію з відповіді користувача. Приклад сценарію: Bot : Hi, what is your name? User: My name is Edwin. Я хочу витягти ім’я Едвін із речення. Однак користувач може реагувати різними способами, такими як User: Edwin is my name. User: I am Edwin. User: …

11 python  nlp 

Я маю мережеву архітектуру з паперу, "вивчаючи дрібнозернисту схожість зображення з глибоким ранжуванням", і я не в змозі зрозуміти, як виводиться з трьох паралельних мереж злиття за допомогою лінійного шару вбудовування. Єдина інформація, що надається на цьому шарі, в роботі Нарешті, ми нормалізуємо вставки з трьох частин і поєднуємо їх …

11 neural-network  deep-network 

Це визначення не зовсім застосовне, оскільки ми не завжди припускаємо базовий розподіл. Так що ж насправді модель? Чи можна вважати ГБМ із вказаними гіперпараметрами моделлю? Чи є модель збіркою правил?

11 machine-learning 

Бібліотека matplotlib дуже здатна, але їй не вистачає інтерактивності, особливо всередині Jupyter Notebook. Я хотів би хороший автономні креслення інструменту , як plot.ly .

11 python  visualization  pca  jupyter 

Я намагаюся використовувати CNN (звивисту нейронну мережу) для класифікації документів. CNN для короткого тексту / речень вивчався у багатьох працях. Однак, схоже, жоден папір не використовував CNN для довгого тексту чи документа. Моя проблема полягає в тому, що в документі занадто багато функцій. У моєму наборі даних кожен документ містить …

11 classification  neural-network  text-mining  convnet  word2vec 

Які функції ви спробуєте витягнути зі списку слів для майбутнього передбачення, чи це існуюче слово чи просто безлад символів? Опис завдання, який я там знайшов . Ви повинні написати програму, яка зможе відповісти, чи є слово англійською. Це буде просто - вам просто потрібно буде пошукати слово в словнику - …

11 machine-learning  nlp  text-mining  algorithms 

Alexa Amazon , Mix Nuance's Mix і Facebook Wit.ai використовують подібну систему, щоб вказати, як перетворити текстову команду в наміри - тобто те, що комп'ютер зрозумів би. Я не впевнений, що це за "офіційна" назва, але я називаю це "визнанням наміру". В основному це спосіб перейти від "будь-ласка, встановіть моє …

11 machine-learning  nlp 

Я абсолютно новачок у word2vec, тому, будь ласка, несуть це зі мною. У мене є набір текстових файлів, кожен з яких містить набір твітів, між 1000-3000. Я вибрав загальне ключове слово ("kw1") і хочу знайти семантично релевантні терміни для "kw1" за допомогою word2vec. Наприклад, якщо ключове слово "яблуко", я б …

11 machine-learning  nlp  text-mining