Наука про дані

Я вивчаю масштабування даних і, зокрема, метод стандартизації. Я зрозумів математику за цим, але мені незрозуміло, чому важливо наводити функції нульової середньої та одиничної дисперсії. Ви можете мені пояснити?

10 machine-learning  feature-scaling  normalization 

Я хотів би перевірити JPG-файли, чи маніпулювали ними для зміни вмісту. Що я вважаю НЕ фотошопом: Обрізання Обертовий (Масштабування) Роздільна здатність зображення Автоматичні зміни можуть робити смартфони Що я вважаю фотошопом: Додавання нового зображення поверх частин старого зображення Зміна тексту частини зображення Як це можна автоматично перевірити? (І чи є …

10 computer-vision 

Я розумів, що аналіз основних компонентів - це техніка зменшення розмірності, тобто з 10 вхідних ознак, вона створить меншу кількість незалежних ознак, які є ортогональними та лінійними перетвореннями оригінальних ознак. Є чи PCAсам по собі розглядається як алгоритм навчання або це крок попередньої обробки даних.

10 machine-learning  pca 

Проведення лінійної регресійної моделі за допомогою функції втрат, чому я повинен використовувати L1L1L_1 замість L2L2L_2 регуляризація? Чи краще у запобіганні надмірного пристосування? Це детерміновано (тому завжди унікальне рішення)? Чи краще при виборі функцій (тому що виробляються рідкісні моделі)? Чи розподіляє ваги серед особливостей?

10 linear-regression  regularization 

У мене є набори даних, які містять серед багатьох функцій координати GPS (широта та довгота). Я хотів би використовувати ці набори даних для дослідження таких проблем, як: (1) обчислення ETA для руху між початковою та кінцевою точками; та (2) оцінка кількості злочину для конкретного пункту. Я хотів би використовувати лінійну …

10 machine-learning  feature-selection  linear-regression  feature-extraction  geospatial 

Чи можливо реалізувати безглузді софтмакси в останньому шарі в Керасі? Отже сума Вузлів 1-4 = 1; 5-8 = 1; тощо. Чи варто перейти до іншого дизайну мережі?

10 machine-learning  keras  multiclass-classification 

Я читаю наріжний документ « Послідовність до послідовності навчання за допомогою нейронних мереж » Іллі Суцкевера та Квока Ле. На першій сторінці коротко згадується, що: A surprising example of the power of DNNs is their ability to sort N N-bit numbers using only 2 hidden layers of quadratic size Чи …

10 deep-learning 

Відповіді на цю заяву вказували, що розміри в t-SNE є безглуздими і що відстані між точками не є мірою подібності . Однак чи можемо ми сказати що-небудь про точку на основі найближчих сусідів у просторі t-SNE? Ця відповідь на питання, чому точки, які точно однакові, не кластеризовані, дозволяє припустити, що …

10 tsne 

У мене є набір даних з 330 зразками та 27 функцій для кожного зразка, з проблемою бінарного класу для логістичної регресії. Відповідно до "правила, якщо десять", для кожної функції мені потрібно принаймні 10 подій. Хоча я маю незбалансований набір даних із 20% o позитивним класом і 80% негативним класом. Це …

10 machine-learning  python  predictive-modeling  logistic-regression  data 

Зараз я читаю книгу під назвою "Ручне машинне навчання за допомогою Scikit-Learn та TensorFlow", і в главі 11 вона містить такий опис щодо пояснення ELU (Exponential ReLU). По-третє, функція скрізь гладка, в тому числі навколо z = 0, що сприяє прискоренню градієнтного спуску, оскільки воно не відскакує стільки, скільки вліво …

10 deep-learning  gradient-descent 

Я початківець у нейромережах, і зараз вивчаю модель word2vec. Однак у мене важкий час, щоб зрозуміти, що саме являє собою матриця функцій. Я можу зрозуміти, що перша матриця - це гарячий вектор кодування для даного слова, але що означає друга матриця? Більш конкретно, що означає кожне з цих значень (тобто …

10 machine-learning  neural-network  word2vec 

У мене такий набір даних: Зразок фрейму даних import pandas as pd df = pd.DataFrame({ 'names': ['A','B','C','D','E','F','G','H','I','J','K','L'], 'col1': [0, 1, 0, 1, 1, 1, 0, 0, 0, 1, 0, 0], 'col2': [0, 0, 0, 0, 1, 0, 1, 0, 1, 0, 0, 0]}) Я хотів би замінити деякі з 0"в" …

10 python  pandas  dataframe 

Я працюю над додатком, щоб допомогти людям вивчати англійську мову як другу мову. Я підтвердив, що речення допомагають вивчати мову, надаючи додатковий контекст. Я зробив це, провівши невелике дослідження в класі 60 учнів. Я видобув понад сто тисяч речень з Вікіпедії для різних англійських слів (включаючи 800 слів Баррона і …

10 machine-learning  classification  nlp  text-mining 

Чи існує спосіб збереження змінної (велика таблиця / кадр даних) у пам’яті та обміну нею в декількох ноутбуках ipython? Я б шукав щось, що концептуально схоже на постійні змінні MATLAB. Там можна викликати користувальницьку функцію / бібліотеку з декількох окремих редакторів (зошитів) і мати цю зовнішню функцію кешувати деякий результат …

10 python  bigdata  matlab  jupyter  ipython 

У Вступі я щойно змінився loss = tf.reduce_mean(tf.square(y - y_data)) до loss = tf.reduce_mean(tf.abs(y - y_data)) і модель не в змозі дізнатись, з часом збитки тільки зростали. Чому?

10 neural-network  deep-learning  tensorflow