|
Ma’lumot to’plamlari (data set) turlari
|
| bet | 4/4 | | Sana | 19.05.2024 | | Hajmi | 3,66 Mb. | | #244277 |
Bog'liq Mashinani o\'qitish algoritmlariMa’lumot to’plamlari (data set) turlari
Mashinani o’qitish jarayonida va modelning to’liq ishlashini ta’minlash
maqsadida quyidagi ma’lumotlar to’plami turlaridan foydalaniladi: - o’qituvchi to’plam, o’quv tanlanma (training set);
- validatsiya to’plami (validation set);
- testlash to’plami (testing set).
Ma’lumotlar turini belgilash (Format): O’qituvchi to’plamdagi ma’lumotlar turi va toifasini moslashtirish (Misol uchun, o’qitiluvchi to’plam sifatida 100 t rasm olingan bo’lsin, rasmlar har xil o’lchamda yoki har xil fayl formatida bo’lishi mumkin).
Ma’lumotlarni tozalash (Data Cleaning): Ushbu bosqichda ma’lumotlar orasidan ortiqcha yoki ahamiyati past bo’lgan (masalan, sifati juda past bo’lgan tasvirlar, o’lchami juda kichik bo’lgan rasmlar), model turg’unligiga ta’sir qiluvchi ma’lumotlar olib tashlanadi.
Xususiyatlarni ajratib olish (Feature Extraction): Ushbu bosqichda o’qituvchi to’plamdagi ma’lumotlar xususiyatlari o’rganib chiqiladi va bashoratlash, tashxislash, sinflashtirish, qaror qabul qilish uchun kerakli xususiyatlar ajratib olinadi. (Misol uchun rasmda “olma” tasvirlanganligini belgilab beruvchi xusisyatlar).
Ma’lumotlarga dastlabki ishlov berish
O’qituvchisiz o’qitish (unsupervised learning) – bu mashinani o’qitish usulidan biri bo’lib, bunda modelni oldindan aniq bo’lgan ma’lumotlar bilan o’qitish amalga oshirilmaydi, aksincha obyekt parametrlarini (ma'lumotlarni) topish uchun modelga o'z ustida ishlashga imkon yaratib beriladi.
Supervised learning usuliga qaraganda murakkab usul hisoblanadi va bashoratlash jarayoni avtomatik lekin noaniqroq bo’lishi mumkin.
Unsupervised learning usulida asosan “klasterlash” masalasi yechiladi.
Unsupervised learning Unsupervised learning: “Klasterlash”
Clustering
- Hierarchical clustering
- K-means clustering
- K-NN (k nearest neighbors)
- Principal Component Analysis
- Singular Value Decomposition
- Independent Component Analysis
Artificial intelligance with ML
Aurelian Geron, Hands on Machine Learning with Scikit-Learn Keras&Tensorflow // Second edition Concepts, Tools, and Techniques to Build Intelligent Systems, 2019, 510 pages
https://www.geeksforgeeks.org/ml-machine-learning/ https://www.geeksforgeeks.org/ml-types-learning-supervised-learning/ https://www.guru99.com/unsupervised-machine-learning.html
|
| |
