|
Talab asosida faktografik ma’lumotlarni to‘playdi, unga izox beradi, manba tili, xronologiyasini aniqlaydi va olingan manbaga analitik tavsif beradi
|
bet | 6/6 | Sana | 03.01.2024 | Hajmi | 1,78 Mb. | | #129771 |
Bog'liq 1-amaliy ish 12122-TOPSHERIQ
2.Talab asosida faktografik ma’lumotlarni to‘playdi, unga izox beradi, manba tili, xronologiyasini aniqlaydi va olingan manbaga analitik tavsif beradi.
Analitik vositalar
Analitik muammolarni hal qilish uchun mutaxassislar turli xil dasturiy ta'minot va ilovalardan foydalanadilar. Barcha analitik vositalar ular uchun mo'ljallangan muammolarni hal qilish bosqichiga qarab bir necha turlarga bo'linadi.
Ma'lumotlarni yig'ish va saqlash uchun. Har bir kompaniyaning o'z ma'lumotlar bazasi mavjud. Birida bu Excel jadvallari, ikkinchisida Oracle yoki MySQL kabi jiddiy yechimlar bo'lishi mumkin. Ushbu biznes razvedka vositalarining maqsadi katta hajmdagi ma'lumotlarni saqlash va ularni tezda olishdir.
Ma'lumotlarni tahlil qilish uchun. Yig'ilgan ma'lumotlar o'lik vaznda bo'lmasligi, balki ishlashi uchun uni ma'lumotlar bazasidan olib tashlash va turli dasturlardan foydalangan holda ma'lum mezonlar bo'yicha tahlil qilish kerak. Ma'lumotlarni tahlil qilish uchun eng mashhur vositalardan biri Jupyter Notebook hisoblanadi .
Ma'lumotlarni vizuallashtirish uchun. Ma'lumotlarni tahlil qilishdan so'ng olingan ma'lumotlar qulay va tushunarli shaklda taqdim etilishi kerak. Vizual grafiklar va hisobotlarni yaratish uchun vizualizatsiya dasturlari va xizmatlaridan foydalaniladi. Oddiylarga Power Point yoki Miro kiradi . Analitika bilan ishlash uchun murakkabroq vositalar - Tableau, Power BI.
Ma'lumotlarni tahlil qilish jarayonida olingan ma'lumotlarni asboblar panelida - grafik interfeysli interaktiv panellarda qulay tarzda o'rganish mumkin.
Ma'lumotlarni prognoz qilish uchun. Такие инструменты нужны, чтобы на основании прошлого опыта компании могли принимать успешные решения в будущем, создавать модели поведения клиентов, составлять прогнозы ежедневного спроса определённой группы товаров и т. д. Чтобы создавать достоверные прогнозы, специалисты используют ключевые инструменты аналитиков: языки программирования Python, R va boshqalar.
Ma'lumotlarni tahlil qilish vositalari va dasturlari bepul yoki tijorat bo'lishi mumkin. Mana ular qanday farq qiladi.
Bepul ma'lumotlarni tahlil qilish vositalari. Ular ochiq manbadir va pulli versiyalarga yangilash shart emas. Bu shuni anglatadiki, har qanday mutaxassis manba kodini o'zgartirish orqali asbobning imkoniyatlarini kengaytirishi mumkin. Foydalanuvchilar hamjamiyati odatda qo'llab-quvvatlash xizmati sifatida ishlaydi. Ochiq manbali vositalar ham startaplar, ham yirik kompaniyalar tomonidan qo'llaniladi, chunki bu dasturlarning imkoniyatlari darajasi ko'pincha pullik mahsulotlardan kam emas.
Jupyter Notebook brauzerining versiyasi ochiq manba va foydalanish uchun bepul
Tijorat biznes razvedkasi vositalari. Bu yopiq manba dasturiy ta'minot. Ushbu vositalarni o'zgartirish mumkin emas va odatda qimmat. Ammo barcha qo'llab-quvvatlash, o'qitish va muammolarni bartaraf etish butunlay dasturiy mahsulotni ishlab chiqaruvchiga bog'liq.
Qanday qilib ma'lumotlar tahlilchisi bo'lish mumkin
Yangi boshlanuvchilar uchun bepul qo'llanma: ma'lumotlar tahlilchisi qanday muammolarni hal qiladi va mashg'ulotlarga qancha vaqt sarflaydi.
Ma'lumotlar tahlilchisi qanday vositalarni bilishi kerak?
Tahlilchining asosiy vositalari unga ma'lumotlarni to'plash, qayta ishlash, tahlil qilish va sharhlashda yordam beradi. Ko'p sonli xizmatlar va dasturiy ta'minotga qaramay, amalda mutaxassis o'z ishida 3-4 ta asosiy vositadan foydalanadi. Ularning tanlovi nafaqat tahlilchining bilimi va tajribasiga, balki kompaniya allaqachon nima bilan ishlayotganiga ham bog'liq. Misol uchun, agar biznes qimmatbaho vosita bo'lgan Tableau dan foydalansa, tahlilchi Power BI da ishlashga o'rganib qolgan bo'lsa ham u bilan ishlashi kerak bo'ladi . Lekin kod yozish nuqtai nazaridan mutaxassis tanlashda erkin va istalgan dasturlash tilidan foydalanishi mumkin.
Analitik ishi uchun 10 ta asosiy vosita
Biz deyarli barcha mutaxassislar tomonidan qo'llaniladigan eng keng tarqalgan ma'lumotlarni tahlil qilish vositalarini tanladik. Yana ko'plab dasturlar, texnologiyalar va ilovalar mavjud, ammo biz o'zlashtirgan asboblar sonini ta'qib qilishni tavsiya etmaymiz. Bu yoki boshqa texnologiya va dastur yordamida nima qilish mumkinligini tushunish muhimroqdir.
SQL va lazzatlar
SQL (Structured Query Language) - ma'lum bir tuzilishga muvofiq ma'lumotlar bazasi so'rovlarini yaratadigan maxsus til. Uning yordami bilan tahlilchi ma'lumotlarni "qabul qiladi" va keyin Python kabi boshqa, yanada moslashuvchan dasturlash tilidan foydalangan holda qayta ishlaydi.
SQL-da o'zgarishlar mavjud. Masalan, MySQL ma'lumotlar bazasini boshqarish tizimi, unda siz har qanday ma'lumotlarni saqlashingiz mumkin: mijozlar bilan aloqalar, mahsulot kartalari, materiallarning nashr etilgan sanasi haqidagi ma'lumotlar va boshqalar. so'rovlar, masalan, moliya sektori, sanoat, yirik chakana savdo. SQL va uning variantlari ochiq manbali vositalardir va shuning uchun har qanday soha va formatdagi korxonalar uchun mavjud.
Python va kutubxonalar
Bu dasturlash tili va ma'lumotlar bilan ishlash uchun universal vositadir. U oddiy sintaksisga ega, shuning uchun unda kod yozish Java kabi boshqa tillarga qaraganda tezroq. Python-da tahlilchilar real vaqtda gipotezalarni kodlash va sinab ko'rish uchun foydalanadigan o'rnatilgan tarjimonga ega.
SQL buyruqlari bilan Python kodining namunasi
Foydalanuvchilarga ushbu vosita bilan ishlashni osonlashtirish uchun ishlab chiquvchilar kutubxonalar - shablonli fayllarni yaratdilar. Ular har safar bir xil kodni kiritishingiz shart emas, balki ma'lumotlaringizni kiritib, natijalarga erishishingiz uchun kerak. Bu erda eng mashhur kutubxonalar mavjud.
● Pandalar. To'liq bo'lmagan va tartibsiz ma'lumotlarni tahlil qilishga yordam beradigan eng oddiy kutubxona - bu eng keng tarqalgan narsa. Pandas kutubxonasida ma'lumotlarni filtrlash, guruhlash va birlashtirish uchun tayyor usullar mavjud.
● Matplotlib. Turli xil grafiklarni yaratishga imkon beruvchi vizualizatsiya kutubxonasi: oddiydan gistogramma va doiraviy diagrammalargacha.
● NumPy. Katta ma'lumotlar to'plamlarini qayta ishlash va massivlar bilan matematik operatsiyalarni osonlashtirish uchun kutubxona.
R
Boshqa dasturlash tili va Pythonga raqobatchi. Ushbu vosita statistik ma'lumotlar bilan ishlash uchun til sifatida yaratilgan. R - bu bepul mahsulot bo'lib, uni Tableau yoki Excel kabi boshqa vositalarga haq evaziga qo'shish mumkin . Endi til unchalik mashhur emas va ko'pincha katta hajmdagi statistik ma'lumotlarni tahlil qilish zarur bo'lgan sohalarda qo'llaniladi: banklar, fan, tibbiyot, ta'lim.
Jupyter daftar
Ma'lumotlarni tahlil qilish uchun universal vosita. Jupyter - bu Python tili uchun bepul interaktiv muhit. Bu yerda siz kodni ishga tushirishingiz, natijalarni olishingiz va ular bilan ishlashni davom ettirishingiz mumkin. Har bir fragment bilan alohida va istalgan tartibda ishlashingiz mumkin, masalan, bitta funktsiyani yozib, butun dasturni ishga tushirmasdan uning ishlashini tekshirishingiz mumkin. Shuningdek, natijalarni kodning bir qismini yozganingizdan so'ng darhol ko'rsatishingiz mumkin, masalan, oraliq grafikni qurish, uni alohida fayl sifatida saqlash va undan keyin taqdimotda foydalanish.
Jupyter Notebook hamkasblar bilan hamkorlik qilishni osonlashtiradi. Bu yerda siz daftarlaringizni boshqa foydalanuvchilar bilan – pochta orqali, Dropbox yoki Jupyter Notebook Viewer orqali almashish va almashishni sozlashingiz mumkin.
Jupyter Notebook brauzerda ochiladi yoki kompyuteringizga o'rnatiladi. Birinchi holda, dastur biroz sekinroq ishlaydi, lekin kompyuteringizga hech narsa yuklab olishingiz shart emas
DBeaver
Turli ma'lumotlar bazalari (MySQL, PostgreSQL, Oracle va boshqalar) bilan ishlash uchun universal vosita. DBeaver analitik dasturi:
● ma'lumotlar bazalarini boshqarish: ma'lumotlarni tahlil qilish, eksport va import qilish, foydalanuvchi seanslari bilan ishlash;
● ma'lumotlarni vizualizatsiya qilish;
● maʼlumotlarni koʻrish, tahrirlash, saralash va filtrlash.
DBeaver - har xil turdagi ma'lumotlar bilan ishlash uchun universal vosita
DBeaver bepul versiyada mavjud - ochiq manba yoki tijorat maqsadlarida foydalanish uchun. Dastur kompyuterga o'rnatilgan va turli xil operatsion tizimlar ostida ishlaydi: Windows, MacOS, Linux
Talend
Bu ma'lumotlar integratsiyasi jarayonini soddalashtiradigan va soddalashtiradigan ETL vositasi. ETL texnologiyalari (Extract, Transform, Load) - "chiqarish, o'zgartirish va yuklash" - bir nechta manbalardan ma'lumotlarni tezda birlashtirish kerak bo'lganda qo'llaniladi. Misol uchun, do'konlar tarmog'i kiyimlarni onlayn va oflayn rejimda sotadi. Ikki manbadan savdo samaradorligini baholash uchun siz bir nechta ma'lumotlar bazalaridan ma'lumotlarni yuklashingiz kerak. Ma'lumotni CRM, veb-trafikni tahlil qilish tizimlari va boshqalardan birma-bir yuklab olish mumkin. Va siz buni bir vaqtning o'zida qilishingiz mumkin - Talend yordamida. Ma'lumotlar birlashtirilgan va keyingi tahlil uchun ishlatilishi mumkin.
Talend ochiq manbali vositadir, ya'ni dasturning asosiy versiyasidan foydalanish bepul.
Tableau, Power BI
Tahlilchi ma'lumotlarni tahlil qilish natijasida oladigan ma'lumotlar vizual ravishda taqdim etilishi kerak - grafikalar, diagrammalar, hisobotlar ko'rinishida. Buni qo'lda bajarmaslik uchun vizualizatsiya vositalaridan foydalaniladi. Masalan, Tableau yordamida siz istalgan ma'lumotlar bazasidan ma'lumotlarni import qilishingiz va uni kerakli shaklda taqdim etishingiz mumkin. Tableau qimmat va har bir kompaniyada mavjud emas.
Tableau ish ekranlaridan biri
Tableauga muqobil sifatida tahlilchilar Microsoft Power BI vositasidan foydalanadilar. Bu yerda ish stoli versiyasi bepul mavjud. Power BI MySQL, Google Analytics, CRM va boshqa manbalardan olinishi mumkin bo'lgan katta hajmdagi ma'lumotlarni qayta ishlash uchun javob beradi. Power BI Mobile mobil ilovasida tayyor hisobotlarni ko'rish qulay - iOS va Android uchun versiyalari mavjud.
Power BI Mobile-da siz sharhlar qoldirishingiz, qaydlar olishingiz va individual grafik yoki diagrammalarni almashishingiz mumkin
Visual Studio kodi
Kod yozishda yordam beradigan tahlilchilar orasida mashhur vosita. VSCode umumiy dasturlash tillarining sintaksisini taniydi va kod yozishda xatolarning oldini oladi. Uning yordamida siz kompyuteringizga o'rnatilgan har qanday Python tarjimonini ulashingiz va ushbu kod qanday ishlashini darhol ko'rishingiz mumkin.
Tahlilchilar VSCode-ni soddaligi va qulayligi uchun yaxshi ko'radilar.
Bu yerda siz bir oynada har xil turdagi fayllarni ochishingiz, turli muharrirlar va brauzerlar oʻrtasida almashishingiz mumkin – bu orqali siz tezroq va samaraliroq ishlashingiz mumkin.
VSCode Microsoft hamjamiyati tomonidan kuchli qo'llab-quvvatlanadi va rus tilidagi ko'plab materiallarga ega.
Visual Studio kodidagi ishchi oynaga misol
Excel
Kichik kompaniyalarda kichik hajmdagi ma'lumotlarni to'plash va tahlil qilish uchun Microsoft jadvallaridan foydalangan holda tahlil hali ham mashhur. Ammo Excel vizualizatsiya vositasi ko'pincha shunday ishlatiladi. Bu yerda tahlil natijalarini eksport qilish va hatto bu yerda murakkab grafik va diagrammalarni yaratish qulay.
Excel o'rniga siz Google Sheets-dan foydalanishingiz mumkin, masalan, bu erda kompaniyangiz byudjetini boshqarishingiz mumkin.
Daromad va xarajatlarning har bir toifasi bo'yicha ma'lumotlar vizual diagramma shaklida taqdim etiladi
SAS
Bu biz yuqorida aytib o'tgan barcha texnologiyalarni bitta qobiq ostida birlashtirgan keng qamrovli yechimdir. U statistik algoritmlar va bashoratli modellar yordamida ma'lumotlarni qayta ishlash va vizualizatsiya qilish, hisobotlarni yig'ish va ilg'or tahlillarni o'tkazish uchun ishlatiladi. SAS mijozlar va ularning ma'lumotlari xavfsizligi birinchi navbatda muhim bo'lgan va buning uchun pul to'lashga tayyor bo'lgan yirik kompaniyalarda qo'llaniladi.
|
|
Bosh sahifa
Aloqalar
Bosh sahifa
Talab asosida faktografik ma’lumotlarni to‘playdi, unga izox beradi, manba tili, xronologiyasini aniqlaydi va olingan manbaga analitik tavsif beradi
|