KAHIBARO Bookshelves
Discord Login Register

16.1. علم داده چیست؟

مقدمهٔ ساده به علم داده

علم داده (Data Science) ترکیبی از چند حوزه است:

  • آمار و احتمال
  • برنامه‌نویسی (مثل پایتون)
  • درک مسئلهٔ دنیای واقعی (کسب‌وکار، علوم، مهندسی و …)

هدف علم داده این است که از «داده خام» به «دانش و تصمیم» برسیم.

به زبان خیلی ساده:

$$
\text{داده خام} \;\longrightarrow\; \text{پردازش و تحلیل} \;\longrightarrow\; \text{بینش و تصمیم}
$$

داده دقیقاً چیست؟

در علم داده، «داده» می‌تواند هر چیزی باشد که بتوان آن را ذخیره و اندازه‌گیری کرد:

  • عددها: فروش روزانه، دما، سرعت، تعداد کاربران
  • متن: پیام‌های شبکه‌های اجتماعی، نظرات کاربران، ایمیل‌ها
  • تصویر: عکس‌ها، اسکن پزشکی، تصاویر ماهواره‌ای
  • صدا و ویدئو: ضبط صدا، فیلم، مکالمات
  • دادهٔ جدولی: فایل‌های اکسل، CSV، جدول‌های دیتابیس

علم داده تلاش می‌کند از این تودهٔ عظیم داده، چیزهای مفید بیرون بکشد.

سوال‌های معمول در علم داده

علم داده معمولاً برای پاسخ دادن به این نوع سوال‌ها استفاده می‌شود:

  • چه اتفاقی افتاده است؟
    مثال: «فروش ماه قبل چقدر بوده؟ کدام محصول بیشتر فروخته شده؟»
    → این نوع سوال‌ها «تحلیل توصیفی» هستند.
  • چرا این اتفاق افتاده؟
    مثال: «چرا فروش این ماه کم شده؟ در چه شهرهایی کاهش بیشتری داشتیم؟»
    → این نوع سوال‌ها «تحلیل تشخیصی» هستند.
  • چه چیزی ممکن است در آینده رخ بدهد؟
    مثال: «فروش ماه بعد احتمالاً چقدر می‌شود؟»
    → این نوع سوال‌ها «تحلیل پیش‌بینی» هستند.
  • چه کاری باید انجام دهیم؟
    مثال: «برای افزایش فروش چه پیشنهادهایی می‌توان داد؟»
    → این نوع سوال‌ها «تحلیل تجویزی» هستند.

علم داده می‌تواند در هر چهار نوع تحلیل نقش داشته باشد، ولی در عمل خیلی از پروژه‌های ساده روی دو مورد اول (توصیفی و کمی پیش‌بینی) تمرکز دارند.

چرخهٔ کار در علم داده

تقریباً همهٔ پروژه‌های علم داده، با شکل‌ها و نام‌های مختلف، این مراحل را دارند:

  1. درک مسئله
    • مسئله چیست؟
    • چه تصمیمی باید گرفته شود؟
    • چه سوالی می‌خواهیم پاسخ بدهیم؟
  2. جمع‌آوری داده
    • خواندن فایل‌ها (.csv, .xlsx, …)
    • اتصال به پایگاه داده
    • دریافت داده از API یا وب‌سایت‌ها
  3. پاک‌سازی و آماده‌سازی داده‌ها
    رایج‌ترین و زمان‌برترین بخش کار علم داده:
    • حذف یا کامل کردن مقدارهای گمشده (Missing Values)
    • درست کردن نوع داده (مثلاً تبدیل متن به عدد)
    • حذف ردیف‌های تکراری
    • اصلاح خطاهای واضح (مثلاً سن = ۲۵۰ سال!)
  4. کاوش و تحلیل مقدماتی
    • نگاه کلی به داده: چند سطر، چند ستون، میانگین‌ها، حداقل، حداکثر
    • رسم نمودارهای ساده: هیستوگرام، نمودار خطی، نمودار میله‌ای
    • پیدا کردن الگوها و روابط اولیه بین متغیرها
  5. مدل‌سازی (تحلیل پیشرفته / یادگیری ماشین)
    • ساخت مدل برای پیش‌بینی یا دسته‌بندی (این بخش در این دوره فقط در حد آشنایی مرور می‌شود، اگر جایی مطرح شود)
  6. تفسیر و ارائهٔ نتایج
    • تبدیل نتایج عددی و نمودارها به توضیح قابل فهم برای انسان
    • ارائهٔ گزارش، داشبورد، یا اسلاید
    • پیشنهاد اقدام (Action) بر اساس نتایج

در این فصل، روی مراحل ساده‌تر و قابل انجام با پایتون برای مبتدی‌ها تمرکز می‌کنیم:
جمع‌آوری، پاک‌سازی، تحلیل ساده و مصورسازی اولیه.

نقش پایتون در علم داده

پایتون یکی از محبوب‌ترین زبان‌ها برای علم داده است، به چند دلیل مهم:

  • ساده بودن سینتکس
    کسانی که تازه شروع کرده‌اند، می‌توانند نسبتاً سریع به قسمت تحلیل داده برسند.
  • کتابخانه‌های قدرتمند
    (در بخش‌های بعدی این فصل به آن‌ها می‌پردازیم، فقط نام می‌بریم:)
    • NumPy: کار با آرایه‌ها و محاسبات عددی
    • pandas: کار با داده‌های جدولی (مثل اکسل)
    • matplotlib و seaborn: رسم نمودارها و مصورسازی
    • کتابخانه‌های دیگر برای یادگیری ماشین، آمار و …
  • جامعهٔ کاربری بسیار بزرگ
    مثال‌ها، آموزش‌ها، و جواب سوال‌ها تقریباً برای هر مسئله‌ای در اینترنت پیدا می‌شود.

علم داده در دنیای واقعی: چند مثال ساده

مثال ۱: فروش فروشگاه

فرض کنید یک فروشگاه فایل sales.csv دارد که شامل این ستون‌ها است:

  • تاریخ خرید
  • نام محصول
  • قیمت
  • تعداد
  • شهر

با علم داده می‌توانیم:

  • بفهمیم کدام محصول‌ها بیشترین فروش را دارند.
  • مشخص کنیم در کدام ماه‌ها فروش بیشتر است.
  • ببینیم در چه شهرهایی فروش پایین است و شاید نیاز به تبلیغ دارد.

اینجا علم داده کمک می‌کند «تصمیم‌های تجاری» بهتر گرفته شوند.

مثال ۲: تحلیل نظرات کاربران

یک سایت، هزاران نظر (کامنت) از کاربران دریافت می‌کند:

  • بعضی نظرها مثبت هستند، بعضی منفی، بعضی پیشنهاد می‌دهند.
  • می‌توان با تحلیل متن (Text Analysis) تشخیص داد:
    • کاربران بیشتر از چه چیزی ناراضی‌اند؟
    • چه ویژگی‌هایی را دوست دارند؟

حتی با تکنیک‌های ساده می‌توان مثلاً تعداد دفعاتی که کلمات «خوب»، «بد»، «گرون»، «کند» و … آمده را شمرد و الگوها را دید.

مثال ۳: داده‌های سلامتی

یک پزشک داده‌هایی مثل:

  • قد، وزن، سن، فشار خون، قند خون، …

را برای تعداد زیادی بیمار دارد. با تحلیل این داده‌ها می‌توان:

  • الگوهای خطر را پیدا کرد (مثلاً ترکیب سن بالا + فشار خون بالا)
  • پیشنهادهایی برای سبک زندگی سالم‌تر ارائه داد.

علم داده در چه حوزه‌هایی استفاده می‌شود؟

فقط چند نمونه:

  • کسب‌وکار و بازاریابی: تحلیل فروش، رفتار مشتریان، پیشنهاد محصول
  • مالی و بانکی: تشخیص تقلب، تحلیل ریسک، پیش‌بینی بازار
  • سلامت و پزشکی: تحلیل پرونده‌های پزشکی، کمک به تشخیص، تحقیق علمی
  • شبکه‌های اجتماعی: پیشنهاد دوست، محتوا، تبلیغات هدفمند
  • حمل‌ونقل: مسیرهای بهینه، پیش‌بینی ترافیک، زمان‌بندی
  • ورزشی: تحلیل عملکرد بازیکنان، برنامه‌ریزی تمرین

هر جایی که «داده» وجود دارد، احتمالاً علم داده هم می‌تواند نقش داشته باشد.

تفاوت علم داده با چند اصطلاح نزدیک

در دنیای واقعی این اصطلاح‌ها زیاد شنیده می‌شوند و خیلی وقت‌ها با هم قاطی می‌شوند. در این دوره وارد جزئیات فنی عمیق نمی‌شویم، فقط یک تصویر کلی می‌دهیم:

  • تحلیل داده (Data Analysis)
    بیشتر روی بررسی و توصیف آنچه اتفاق افتاده تمرکز دارد (گزارش، نمودار، میانگین‌ها و …).
  • علم داده (Data Science)
    معمولاً گسترده‌تر است: از جمع‌آوری و پاک‌سازی تا تحلیل و بعضی وقت‌ها ساخت مدل و پیش‌بینی.
  • یادگیری ماشین (Machine Learning)
    بیشتر به بخش «مدل‌سازی خودکار» مربوط است؛ یعنی ساخت الگوریتمی که از داده‌ها «یاد می‌گیرد» تا در آینده پیش‌بینی یا تصمیم بگیرد.

در این فصل، تمرکز ما روی «علم داده مقدماتی با پایتون» است؛ یعنی کار با داده‌ها، تحلیل ساده و رسم نمودارها. بحث یادگیری ماشین فقط اگر لازم باشد، در حد اشاره مطرح می‌شود.

چرا یاد گرفتن علم داده مفید است؟

حتی اگر شغل شما مستقیماً «دانشمند داده» نباشد، مهارت‌های علم داده می‌توانند کمک کنند:

  • بهتر بتوانید اعداد و نمودارها را بفهمید.
  • تصمیم‌های خود را بر اساس «واقعیت و داده» بگیرید، نه حدس و گمان.
  • گزارش‌ها و تحلیل‌های قابل فهم برای دیگران تهیه کنید.
  • در شغل‌های مختلف (مهندسی، مدیریت، بازاریابی، تحقیقاتی و …) یک مزیت مهم داشته باشید.

در بخش‌های بعدی این فصل، خواهید دید که چطور با کمک پایتون، قدم‌به‌قدم روی داده‌ها کار می‌کنیم:
از خواندن و آماده‌سازی، تا تحلیل‌های ساده و مصورسازی.

Views: 0

Comments

Please login to add a comment.

Don't have an account? Register now!

Where to Move

Move chapter:

  • ☰ 1. فصل ۱: برنامه‌نویسی چیست؟
    • ☰ 1.1. برنامهٔ کامپیوتری چیست؟
      • ☰ 1.2. پایتون چیست؟
        • ☰ 1.3. پایتون کجا استفاده می‌شود؟
          • ☰ 1.4. چگونه برنامه‌نویسی به حل مسائل کمک می‌کند
            • ☰ 1.5. اولین برنامهٔ پایتون شما
            • ☰ 2. فصل ۲: راه‌اندازی پایتون
              • ☰ 2.1. نصب پایتون (ویندوز / macOS / لینوکس)
                • ☰ 2.2. استفاده از پایتون در ترمینال
                  • ☰ 2.3. استفاده از یک IDE (IDLE / VS Code)
                    • ☰ 2.4. اجرای اسکریپت‌های پایتون
                      • ☰ 2.5. حالت تعاملی پایتون
                      • ☰ 3. فصل ۳: متغیرها و انواع داده
                        • ☰ 3.1. متغیر چیست؟
                          • ☰ 3.2. ایجاد متغیرها
                            • ☰ 3.3. اعداد (`int`، `float`)
                              • ☰ 3.4. متن (`str`)
                                • ☰ 3.5. مقادیر بولی (`True`، `False`)
                                  • ☰ 3.6. بررسی نوع داده با `type()`
                                  • ☰ 4. فصل ۴: عملیات پایه
                                    • ☰ 4.1. عملیات حسابی
                                      • ☰ 4.2. کار با اعداد
                                        • ☰ 4.3. عملیات روی رشته‌ها
                                          • ☰ 4.4. ترکیب متن و متغیرها
                                            • ☰ 4.5. کامنت‌ها در پایتون
                                            • ☰ 5. فصل ۵: ورودی و خروجی کاربر
                                              • ☰ 5.1. دریافت ورودی از کاربر
                                                • ☰ 5.2. تبدیل ورودی به عدد
                                                  • ☰ 5.3. قالب‌بندی خروجی
                                                    • ☰ 5.4. نوشتن برنامه‌های تعاملی
                                                    • ☰ 6. فصل ۶: شرط‌ها (if / else)
                                                      • ☰ 6.1. عملگرهای مقایسه‌ای
                                                        • ☰ 6.2. عملگرهای منطقی
                                                          • ☰ 6.3. if، elif، else
                                                            • ☰ 6.4. شرط‌های تو در تو
                                                              • ☰ 6.5. اشتباهات رایج مبتدیان
                                                              • ☰ 7. فصل ۷: حلقه‌ها
                                                                • ☰ 7.1. چرا حلقه‌ها مفید هستند؟
                                                                  • ☰ 7.2. حلقه‌های while
                                                                    • ☰ 7.3. حلقه‌های for
                                                                      • ☰ 7.4. شمارنده‌های حلقه
                                                                        • ☰ 7.5. break و continue
                                                                          • ☰ 7.6. تمرین‌های حلقه
                                                                          • ☰ 8. فصل ۸: مجموعه‌های داده
                                                                            • ☰ 8.1. لیست‌ها (Lists)
                                                                              • ☰ 8.2. تاپل‌ها (Tuples)
                                                                                • ☰ 8.3. دیکشنری‌ها (Dictionaries)
                                                                                  • ☰ 8.4. مجموعه‌ها (Sets – مقدماتی)
                                                                                    • ☰ 8.5. انتخاب ساختار دادهٔ مناسب
                                                                                    • ☰ 9. فصل ۹: توابع
                                                                                      • ☰ 9.1. چرا توابع مهم هستند؟
                                                                                        • ☰ 9.2. تعریف توابع
                                                                                          • ☰ 9.3. پارامترها و آرگومان‌ها
                                                                                            • ☰ 9.4. مقادیر بازگشتی
                                                                                              • ☰ 9.5. محدودهٔ متغیرها (محلی در برابر سراسری)
                                                                                                • ☰ 9.6. استفادهٔ مجدد از کد
                                                                                                • ☰ 10. فصل ۱۰: کار با فایل‌ها
                                                                                                  • ☰ 10.1. فایل چیست؟
                                                                                                    • ☰ 10.2. خواندن فایل‌های متنی
                                                                                                      • ☰ 10.3. نوشتن و افزودن به فایل‌ها
                                                                                                        • ☰ 10.4. مسیر فایل‌ها
                                                                                                          • ☰ 10.5. برنامه‌های ساده مبتنی بر فایل
                                                                                                          • ☰ 11. فصل ۱۱: خطاها و اشکال‌زدایی
                                                                                                            • ☰ 11.1. انواع خطاها
                                                                                                              • ☰ 11.2. خواندن پیام‌های خطا
                                                                                                                • ☰ 11.3. خطاهای رایج مبتدیان
                                                                                                                  • ☰ 11.4. try و except
                                                                                                                    • ☰ 11.5. راهبردهای اشکال‌زدایی
                                                                                                                    • ☰ 12. فصل ۱۲: استفاده از کتابخانه‌های پایتون
                                                                                                                      • ☰ 12.1. کتابخانه چیست؟
                                                                                                                        • ☰ 12.2. وارد کردن ماژول‌ها
                                                                                                                          • ☰ 12.3. کتابخانه‌های استاندارد
                                                                                                                            • ☰ 12.3.1. math
                                                                                                                              • ☰ 12.3.2. random
                                                                                                                                • ☰ 12.3.3. datetime
                                                                                                                                • ☰ 12.4. نصب کتابخانه‌های خارجی با pip
                                                                                                                                • ☰ 13. فصل ۱۳: برنامه‌نویسی شی‌گرا (OOP)
                                                                                                                                  • ☰ 13.1. برنامه‌نویسی شی‌گرا چیست؟
                                                                                                                                    • ☰ 13.2. کلاس‌ها و اشیاء
                                                                                                                                      • ☰ 13.3. ویژگی‌ها و متدها
                                                                                                                                        • ☰ 13.4. متد `__init__`
                                                                                                                                          • ☰ 13.5. کپسوله‌سازی
                                                                                                                                            • ☰ 13.6. وراثت (مقدماتی)
                                                                                                                                              • ☰ 13.7. مثال‌های سادهٔ شی‌گرا
                                                                                                                                              • ☰ 14. فصل ۱۴: خودکارسازی با پایتون
                                                                                                                                                • ☰ 14.1. خودکارسازی چیست؟
                                                                                                                                                  • ☰ 14.2. خودکار کردن وظایف ساده
                                                                                                                                                    • ☰ 14.3. کار با فایل‌ها و پوشه‌ها
                                                                                                                                                      • ☰ 14.4. خودکارسازی پردازش متن
                                                                                                                                                        • ☰ 14.5. زمان‌بندی اجرای اسکریپت‌ها
                                                                                                                                                          • ☰ 14.6. مثال‌های کاربردی خودکارسازی
                                                                                                                                                          • ☰ 15. فصل ۱۵: توسعهٔ وب با پایتون
                                                                                                                                                            • ☰ 15.1. وب چگونه کار می‌کند؟ (نمای کلی)
                                                                                                                                                              • ☰ 15.2. آشنایی با Flask
                                                                                                                                                                • ☰ 15.3. ساخت یک وب‌سرور ساده
                                                                                                                                                                  • ☰ 15.4. مسیرها و قالب‌ها (Templates)
                                                                                                                                                                    • ☰ 15.5. پردازش ورودی کاربر (فرم‌ها)
                                                                                                                                                                      • ☰ 15.6. API های بسیار ساده
                                                                                                                                                                      • ☰ 16. فصل ۱۶: علم داده با پایتون
                                                                                                                                                                        • ☰ 16.1. علم داده چیست؟
                                                                                                                                                                          • ☰ 16.2. کار با داده‌ها
                                                                                                                                                                            • ☰ 16.3. آشنایی با NumPy
                                                                                                                                                                              • ☰ 16.4. آشنایی با pandas
                                                                                                                                                                                • ☰ 16.5. مصورسازی داده با matplotlib
                                                                                                                                                                                  • ☰ 16.6. مثال‌های سادهٔ تحلیل داده
                                                                                                                                                                                  • ☰ 17. فصل ۱۷: پروژه‌های کوچک
                                                                                                                                                                                    • ☰ 17.1. بازی حدس عدد
                                                                                                                                                                                      • ☰ 17.2. ماشین‌حساب ساده
                                                                                                                                                                                        • ☰ 17.3. فهرست کارها (To-Do List)
                                                                                                                                                                                          • ☰ 17.4. تولیدکنندهٔ رمز عبور
                                                                                                                                                                                            • ☰ 17.5. برنامهٔ آزمون (Quiz)
                                                                                                                                                                                              • ☰ 17.6. پروژهٔ کوچک وب یا داده
                                                                                                                                                                                              • ☰ 18. فصل ۱۸: گام‌های بعدی
                                                                                                                                                                                                • ☰ 18.1. چگونه پایتون را تمرین کنیم
                                                                                                                                                                                                  • ☰ 18.2. نوشتن کد تمیز و خوانا
                                                                                                                                                                                                    • ☰ 18.3. انتخاب یک حوزهٔ تخصصی
                                                                                                                                                                                                      • ☰ 18.3.1. توسعهٔ وب
                                                                                                                                                                                                        • ☰ 18.3.2. علم داده
                                                                                                                                                                                                          • ☰ 18.3.3. خودکارسازی
                                                                                                                                                                                                            • ☰ 18.3.4. توسعهٔ نرم‌افزار
                                                                                                                                                                                                            • ☰ 18.4. منابع یادگیری و انجمن‌ها
                                                                                                                                                                                                            • ☰ 19. پیوست
                                                                                                                                                                                                              • ☰ 19.1. برگهٔ تقلب دستور زبان پایتون
                                                                                                                                                                                                                • ☰ 19.2. خطاهای رایج و راه‌حل‌ها
                                                                                                                                                                                                                  • ☰ 19.3. واژه‌نامهٔ اصطلاحات