انجام تمرین برنامه نویسی و پیاده سازی کدها در فایل مربوطه

---

شرح پروژه

سلام وقت بخیر من یه تمرین برنامه نویسی دارم که میخوام برام جایگذاری شه.
تمرین: 
۱. پیش‌پردازش داده‌ها: پاک‌سازی متن، حذف نویز، و استانداردسازی داده‌ها.
۲. خوشه‌بندی داده‌ها: استفاده از روش‌هایی مثل K-means یا DBSCAN برای گروه‌بندی داده‌ها.
۳. توسعه API: طراحی API برای اعمال مدل خوشه‌بندی بر داده‌های جدید و اکسل.
۴. تعیین تعداد دسته‌های بهینه: استفاده از معیارهایی مثل Silhouette یا Elbow Method.
۵. ارائه گزارش: نوشتن گزارشی که نتایج و توضیح API را شامل می‌شود.
۶. تجسم داده‌ها: ایجاد نمودارهای تصویری برای نمایش نتایج خوشه‌بندی و تجزیه و تحلیل بصری داده‌ها.

اینم کدا
import pandas as pd
from sklearn.feature_extraction.text import TfidfVectorizer
from sklearn.cluster import KMeans
import matplotlib.pyplot as plt

# خواندن داده‌ها از فایل اکسل
df = pd.read_excel('reason.xlsx')

# پیش‌پردازش متن
df['Cleaned Text'] = df['C'].str.lower().str.replace(r'[^\w\s]', '', regex=True)

# تبدیل متن به بردارهای عددی با استفاده از TF-IDF
vectorizer = TfidfVectorizer(stop_words='english')
X = vectorizer.fit_transform(df['Cleaned Text'])

# تعیین تعداد بهینه خوشه‌ها با استفاده از Elbow Method
sse = []
K = range(2, 10)
for k in K:
    kmeans = KMeans(n_clusters=k, random_state=42)
    kmeans.fit(X)
    sse.append(kmeans.inertia_)

plt.plot(K, sse, 'bx-')
plt.xlabel('Number of clusters')
plt.ylabel('SSE')
plt.title('Elbow Method For Optimal k')
plt.show()

# خوشه‌بندی با تعداد بهینه خوشه‌ها
optimal_k = 4  # بر اساس نمودار Elbow
kmeans = KMeans(n_clusters=optimal_k, random_state=42)
df['Cluster'] = kmeans.fit_predict(X)

# ذخیره فایل اکسل ویرایش شده
df.to_excel('reason_clustered.xlsx', index=False)

# تجسم داده‌ها
plt.scatter(X[:, 0], X[:, 1], c=df['Cluster'], cmap='viridis')
plt.title('Scatter Plot of Clusters')
plt.show()

df['Cluster'].value_counts().plot(kind='bar')
plt.title('Number of Data Points in Each Cluster')
plt.xlabel('Cluster')
plt.ylabel('Count')
plt.show()

من نمیدونم چه مقدار بودجه نیازه تقریبی میزنم. حرف میزنیم باهم

این پروژه شامل 1 فایل مهم است، لطفا قبل از ارسال پیشنهاد حتما نسبت به بررسی این فایل اقدام فرمایید.

مهارت ها و تخصص های مورد نیاز

---

---