Практическое задание
Искусственный интеллект создал код для решения о выпуске нового LLM. Проведите обзор: измените его так, чтобы редактор мог сравнить качество версий по тематическим сегментам, увидеть разброс оценок и заметить риск ухудшения на малой группе данных.
import matplotlib.pyplot as plt
import pandas as pd
scores = pd.read_csv('model_scores.csv')
summary = scores.groupby('model_version')['score'].mean()
plt.bar(summary.index, summary.values)
plt.title('Качество моделей')
plt.ylabel('Средняя оценка')
plt.show()
print('Лучшая версия:', summary.idxmax())
---
import matplotlib.pyplot as plt
import pandas as pd
scores = pd.read_csv('model_scores.csv')
stats = (
scores.groupby(["topic", "model_version"])["score"]
.agg(["mean", "std", "count"])
.reset_index()
)
print(stats)
for topic, group in scores.groupby("topic"):
group.boxplot(column="score", by="model_version")
plt.title(f"Тема: {topic}")
plt.suptitle("")
plt.ylabel("Оценка")
plt.show()
small_groups = stats[stats["count"] < 30]
print("Малые группы - выводы ненадежны:")
print(small_groups)
