from optimum.intel.openvino import OVModelForCausalLM
from transformers import AutoTokenizer, pipeline
import time

model_id = "MTSAIR/Cotype-Nano-CPU"
model = OVModelForCausalLM.from_pretrained(model_id)
tokenizer = AutoTokenizer.from_pretrained(model_id)

pipe = pipeline("text-generation", model=model, tokenizer=tokenizer, max_length=2048, device="cpu")

messages = [
  {"role": "user", "content": "Расскажи мне про ИИ"},
]

results = pipe(messages)
print(results)

Example request

Request: Расскажи мне про ИИ

Cotype-Nano-CPU response:

Искусственный интеллект (ИИ) — это область компьютерных наук, занимающаяся созданием систем, способных выполнять задачи, требующие человеческого интеллекта. Это включает в себя понимание естественного языка, обучение, восприятие и решение проблем. ИИ может быть как встраиваемым (например, в смартфоне), так и масштабным (например, в крупных исследовательских центрах или компаниях).

Основные аспекты ИИ:

Обучение (Machine Learning, ML): это процесс, при котором алгоритмы "учатся" на основе данных. Существуют различные подходы к обучению, такие как обучение с учителем, без учителя и подкреплением.

Нейронные сети (Neural Networks): это схемы, вдохновленные строением человеческого мозга, которые могут обрабатывать и анализировать большие объемы данных.

Генеративно-состязательные сети (GAN): используются для создания изображений и других форм контента, которые могут быть оригинальными или сгенерированными.

Обработка естественного языка (Natural Language Processing, NLP): позволяет компьютерам понимать и обрабатывать человеческий язык.

Восприятие (Computer Vision): позволяет компьютерам распознавать и интерпретировать изображения и видео.

Решение проблем (Problem Solving): ИИ может находить решения для различных задач, от простых (например, оптимизация задач) до сложных (например, диагностика заболеваний).

Применение ИИ:

Робототехника: ИИ используется для управления роботами, позволяя им выполнять сложные задачи в различных средах.

Медицина: ИИ помогает в диагностике, предсказании исходов и разработке новых лекарств.

Финансы: ИИ используется для анализа рынков, управления портфелями и автоматизации торговых операций.

Образование: ИИ может адаптироваться к индивидуальным потребностям учащихся и предоставлять персонализированные образовательные материалы.

Проблемы и вызовы:

Приватность данных: Использование ИИ может привести к необходимости защиты личных данных пользователей.

Ответственность: когда ИИ принимает решения, важно понимать, кто несет ответственность за эти решения.

Этические вопросы: ИИ может быть использован для создания новых форм дискриминации или предвзятости.

ИИ продолжает развиваться, и его потенциал в различных областях остается неисчерпаемым