LINUX.ORG.RU

Блеск и нищета AI на примере LM Studio.

 , , , ,


0

1

Ну, серьёзно. Она использует 100500 тончайших настроек, там где, используя таки ж AI-шечку, можно было б сделать настройки в виде одной кнопки «настроить оптимально на моём железе». Сапожник без сапог, блин.

Перемещено hobbit из talks

★★★★★

Скинь скриншот окна настроек в чат с ИИ и там же копипасту спеки своего компьютера и попроси подсказать оптимальные настройки :-)

Ну а вообще чтобы ИИ тебе что-то настроил, его ещё надо запустить. А не на всём железе не со всеми настройками оно пойдёт.

KivApple ★★★★★
()

Когда оно будет настраивать само себя, ты уже будешь не нужен. Будут только сапоги самоходы

mamina_radost
()
Последнее исправление: mamina_radost (всего исправлений: 1)
Ответ на: комментарий от KivApple

Ну а вообще чтобы ИИ тебе что-то настроил, его ещё надо запустить. А не на всём железе не со всеми настройками оно пойдёт.

Google Gemini как-то справляется. Идёт практически на любом тапке.

tiinn ★★★★★
() автор топика
Ответ на: комментарий от tiinn

Gemini работает в облаке Google (и ей вообще никакие настройки не нужны, кроме API ключа и, в редких случаях, адрес прокси, если у тебя какое-то необычное подключение к Сети), а LM Studio запускает модели локально

KivApple ★★★★★
()
Последнее исправление: KivApple (всего исправлений: 1)
Ответ на: комментарий от KivApple

Gemini работает в облаке Google (и ей вообще никакие настройки не нужны, кроме API ключа и, в редких случаях, адрес прокси, если у тебя какое-то необычное подключение к Сети), а LM Studio запускает модели локально

Ничто не мешает ей завести своё облако со своей AI-шечкой. Mozilla и Tecno (и многие другие) прекрасно с этой задачей справляются.

И да, LM Studio запускает модели откуда укажешь, из сети тоже умеет.

tiinn ★★★★★
() автор топика
Последнее исправление: tiinn (всего исправлений: 1)
Ответ на: комментарий от goingUp

Ты просто пользуешься по старинке. Сейчас уже не кнопка «сделать хорошо», а промт «сделай хорошо».

Уже давно просто статичная подпись «Сделано хорошо»

GPFault ★★★
()

Большая часть этих настроек субъективна, может тебе надо запустить 20 моделей на одном компьютере, а может тебе достаточно одной и ты готов ждать сутки её ответа. Может ты собираешься задавать модели одиночные вопросы, а может ты будешь пытаться делать на её основе агента.

Gary ★★★★★
()
Ответ на: комментарий от Gary

Большая часть этих настроек субъективна, может тебе надо запустить 20 моделей на одном компьютере, а может тебе достаточно одной и ты готов ждать сутки её ответа

А спросить юзера, что он хочет - у LM Studio язык отвалится?

tiinn ★★★★★
() автор топика
Ответ на: комментарий от tiinn

Ну как она спросит если ты ещё ни одной модели не загрузил ☺️

Для совсем ленивых сделали jan и прочую лабуду, сейчас этих ИИ проектов наговновайбкоженых вагон и маленькая тележка, выбирай не хочу.

А так задача которую ты описываешь нетривиальна, нужна модель с tool calling, с поиском в интернете скорее всего, кто-то должен выдать ей нужные апихи и инструкции и надеяться что модель не достаточно слабая чтоб она не обосралась со всей это информацией. На говножелезе может и не взлететь такая задача.

Gary ★★★★★
()
Ответ на: комментарий от Gary

Ну как она спросит если ты ещё ни одной модели не загрузил

из облака же и спросит.

А так задача которую ты описываешь нетривиальна, нужна модель с tool calling, с поиском в интернете скорее всего, кто-то должен выдать ей нужные апихи

разработчики LM Studio, не?

и надеяться что модель не достаточно слабая чтоб она не обосралась со всей это информацией.

Тут, да.

На говножелезе может и не взлететь такая задача.

Пусть в облаке исполняется.

tiinn ★★★★★
() автор топика
Ответ на: комментарий от tiinn

из облака же и спросит.

Пусть в облаке исполняется.

За чей счёт банкет? :) Понтовая модель + веб-поиск может запросто на такую задачу сожрать несколько баксов. А вообще lm-studio про локальную работу, мало кому кто пользуется ей интересно заводить ещё несколько аккаунтов и что-то проплачивать только потому им лень подвигать слайдер влево-вправо самостоятельно.

Gary ★★★★★
()
Последнее исправление: Gary (всего исправлений: 1)
Ответ на: комментарий от Gary

За чей счёт банкет? :) Понтовая модель + веб-поиск может запросто на такую задачу сожрать несколько баксов.

А за чей счёт банкет мозиллы? А ведь у них халявная ИИ-шечка в облаке. Даже в России работает.

А вообще lm-studio про локальную работу, мало кому кто пользуется ей интересно заводить ещё несколько аккаунтов

дык, заведутся, руки не отсохнут

и что-то проплачивать

хватает и бесплатных облачных ИИ-шечек

tiinn ★★★★★
() автор топика
Ответ на: комментарий от tiinn

А за чей счёт банкет мозиллы? А ведь у них халявная ИИ-шечка в облаке.

Вангую или за счёт донатов на разработку фуррифокса, или в обмен на данные из твоего браузера. Бесплатного ничего не бывает, а языковые модели так вообще очень дорогая штука.

На 1.5 нормальных моделях у которых есть бесплатный доступ обычно стоит рейт лимит который агентам не даст работать.

Gary ★★★★★
()
Ответ на: комментарий от Gary

Вангую или за счёт донатов на разработку фуррифокса, или в обмен на данные из твоего браузера.

LM Studio тоже может личные данные тайком собирать. Все так делают. Как раз хватит на ИИ-шечку в облачке. Она ж узкоспециализированная будет, не общего пользования.

tiinn ★★★★★
() автор топика
  • Markdown
Пустая строка (два раза Enter) начинает новый абзац. Знак '>' в начале абзаца выделяет абзац курсивом цитирования.
Внимание: прочитайте описание разметки Markdown.
Используйте Ctrl-Enter для размещения комментария