Różnice między wybraną wersją a wersją aktualną.
Poprzednia rewizja po obu stronachPoprzednia wersjaNowa wersja | Poprzednia wersja | ||
aktualnosci:ai_selfthough_blog [2025/05/09 10:55] – administrator | aktualnosci:ai_selfthough_blog [2025/05/09 11:14] (aktualna) – administrator | ||
---|---|---|---|
Linia 2: | Linia 2: | ||
{{: | {{: | ||
+ | |||
źródło: https:// | źródło: https:// | ||
Linia 14: | Linia 15: | ||
{{: | {{: | ||
+ | |||
źródło: https:// | źródło: https:// | ||
Testowałem ten zestaw narzedzi i niestety ale wszystkie potrzebne pliki którymi chcielibyśmy uczyć AI trzeba wysłać przez panel webowy do modelu który trenujemy co jest strasznie mozolne. Potem model musi to wszystko przeczytać co powoduje że trwa to jeszcze dłużej. Nie jest to najlepsze rozwiązanie do takiego zastosowania jak wymieniłem we wstępie. Nie ma tutaj też możliwości podłączenia jakiegoś katalogu z plikami tak żeby AI sobie wszystko zaindeksowała a następnie odpowiadała na pytania zgodnie z tą wiedzą. | Testowałem ten zestaw narzedzi i niestety ale wszystkie potrzebne pliki którymi chcielibyśmy uczyć AI trzeba wysłać przez panel webowy do modelu który trenujemy co jest strasznie mozolne. Potem model musi to wszystko przeczytać co powoduje że trwa to jeszcze dłużej. Nie jest to najlepsze rozwiązanie do takiego zastosowania jak wymieniłem we wstępie. Nie ma tutaj też możliwości podłączenia jakiegoś katalogu z plikami tak żeby AI sobie wszystko zaindeksowała a następnie odpowiadała na pytania zgodnie z tą wiedzą. | ||
+ | Zaleta tego rozwiązania jest jedna jest to program webowy można go otworzyć wszedzie oraz ma możliwość podłączenia różnych dostawców usług AI w jedno miejsce, co pozwala na porównywanie wyników różnych modeli AI. | ||
+ | |||
+ | Poza tym ma fajne ustawienia uprawnień do modeli oraz promptów. | ||
+ | |||
+ | Sam okazjonalnie korzystam z tego narzędzia ponieważ bardziej opłaca się płacić za poszczególne żądania do API OpenAI niż za całą subskypcje ChatGPT PLUS albo PRO. | ||
+ | |||
+ | {{youtube> | ||
+ | |||
+ | Fajny materiał omawiający OpenWebUi na YT | ||
+ | |||
+ | ===== LMstudio ====== | ||
+ | |||
+ | {{: | ||
+ | |||
+ | źródło: | ||
+ | |||
+ | To jest narzędzie które zainstalowałem na mojej głównej stacji roboczej. Jest to fajny program jeżeli chcecie na komputerze poczatować z AI na jakieś tematy poufne. Tutaj znowu jest ten sam problem jak ten z OpenWebUi, narzędzie to zachowuje się jak aplikacja Webowa przerobiona na aplikację desktop za pomocą pakietu Elektron. Ma to swoje wady, wrzucanie plików działa tak samo jak w OpenWebUi, powoduje to ten sam problem czyli nie możemy wysłać 100 plików bo cała aplikacja się zawiesi, nie ma również mozliwości podpięcia katalogu tak żeby AI go zindeksowała. | ||
+ | |||
+ | Jest to fajny program jak chcecie w łatwy sposób poeksperymentować z modelami LLM na swoim własnym komputerze. | ||
+ | |||
+ | ===== GPT4ALL ===== | ||
+ | |||
+ | {{: | ||
+ | |||
+ | źródło: https:// | ||
+ | |||
+ | Od razu disclaimer nie testowałem jeszcze tego narzędzia. Natomiast ze strony możemy przeczytać że: | ||
+ | > Chat with Your Files Privately: Introducing LocalDocs Grant your local LLM access to your private, sensitive documents with LocalDocs. | ||
+ | |||
+ | Czyli być może będzie to właśnie to o co mi chodzi. | ||
+ | |||
+ | W dokumentacji na stronie możemy przeczytać: | ||
+ | |||
+ | >How It Works. A LocalDocs collection uses Nomic AI's free and fast on-device embedding models to index your folder into text snippets that each get an embedding vector. These vectors allow us to find snippets from your files that are semantically similar to the questions and prompts you enter in your chats. We then include those semantically similar snippets in the prompt to the LLM. To try the embedding models yourself, we recommend using the Nomic Python SDK | ||
+ | |||
+ | Zapowiada się dobrze, z dokumentacji wynika że jest specjalne narządzie od Nomic AI które indeksuje foldery pliki zostają zamienione na snipetty i każdy znich ma wektor zagnieżdzania, | ||
+ | |||
+ | Z tego co mogliśmy przeczytać jest to coś co pozwala najbliżej się zbliżyć do tego co chciałem osiągnąć. | ||
+ | |||
+ | W jednym z następnych postów będziemy robić testy tego rozwiązania i będziemy patrzeć jak sobie radzi z większą ilością danych oraz czy w ogóle się do czegoś nadaje. | ||
+ | |||
+ | --- // | ||
~~DISCUSSION~~ | ~~DISCUSSION~~ | ||