Jak użyć lokalnego modelu AI do odpowiadania na wiadomości SMS

W tym artykule przeprowadzimy Cię przez proces konfiguracji lokalnego modelu AI do automatycznego odpowiadania na wiadomości SMS za pomocą Ozeki AI Server i Ozeki SMS Gateway. Ta konfiguracja umożliwia wdrożenie chatbotu zasilanego sztuczną inteligencją, który może efektywnie obsługiwać przychodzące zapytania SMS.

Co to jest lokalny model AI?

Lokalny model AI to model sztucznej inteligencji, który jest zainstalowany, przechowywany i wykonywany bezpośrednio na lokalnym komputerze lub serwerze, zamiast polegać na systemach opartych na chmurze. Pozwala użytkownikom uruchamiać aplikacje AI w trybie offline, zapewniając pełną kontrolę nad prywatnością danych, bezpieczeństwem i dostosowaniem.

Co to jest Ozeki AI Server?

Ozeki AI Server to potężna platforma programowa, która integruje sztuczną inteligencję (AI) z systemami komunikacji, umożliwiając firmom tworzenie i wdrażanie aplikacji napędzanych AI. Obsługuje różne zadania automatyzacji, takie jak wiadomości tekstowe, połączenia głosowe, chatboty i procesy uczenia maszynowego. Łącząc AI z sieciami komunikacyjnymi, zwiększa obsługę klienta, usprawnia przepływy pracy i poprawia interakcje z użytkownikami w różnych branżach. Ozeki AI Server zapewnia kompleksowe rozwiązanie dla organizacji, które chcą zwiększyć efektywność komunikacji dzięki technologii AI.

Co to jest Ozeki SMS Gateway?

Ozeki SMS Gateway to wszechstronne rozwiązanie programowe zaprojektowane, aby umożliwić firmom wysyłanie i odbieranie wiadomości SMS za pośrednictwem wielu kanałów komunikacji. Integruje się płynnie z aplikacjami, bazami danych i API, oferując funkcje takie jak automatyczne wiadomości, komunikacja dwukierunkowa i masowa wysyłka SMS. Często używany do powiadomień, alertów, marketingu i wsparcia klienta, zapewnia niezawodne narzędzie do usprawnienia komunikacji poprzez technologię SMS.

Jak pobrać model GGUF z Huggingface (Szybkie kroki)

  1. Otwórz stronę Huggingface
  2. Wybierz modele GGUF
  3. Wyszukaj model
  4. Pobierz plik modelu
  5. Zapisz plik modelu

Jak skonfigurować lokalnego chatbot AI w Ozeki SMS Gateway (Szybkie kroki)

  1. Otwórz Ozeki AI Server
  2. Utwórz nowy model AI
  3. Wybierz plik modelu
  4. Otwórz Ozeki SMS Gateway
  5. Dodaj nową aplikację
  6. Zainstaluj chatbot AI
  7. Wybierz model AI
  8. Włącz chatbot

Wyślij testową wiadomość SMS, na którą odpowie chatbot AI (Szybkie kroki)

  1. Otwórz chatbot AI
  2. Skonfiguruj prompt systemowy
  3. Wyślij testową wiadomość SMS
  4. Odbierz odpowiedź AI

Jak pobrać model GGUF z Huggingface (Wideo tutorial)

W tym filmie dowiesz się, jak pobrać plik modelu GGUF ze strony Huggingface i gdzie prawidłowo umieścić go w systemie do użycia z Ozeki AI Server.

Krok 1 - Otwórz stronę huggingface.co

Najpierw przejdź na stronę Huggingface. Powinieneś zobaczyć podobną stronę (Rysunek 1).

Otwórz stronę huggingface.co
Rysunek 1 - Otwórz stronę huggingface.co

Krok 2 - Wybierz modele GGUF

Wybierz menu Models u góry okna, następnie Libraries, a potem filtruj dla plików GGUF (Rysunek 2).

Wybierz modele GGUF
Rysunek 2 - Wybierz modele GGUF

Krok 3 - Wybierz bibliotekę modelu

W pasku wyszukiwania wpisz "Meta-Llama-3.1-8B-Instruct-hf-Q4_K_M-GGUF" i wybierz model o nazwie "Meta-Llama-3.1-8B-Instruct-hf-Q4_K_M-GGUF". To jest model, którego będziemy używać (Rysunek 3).

Wybierz bibliotekę modelu
Rysunek 3 - Wybierz bibliotekę modelu

Krok 4 - Pobierz plik modelu

Kliknij w zakładkę "Files and versions", wybierz "meta-llama-3.1-8b-instruct-hf-q4_k_m.gguf" i pobierz go, możesz pobrać za pomocą strzałki w dół (Rysunek 4).

Pobierz plik modelu
Rysunek 4 - Pobierz plik modelu

Krok 5 - Skopiuj plik modelu GGUF do C:\AIModels

Umieść wcześniej pobrany plik .gguf w następującej ścieżce: C:\AIModels (Rysunek 5).

Rysunek 5 - Skopiuj plik modelu GGUF do C:\AIModels

Jak skonfigurować lokalnego chatbot AI w Ozeki SMS Gateway (Wideo tutorial)

W tym tutorialu wideo dowiesz się, jak skonfigurować lokalnego chatbot AI w Ozeki SMS Gateway przy użyciu wcześniej pobranego modelu GGUF. Krok po kroku zobaczysz, jak prawidłowo zintegrować model AI z Ozeki AI Server, aby umożliwić automatyczne odpowiedzi na przychodzące wiadomości SMS.

Krok 6 - Otwórz Ozeki AI Server

Uruchom aplikację Ozeki 10. Jeśli jej jeszcze nie masz, możesz pobrać ją tutaj. Następnie otwórz Ozeki AI Server (Rysunek 6).

Open AI Server
Rysunek 6 - Otwórz Ozeki AI Server

Krok 7 - Utwórz nowy model AI GGUF

Interfejs Ozeki AI Server jest teraz widoczny na ekranie. Aby utworzyć nowy model GGUF, kliknij "AI Models" u góry ekranu. Następnie kliknij niebieski przycisk "Create a new AI Model". Po prawej stronie interfejsu zobaczysz różne opcje, wybierz menu "GGUF" (Rysunek 7).

Create newm GGUF AI model
Rysunek 7 - Utwórz nowy model GGUF AI

Krok 8 - Wybierz plik modelu

Po wybraniu menu "GGUF", wybierz zakładkę "General", zaznacz plik modelu "C:\AIModels\Meta-Llama-3.1-8B-Instruct-Q4_K_M.gguf", a następnie kliknij "Ok" (Rysunek 8).

Select model file
Rysunek 8 - Wybierz plik modelu

Krok 9 - Otwórz SMS Gateway

Uruchom Ozeki SMS Gateway w Ozeki 10 (Rysunek 9).

Open SMS Gateway
Rysunek 9 - Otwórz SMS Gateway

Krok 10 - Dodaj nowego użytkownika/aplikację

Po uruchomieniu Ozeki SMS Gateway, przejdź do prawego panelu w sekcji "Users and Applications" i kliknij "Add new user/application...", aby utworzyć nową aplikację (Rysunek 10).

Add newm user/application
Rysunek 10 - Dodaj nowego użytkownika/aplikację

Krok 11 - Zainstaluj AI chatbot

Z dostępnych opcji przejdź do sekcji "Chat bots" i wybierz "AI Chat Bot", a następnie kliknij "Install" (Rysunek 11).

Install AI chatbot
Rysunek 11 - Zainstaluj AI chatbot

Krok 12 - Wybierz model AI

W zakładce "General", odznacz "Send welcome message" i wybierz odpowiedni model, w tym przypadku "GGUF_Model_1". Na koniec kliknij "Ok" (Rysunek 12).

Select AI model
Rysunek 12 - Wybierz model AI

Krok 13 - Włącz chatbot

Aby nawiązać połączenie, przełącz przełącznik na zielony po lewej stronie (Rysunek 13).

Enable chatbot
Rysunek 13 - Włącz chatbot

Jak skonfigurować połączenie klienta SMPP dla AI SMS (Samouczek wideo)

W tym filmie pokażemy, jak utworzyć, skonfigurować i połączyć klienta SMPP do użytku z AI SMS. Dowiesz się, jak krok po kroku skonfigurować połączenie klienta SMPP, ustawić wymagane parametry i zintegrować je z systemem AI SMS.

Krok 14 - Dodaj nowe połączenie

Aby utworzyć nowe połączenie, kliknij "Add new connection..." po lewej stronie, w zakładce "Management" (Rysunek 14).

Add new connection
Rysunek 14 - Dodaj nowe połączenie

Krok 15 - Zainstaluj klienta SMPP

W sekcji "IP SMS connections (SMS)" znajdź opcję "SMPP client" i kliknij "Install", aby kontynuować (Rysunek 15).

Install SMPP Client
Rysunek 15 - Zainstaluj klienta SMPP

Krok 16 - Skonfiguruj klienta SMPP

Skonfiguruj "SMPP client", wypełniając następujące pola w zakładce "General": Host, Port, Username, Password (Rysunek 16).

Configure SMPP client
Rysunek 16 - Skonfiguruj klienta SMPP

Krok 17 - Włącz logowanie

W zakładce "Advanced", w sekcji "Log level", zaznacz wszystkie cztery opcje logowania (Rysunek 17).

Enable logging
Rysunek 17 - Włącz logowanie

Krok 18 - Klient SMPP podłączony

Aby nawiązać połączenie, przełącz przełącznik "Connection" na zielony po lewej stronie. Po pomyślnym połączeniu, możesz przeglądać logi w zakładce "Events" (Rysunek 18).

SMPP Client connected
Rysunek 18 - Klient SMPP podłączony

Krok 19 - Utwórz nową trasę przychodzącą

Aby skonfigurować nową trasę przychodzącą, kliknij przycisk "Trasy" znajdujący się u góry ekranu. Następnie wybierz "Utwórz nową trasę" i skonfiguruj trasy nadawcy i odbiorcy po prawej stronie (Rysunek 19).

Utwórz nową trasę przychodzącą
Rysunek 19 - Utwórz nową trasę przychodzącą

Krok 20 - Utwórz nową trasę wychodzącą

Aby utworzyć nową trasę wychodzącą, kliknij ponownie "Utwórz nową trasę", ale tym razem zamień ustawienia nadawcy i odbiorcy (Rysunek 20).

Utwórz nową trasę wychodzącą
Rysunek 20 - Utwórz nową trasę wychodzącą

Wyślij testową wiadomość SMS, na którą odpowiada chatbot AI (Samouczek wideo)

W tym filmie przeprowadzimy Cię przez proces konfiguracji systemowego promptu i pokażemy, jak działa wysyłanie i odbieranie SMS w czasie rzeczywistym. Dowiesz się, jak skonfigurować systemowy prompt, aby generować odpowiedzi zasilane przez AI, oraz zobaczysz pełny przepływ wysyłania i odbierania wiadomości SMS.

Krok 21 - Otwórz chatbot AI

Aby skonfigurować chatbota, wybierz AI_Bot_1 po prawej stronie i kliknij na niego (Rysunek 21).

Otwórz chatbot AI
Rysunek 21 - Otwórz chatbot AI

Krok 22 - Skonfiguruj systemowy prompt

Aby skonfigurować chatbota, przejdź do zakładki "Konfiguruj" i wybierz sekcję "AI". W polu "Systemowy prompt" wprowadź żądany prompt, który będzie kierował odpowiedziami chatbota, i zaznacz opcję "Użyj systemowego promptu" (Rysunek 22).

Skonfiguruj systemowy prompt
Rysunek 22 - Skonfiguruj systemowy prompt

Krok 23 - Wyślij wiadomość SMS

Jeśli dotarłeś do tego punktu, czas przetestować system. Wyślij SMS, a proces możesz monitorować, logując wiadomość w kliencie SMPP (Rysunek 23).

Wyślij wiadomość SMS
Rysunek 23 - Wyślij wiadomość SMS

Krok 24 - Otrzymano odpowiedź wygenerowaną przez AI

Po wysłaniu SMS, otrzymasz odpowiedź chatbota na swoim telefonie, a także możesz ją zobaczyć w logu AI_Bot_1 (Rysunek 24).

Otrzymano odpowiedź wygenerowaną przez AI
Rysunek 24 - Otrzymano odpowiedź wygenerowaną przez AI

More information