Dlaczego połączenia w pokoju Matrix Synapse są powolne i co należy sprawdzić

Zacznij od sprawdzenia, czy powolne dołączenia dotyczą jednego pokoju, jednego zdalnego serwera domowego, czy wszystkich pokoi federacyjnych. Skorzystaj ze statusu i logów miejsc docelowych federacji w Synapse, aby zlokalizować powtarzające się błędy przed zmianą limitów czasu lub dodaniem pracowników. Dołączenie przekracza granice serwera domowego i wymienia dane autoryzacji dołączenia oraz stanu pokoju, więc powolny serwer zdalny lub duży pokój może opóźnić jedno dołączenie, nawet gdy Twój własny serwer jest sprawny.

Specyfikacja serwera Matrix opisuje uzgadnianie make_joini send_joinstan zwracany do serwera dołączającego. Oznacza to, że „opóźnienie federacyjne” nie jest automatycznie problemem lokalnej kolejki Synapse. Poniższe testy pozwalają zidentyfikować prawdopodobne przyczyny.

Czy opóźnienie ogranicza się do jednego pomieszczenia czy jednego serwera domowego?

Porównaj powolne dołączanie z dołączaniem do innego pokoju federacyjnego. Zapytaj, czy inni użytkownicy na Twoim serwerze domowym zgłaszają to samo opóźnienie i zanotuj identyfikator lub alias pokoju oraz nazwy serwerów zdalnych, których to dotyczy. Jeśli tylko jeden pokój jest powolny, stan pokoju lub serwery domowe, które się w nim znajdują, mogą być wąskim gardłem. Jeśli wiele pokoi z tym samym serwerem zdalnym jest powolnych, sprawdź dostępność tego miejsca docelowego i stan ponownych prób. Jeśli dołączanie do wielu niepowiązanych serwerów jest powolne, sprawdź własne zasoby i ścieżkę federacyjną wychodzącą.

W przypadku serwera zdalnego, którego dotyczy problem, należy wykonać zapytanie do interfejsu API Federation Admin programu Synapse z poziomu komputera, na którym działa program Synapse:

curl -H "Authorization: Bearer $SYNAPSE_ADMIN_TOKEN" \
  "http://127.0.0.1:8008/_synapse/admin/v1/federation/destinations/remote.example"

Zastąp remote.examplenazwą serwera domowego i użyj adresu klienta-nasłuchiwacza dla swojego wdrożenia. Wartość różna od zera retry_last_tsi wartość dodatnia retry_intervaloznaczają, że Synapse zarejestrował ostatnio nieudane połączenie i czeka na ponowną próbę. Sprawdź odpowiednie logi Synapse pod kątem faktycznego błędu, takiego jak błędy DNS, TLS, połączenia lub zdalnej odpowiedzi. Synapse dokumentuje to API administratora federacji jako eksperymentalne i może ulec zmianie; zapoznaj się z dokumentacją uruchomionej wersji. Zachowaj prywatność API administratora i nie wklejaj jego tokenu dostępu do publicznego zgłoszenia pomocy technicznej.

Ilustrujące polecenie terminala, które sprawdza status miejsca docelowego federacji Synapse dla remote.example z tokenem administratora

Ilustracja lokalnego, uwierzytelnionego żądania statusu miejsca docelowego. Panel pokazuje tylko polecenie, a nie odpowiedź na żywo.

Jeśli podejrzewasz, że inne serwery nie mogą połączyć się z Twoim serwerem domowym, uruchom oficjalny tester federacji Matrix dla nazwy swojego serwera. Sprawdza on wykrywanie i łączność w federacji publicznej. Samo w sobie nie dowodzi, że żądanie wychodzące z hosta Synapse do konkretnego węzła zostało pomyślnie wysłane, dlatego porównaj jego raport z własnymi logami i statusem miejsca docelowego.

Czy Synapse wskazuje na rosnące opóźnienie federacji?

Jeśli Prometheus już skanuje punkt końcowy metryk Synapse, dodaj domeny, których to dotyczy, do federation_metrics_domains, homeserver.yamla następnie przeładuj lub uruchom ponownie Synapse zgodnie z procesem wdrożenia. Synapse może udostępniać metryki Prometheusa dotyczące wieku trwałych zdarzeń w pomieszczeniu (PDU) wysyłanych do i odbieranych z domen, które wymienisz, zgodnie z opisem w instrukcji konfiguracji :

federation_metrics_domains:
  - matrix.org
  - remote.example

Użyj otrzymanego szeregu czasowego, aby sprawdzić, czy wiek zdarzeń wychodzących, czy przychodzących rośnie. Potraktuj to jako wskazówkę kierunkową, a nie werdykt: dokumentacja konfiguracji Synapse ostrzega, że ​​opóźnienie może pochodzić zarówno z serwera domowego, jak i z sieci między nimi. Opóźniona seria wychodzących danych przez kilka miejsc docelowych wskazuje na ścieżkę nadawczą lub lokalną przepustowość; opóźnienie odizolowane od jednego węzła wymaga sprawdzenia tego węzła i trasy do niego.

Ilustracyjny wykres monitorowania zatytułowany Wiek PDU Federacji według domeny z dwoma liniami szeregu czasowego

Ilustracja koncepcji wykresu wieku federacji; linie nie są pomiarami na żywo z serwera Synapse.

Przykładowy fragment kodu homeserver.yaml zawierający listę plików matrix.org i remote.example w obszarze federation_metrics_domains

Ilustracja ustawienia Synapse służącego do włączania metryk wieku PDU dla wybranych domen zdalnych.

Jeśli wiele operacji działa wolno, sprawdź również procesor, pamięć, opóźnienie bazy danych oraz panel czasu trwania transakcji w Synapse. Przewodnik Synapse po Grafanie informuje, że persist_eventsGrafana zapisuje zdarzenia do bazy danych i może mieć długi czas trwania transakcji; wyjaśnia również, że wiele skrajnych połączeń może zwiększyć nakład pracy na rozwiązywanie stanów. Jeśli te lokalne pomiary są podwyższone w tym samym czasie co łączenia, należy rozwiązać problem wąskiego gardła w zasobach lub bazie danych przed dostrojeniem ponownych prób federacji.

Czy większa liczba pracowników federacji mogłaby pomóc?

Dodaj pojemność nadawcy tylko wtedy, gdy monitorowanie wykaże, że praca wychodząca jest kopiowana zapasowo w wielu lokalizacjach docelowych, a bieżący proces jest ograniczony. Aktualna dokumentacja pracownika Synapse zaleca używanie funkcji synapse.app.generic_workerz federation_sender_instancesw tej roli zamiast tworzenia nowych wdrożeń wokół starszego, dedykowanego typu pracownika nadawcy.

Każdy adres docelowy wychodzący jest przypisywany do nadawcy na podstawie skrótu nazwy serwera zdalnego. Wielu nadawców może rozłożyć ruch na wiele serwerów zdalnych, ale żądania do jednego wolnego adresu docelowego nadal są mapowane na jednego pracownika. Dlatego dodanie pracowników prawdopodobnie nie rozwiąże problemu z pojedynczym serwerem równorzędnym. Nazwy pracowników w konfiguracji współdzielonej muszą być zgodne z działającymi pracownikami; podczas zmiany listy instancji nadawców należy zatrzymać i uruchomić wszystkich nadawców federacyjnych jednocześnie, aby korzystali z tej samej konfiguracji.

Przykładowy fragment kodu homeserver.yaml zawierający listę dwóch nazw pracowników nadawcy federacji

Ilustracja listy federation_sender_instances; każdy nazwany pracownik musi istnieć we wdrożeniu.

Czy powinieneś zresetować ustawienie backoff czy wydłużyć limit czasu?

Zresetuj licznik ponownych prób w miejscu docelowym dopiero po usunięciu przejściowego problemu z łącznością i potwierdzeniu, że Synapse oznaczył to miejsce docelowe jako nieudane. Interfejs API administratora zapewnia POST /_synapse/admin/v1/federation/destinations/<destination>/reset_connectionpunkt końcowy; jego żądanie jest wykonywane w tle, więc natychmiastowy błąd HTTP 200 nie oznacza, że ​​federacja została przywrócona. Ten punkt końcowy jest również opisany jako eksperymentalny.

Nie zgłaszaj tego problemu federation.client_timeoutjako pierwszej odpowiedzi. Aktualny podręcznik konfiguracji podaje domyślnie 60 sekund. Dłuższy limit czasu daje wolniejszemu komputerowi zdalnemu więcej czasu na odpowiedź; nie przyspiesza to działania serwera ani sieci i może powodować dłuższe oczekiwanie na żądania dołączenia. Zmień to tylko wtedy, gdy logi pokazują, że prawidłowe żądania federacji przekraczają bieżącą wartość i sprawdzono pojemność serwera.

Skąd wiesz, że rozwiązanie zadziałało?

Spróbuj ponownie dołączyć do tego samego pokoju i porównaj go z innym pokojem federacyjnym. Upewnij się, że dotknięty problemem cel nie wykazuje już rosnącego interwału ponawiania prób, logi pokazują pomyślne żądania federacji, a skonfigurowane metryki wieku PDU przestały rosnąć. Jeśli tylko jeden pokój pozostaje powolny, podczas gdy inne cele działają prawidłowo, udostępnij jego identyfikator pokoju, odpowiedni zdalny serwer domowy, okno czasowe i usunięte wiersze błędów administratorom pokoju lub zespołowi wsparcia Synapse. Unikaj wysyłania tokenów dostępu ani pełnych nagłówków autoryzacji.

Zostaw komentarz

Zmniejsz obciążenie pamięci PostgreSQL w Matrix Synapse

Sprawdź, czy pamięć PostgreSQL pochodzi z obsługi zapytań, współdzielonych buforów, połączeń czy konserwacji, a następnie wprowadź ukierunkowane zmiany bezpieczne dla Synapse.

Dlaczego połączenia w pokoju Matrix Synapse są powolne i co należy sprawdzić

Dlaczego połączenia w pokoju Matrix Synapse są powolne i co należy sprawdzić

Śledź powolne dołączanie pokoju Matrix do jednego zdalnego serwera domowego, wycofywanie federacji, obciążenie lokalnej bazy danych lub kolejkę nadawcy wychodzącego przed zmianą ustawień Synapse.

Zamknij rejestrację w Matrix lub wymagaj tokenów zaproszeń w Synapse

Zatrzymaj możliwość tworzenia otwartych kont na samodzielnie hostowanym serwerze Synapse lub zachowaj możliwość rejestracji wyłącznie na zaproszenia, korzystając z tokenów rejestracyjnych o ograniczonym zastosowaniu.

Ostrzeżenie dotyczące tożsamości sesji elementu: Zweryfikuj bezpiecznie swoje logowanie

Ostrzeżenie Clear Element o niezweryfikowanej sesji korzystające z zaufanego urządzenia lub klucza odzyskiwania, z kontrolami chroniącymi historię szyfrowanych czatów.

Zatrzymaj przekroczenia limitu czasu blokady plików w chmurze ownCloud za pomocą odpowiedniego zaplecza

Rozróżnij konflikty blokad bazy danych od wygasłych blokad WebDAV, a następnie wybierz i skonfiguruj odpowiednią poprawkę ownCloud 10.

Co sprawdzić, gdy witryna ownCloud Web otwiera się na pustej stronie

Co sprawdzić, gdy witryna ownCloud Web otwiera się na pustej stronie

Śledź pusty ekran witryny ownCloud Web w kontekście pamięci podręcznej przeglądarki, brakujących zasobów sieciowych, błędów usług lub ustawień adresu URL serwera proxy odwrotnego za pomocą ukierunkowanych kontroli.

Wyczyść ostrzeżenie dotyczące pamięci PHP ownCloud w odpowiednim środowisku wykonawczym

Ustaw limit pamięci PHP dla witryny ownCloud, uruchom ponownie odpowiednią usługę i zweryfikuj aktywną wartość, nie myląc jej z ustawieniami CLI ani limitami przesyłania.

Rozwiązywanie problemów z połączeniem MySQL w chmurze ownCloud 10

Sprawdź, czy MySQL, PHP, ustawienia gniazd lub uprawnienia bazy danych blokują ownCloud 10, a następnie sprawdź, czy istnieje bezpieczne rozwiązanie.

Ustaw sztywny limit wygaśnięcia dla publicznych linków ownCloud

Ustaw sztywny limit wygaśnięcia dla publicznych linków ownCloud

Ustaw obowiązkowe wygasanie łączy publicznych w ownCloud Classic, ustaw maksymalny czas trwania i zaznacz istniejące udziały, które mogą wymagać osobnego czyszczenia.

Dodaj dwuskładnikowe logowanie TOTP do ownCloud Infinite Scale z Keycloak

Dodaj dwuskładnikowe logowanie TOTP do ownCloud Infinite Scale z Keycloak

Włącz funkcję TOTP za pośrednictwem Keycloak, zarejestruj użytkowników bezpiecznie i dowiedz się, kiedy obowiązują ustawienia MFA na poziomie trasy Infinite Scale.