Welche Funktionen sollten PG-Datenbankbetriebs- und -wartungstools abdecken?

Vor den Feiertagen habe ich mit der PG China-Community zusammengearbeitet, um eine Online-Live-Übertragung darüber durchzuführen, wie man D-SMART für den Betrieb und die Wartung der PG-Datenbank nutzt. Es geschah, dass einer meiner Kunden aus der Finanzbranche meiner Einführung zuhörte und zum Chatten angerufen. Sie entscheiden sich für die Datenbank Xinchuang und haben mehrere inländische Datenbanken ausprobiert. Schließlich werden sie sich für TDSQL entscheiden. Ich war damals ein wenig überrascht, dass sie seit 2020 inländische Datenbanken ausgewählt hatten, aber es schien, dass die ersten Erfahrungen nach der Verwendung von TDSQL nicht sehr gut waren. Später, nach der Kommunikation, erfuhr ich, dass sie gerade mit der Verwendung der verteilten Datenbank von TDSQL begonnen hatten und feststellten, dass die Forschungs- und Entwicklungsanforderungen zu hoch waren. Daher entschieden sie sich alle für die zentralisierte MYSQL-Instanz von TDSQL. Nach der Verwendung stellten sie fest, dass sie sehr einfach zu verwenden war . Auch die Anzahl der Knoten in der gesamten Datenbank-Cloud hat sich von ursprünglich einem Dutzend auf Dutzende erhöht.

Zufällig habe ich gestern mit einem anderen Finanzkunden auf WeChat über die Auswahl der Datenbank Xinchuang gesprochen und sie haben sich schließlich für TDSQL entschieden. Ähnlich wie ein anderer Kunde entschieden sie sich auch für die zentralisierte MYSQL-Datenbankinstanz von TDSQL. Sie haben derzeit Dutzende Datenbanken migriert, die meisten davon sind kleine Datenbanken mit einer Größe von mehreren zehn bis Hunderten von GB. Sie halten es für sehr praktisch, kleine Datenbanken direkt auf die Datenbank-Cloud-Management-Plattform von TDSQL zu migrieren, und Betriebs- und Wartungstools können grundsätzlich ihre täglichen Betriebs- und Wartungsanforderungen erfüllen.

Durch die Kommunikation habe ich das Gefühl, dass sich diese beiden Kunden für TDSQL entschieden haben, nicht weil TDSQL als Datenbank so gut ist (TDSQL ist eigentlich keine Datenbank, sondern eine Datenbank-Cloud-Plattformlösung. Ich werde über TDSQL schreiben, wenn ich in Zukunft Zeit habe . (ausführliche Einführung in diesem Artikel), aber seine Datenbank-Cloud-Management-Plattform eignet sich sehr gut für die Verwaltung einer großen Anzahl kleiner Datenbankinstanzen. Benutzer entscheiden sich nicht wegen der Datenbanktechnologie, sondern wegen der Benutzerfreundlichkeit und Zuverlässigkeit.

Aus den Gründen, warum Kunden sich für TDSQL entscheiden, werfen wir einen Blick auf den Betrieb und die Wartung der PG-Datenbank. Über den Betrieb und die Wartung der PG-Datenbank im Allgemeinen zu sprechen, ist ein sehr großes Thema, da verschiedene Kunden ihre eigenen speziellen Anwendungsszenarien haben und auch die Betriebs- und Wartungsverwaltungsmethoden der PG-Datenbank sehr unterschiedlich sind. Noch komplizierter ist, dass PG Database im Gegensatz zu den beiden von mir erwähnten Kunden, die sich für TDSQL entschieden haben, sowohl über kleine Datenbanken als auch über sehr große Datenbanksysteme verfügt. Wenn einige Kunden Xinchuang ersetzen, ersetzen sie Oracle-Datenbanken eins zu eins. Die aktuellen Daten vieler Datenbanken überschreiten mehrere TB. Angesichts von Anwendungsszenarien mit großen Größenunterschieden und unterschiedlichen Betriebs- und Wartungsanforderungen müssen Betriebs- und Wartungstools wirklich sorgfältig entworfen werden, um sich an die sehr unterschiedlichen Anwendungsszenarien anzupassen.

Die Anwendung von PG-Datenbanken in China hat sich in den letzten zwei Jahren rasant entwickelt. Darüber hinaus werden auch viele inländische Datenbanken auf Basis von PG-Open-Source-Projekten entwickelt. Sie sind in Anwendung, Betrieb und Wartung sehr ähnlich, sodass wir sie auch klassifizieren können sie als PG-Datenbankprodukte.

In der aktuellen inländischen Datenbank verwenden viele Produkte den PG Community Edition-Code als Ausgangspunkt für Forschung und Entwicklung, und einige Produkte basieren auf dem Open-Source-Projekt openGauss. Die Grundfunktionen dieser Datenbanken ähneln der Community-Version der PG-Datenbank, wurden jedoch teilweise erweitert. Allerdings sind viele ihrer Funktionen in Bezug auf Nutzung, Betrieb und Wartung der Community-Version von PG sehr ähnlich.

Es gibt auch einige Datenbankprodukte, die direkt mit PG zusammenhängen, aber die meisten verteilten Lösungen, die auf PG basieren, sind PGXL/PGXC oder CITUS. Zum Beispiel TBASE von Tencent, die verteilte GBASE 8C-Version von NTU General, ANTDB von AsiaInfo, Xugu-Datenbank usw. Ich werde sie hier nicht im Detail auflisten. Eine Instanz dieser Datenbanken ist auch eine PG-Datenbank, und eine bestimmte Instanz kann auch als PG-Datenbankinstanz betrachtet werden. Beim Betrieb und der Wartung verteilter Datenbanken müssen Sie jedoch den Problemen des gesamten Clusters und Netzwerks mehr Aufmerksamkeit schenken. Der Unterschied ist immer noch riesig.

Zusammenfassend sind die Betriebs- und Wartungsanforderungen der PG-Datenbank in fünf Aspekte unterteilt: tägliche Überwachung, Fehlerwarnung, automatisierte Inspektion, Leistungsoptimierung und Fehlerdiagnose.

Einige Unternehmen migrieren bereits einige Kernsysteme auf PG-Datenbanken. Für diese Systeme besteht täglicher Überwachungsbedarf. Daher ist die grundlegendste Fähigkeit, über die ein Datenbankbetriebs- und -wartungstool verfügen muss, die Überwachungsfähigkeit. Über das Betriebs- und Wartungstool kann es jederzeit den Gesamtbetriebsstatus der Datenbankinstanz verstehen. D-SMART zeigt den Betriebsstatus der Datenbank über ein Gesundheitsmodell an. Wenn wir außerdem an einigen wichtigen Terminen im Dienst sein müssen (z. B. Jahresabschluss des Unternehmens, Sonderdienst am Nationalfeiertag und anderen besonderen Anlässen usw.), benötigen wir außerdem einige Tools, die diese Aufgabe unterstützen können Schlüsselsysteme.

In D-SMART bieten wir „Monitoring Center“, „Daily Inspection Center“, „Alarm Center“, „Performance Optimization Center“, „Report Center“, „Capacity Management Center“ und „Security Center“ rund um den Datenbankbetrieb und die Wartung .“ und „Tool Center“ kombinieren diese zentralisierten Funktionen, um den Bedürfnissen verschiedener Benutzer und Benutzer in verschiedenen Anwendungsszenarien gerecht zu werden.

Für tägliche Überwachungsfunktionen bietet D-SMART drei Haupttools zur Betriebs- und Wartungsüberwachung: „Today's Kanban“, „My Monitoring“ und „Key SQL Monitoring“. Das heutige Kanban kann die umfassenden Informationen der vom Benutzer überwachten Datenbanken zentral anzeigen. „Mein Monitoring“ ermöglicht es Benutzern, mithilfe herkömmlicher Überwachungsmethoden die Indikatoren zu definieren, die sie für die Überwachung wichtiger Begleitpersonen überwachen möchten. „Key SQL Monitoring“ ist ein spezielles Überwachungstool für die Kerngeschäftssysteme von Unternehmen. Wenn ein Problem mit dem Schlüssel-SQL eines Kerngeschäftssystems auftritt (z. B. langsame Ausführung, Änderung des Ausführungsplans usw.), können rechtzeitig Alarme generiert werden, um den sicheren Betrieb des Kerngeschäfts sicherzustellen.

Für eine große Anzahl kleiner Datenbankinstanzen ist eine umfassende Überwachung nicht praktikabel. Wenn ein Team von mehr als einem Dutzend Personen Hunderte oder Tausende von Datenbankinstanzen betreiben und warten muss, ist eine umfassende Überwachung dieser Datenbanken weder notwendig noch möglich. Daher sollte dieses Betriebs- und Wartungsszenario einen großen Teil der Überwachungsarbeit in automatisierte Aufgaben umwandeln, die vom Überwachungssystem automatisch erledigt werden können.

„Database Daily Inspection“ ist ein sehr effektives automatisiertes Betriebs- und Wartungstool. Es analysiert jeden Tag mitten in der Nacht automatisch die Betriebsdaten und einige Regeln der Datenbank und erstellt einen prägnanten und umfassenden täglichen Inspektionsbericht und Wartungspersonal kann diese Berichte direkt nach der Arbeit lesen. Sie können einige häufige Probleme in den Hunderten von Datenbankinstanzen, die Sie betreiben und warten, verstehen, sodass Sie feststellen können, ob Sie an diesem Tag oder in naher Zukunft entsprechende Änderungen an bestimmten Datenbankinstanzen vornehmen müssen .

Wenn wir eine große Anzahl kleiner Datenbankinstanzen betreiben und warten müssen, wird eine Frühwarnung sehr schwierig. Die Wirkung des herkömmlichen „Basisalarms“ ist sehr nutzlos geworden. Zusätzlich zur Ausfallzeit der Datenbankinstanz lassen sich auch andere Frühwarnungen nur schwer genau treffen. Umfangreiche Warninformationen machen Frühwarnungen bedeutungslos. Daher sind „Betriebs- und Wartungserfahrungsalarme“ auf Basis von Fehlermodellen besonders wichtig geworden. Komplexe Regeln, die auf Expertenerfahrung und Erfahrungen aus der Vergangenheit basieren, können nicht nur genauere Frühwarnungen liefern, sondern es dem Betriebs- und Wartungspersonal auch ermöglichen, Probleme schneller zu lokalisieren und versteckte Gefahren zu beseitigen, nachdem Alarme ausgelöst wurden.

„Datenbankinspektion“ ist eine Funktion, die die meisten DBAs für sehr nutzlos halten. Das Hauptproblem besteht darin, dass diese Arbeit durchgeführt werden muss, aber um eine wirkliche In-Place-Inspektion durchzuführen, ist viel professionelle DBA-Beteiligung und viel Wiederholungsaufwand erforderlich. ist im Allgemeinen nicht kosteneffektiv. Andererseits können uns umfassende und qualitativ hochwertige Inspektionen dabei helfen, versteckte Gefahren im System aufzudecken und zu verhindern, bevor sie auftreten. Als Reaktion auf diesen Widerspruch lässt sich das Problem leicht lösen, wenn qualitativ hochwertige automatisierte Inspektionen erreicht werden können. Vor einigen Monaten haben wir einem Benutzer bei der Durchführung einer Ferninspektion geholfen. Der Benutzer hat die von D-SMART gesammelten Überwachungsdaten an unser Labor gesendet. Unsere Datenbankexperten haben den durch die Ferndaten generierten Inspektionsbericht verwendet, um eine Inspektion in fast 30 Datenbanksystemen durchzuführen Wir führten eine Fernberatung durch und halfen Benutzern, mehr als 200 Probleme unterschiedlicher Art zu entdecken, und diese Arbeit dauerte nur weniger als 2 Manntage. Wenn durch Automatisierung die Effizienz der Datenbankinspektion verbessert werden kann, wird die Inspektionsarbeit nicht so nutzlos sein.

Neben Inspektionen sind auch einige Prüfungsarbeiten sehr kritisch, wie z. B. Sicherheitsprüfungen, Kapazitätsprüfungen, SQL-Prüfungen usw. Da diese Audits sehr professionelle Fähigkeiten erfordern und auch der Arbeitsaufwand sehr hoch ist, werden sie bei einer großen Anzahl von Datenbankinstanzen ebenso nutzlos wie Inspektionen. Es ist zu teuer, es gut durchzuführen, und es bedeutet nichts, wenn es nicht so ist Gut gemacht. Wenn diese Aufgaben jedoch automatisch durch automatisierte Tools erledigt werden können, können sie eine sehr wichtige Rolle spielen.

Tatsächlich benötigen DBAs zusätzlich zu diesen Betriebs- und Wartungsüberwachungsaufgaben eine große Anzahl von Datenbankinstanzverwaltungsaufgaben und viele automatisierte Vorgänge. Dies ist auch der Hauptgrund, warum sich die beiden eingangs erwähnten Kunden entschieden haben TDSQL. Um eine große Anzahl von Datenbankinstanzen zu verwalten, ist eine Datenbank-Cloud-Plattform ein Muss. Allerdings ist der Aufbau einer unabhängigen Datenbank-Cloud-Plattform an sich schon ein großes Projekt. Wenn der RDS-Dienst der Enterprise-Cloud-Plattform Ihre Anforderungen an Datenbankanwendungen erfüllen kann, reicht es natürlich aus, den RDS der Cloud-Plattform direkt zu verwenden. Angesichts der aktuellen Nachfrage nach Informationsinnovationen muss das RDS des Unternehmens natürlich nicht nur die Open-Source-Datenbank MYSQL/PG unterstützen, sondern auch inländische Datenbankprodukte.

Das obige ist der detaillierte Inhalt vonWelche Funktionen sollten PG-Datenbankbetriebs- und -wartungstools abdecken?. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!