Discourse Data Explorer

:discourse2: Zusammenfassung Discourse Data Explorer ermöglicht es dir, SQL-Abfragen gegen deine Live-Datenbank auszuführen, was eine Berichterstellung mit aktuellsten Statistiken in Echtzeit erlaubt.
:open_book: Installationsanleitung Dieses Plugin ist im Discourse-Core enthalten. Es ist nicht notwendig, das Plugin separat zu installieren.

:information_source: Wenn du nach Beispielen oder Unterstützung für benutzerdefinierte Abfragen suchst, findest du viele Themen in unserer Kategorie #data-reporting unter dem Tag sql-query. Falls es dafür kein passendes Thema gibt, kannst du gerne ein neues Thema erstellen, um die Community um Hilfe zu bitten. :memo: Abfrage-Hilfe

:discourse2: Bei uns gehostet? Dieses Plugin ist in unseren Business- und Enterprise-Plänen verfügbar. Data Explorer | Discourse - Civilized Discussion

Nach der Installation des Plugins navigiere zu /admin/plugins.

de1

Klicke auf die Schaltfläche „Einstellungen“ und aktiviere data explorer enabled, kehre zurück und lade die Seite neu.
Es sollte nun ein Tab in der gestapelten Navigation mit der Bezeichnung „Data Explorer“ erscheinen. Wähle ihn aus oder navigiere zu /admin/plugins/discourse-data-explorer und verwende dann die Schaltflächen +, Importieren oder Ausführen, um loszulegen.

Standardabfragen

Bei einer Neuinstallation liefert der Data Explorer mehrere Abfragen mit, die dir helfen können, Erkenntnisse aus der Aktivität deines Forums zu gewinnen. Öffne eine beliebige Abfrage und klicke auf Ausführen, um sie auszuprobieren.

So sehen die Standardabfragen aus.

Hinweis: Standardabfragen werden aus dieser Datei geladen: discourse-data-explorer/lib/discourse_data_explorer/queries.rb at main · discourse/discourse-data-explorer · GitHub

Wenn du eine großartige Abfrage hast, die alle nutzen sollen, erstelle einfach einen PR, genau wie dieser hier.

Standardabfragen können nicht bearbeitet werden. Wenn du sie ändern möchtest, kopiere den SQL-Code und füge ihn in eine neue Abfrage ein.

Abfragen schreiben

Wenn du auf eine der Schaltflächen Bearbeiten in der Abfrageansicht klickst oder eine neue Explorer-Abfrage startest, wird dir ein Bildschirm wie der folgende angezeigt:

Die oberen beiden Felder sind der Name und die Beschreibung der Abfrage. Der Name ist das, was du in der Dropdown-Liste auswählst, und die Beschreibung sollte verwendet werden, um beispielsweise zu erklären, was in die Abfrageparameter eingegeben werden soll, oder um zu beschreiben, welche Daten abgefragt werden.

Das linke Fenster ist der Bereich, in dem du die SQL-Abfrage schreibst. Eine minimale Syntaxhervorhebung und -prüfung wird bereitgestellt.

Abfragen automatisch ausführen

Obwohl du eine Abfrage immer ausführen kannst, indem du die Schaltfläche Ausführen klickst, kannst du Zeit sparen, wenn du der URL den Parameter run hinzufügst.

Zum Beispiel: /admin/plugins/discourse-data-explorer/queries/123?run

Wenn dieser Parameter zur URL hinzugefügt wird, wird die Abfrage ausgeführt, sobald du die Seite lädst. Du musst also nicht auf die Schaltfläche Ausführen klicken, um die Ergebnisse zu sehen. Dies ist besonders hilfreich für Abfragen, die du häufig ausführst, da du sie dann als Lesezeichen speichern oder mit dem Parameter run in deiner Seitenleiste hinzufügen kannst, um sie mit einem Klick auszuführen.

Abfragen importieren

Nehmen wir als Beispiel eine Abfrage, die ich geschrieben habe. Lade diese Datei herunter, öffne dann das Import-Dialogfeld, wähle die hochzuladende Datei aus oder füge die Abfrage in das Textfeld ein. Klicke auf Importieren, um sie zu speichern, und klicke dann auf Ausführen, um die Ergebnisse zu sehen.

most-common-likers.dcquery (1).json (442 Bytes)

Es scheint, als mögen sich alle Discourse-Entwickler ziemlich gut :heart:

Abfragen durchsuchen

Wenn du zu viele großartige Abfragen angesammelt hast, ist das kein Problem! Die Suchleiste kann dir helfen, durch Titel und Beschreibungen zu filtern.

Nicht-Admin-Gruppen das Ausführen von Abfragen erlauben

Du kannst bestimmten Gruppen (einschließlich Moderatoren) Zugriff auf eine Abfrage gewähren, indem du sie der Abfrage hinzufügst:

Nach dem Speichern findest du sie auf der Gruppen-Seite dieser spezifischen Gruppe auf der Registerkarte Berichte:

Klicke auf eine beliebige Abfrage, um sie zu öffnen, und dann auf die Schaltfläche Ausführen, um die Ergebnisse zu sehen. Du kannst Gruppenberichte auch als Lesezeichen speichern, indem du auf die Schaltfläche Lesezeichen klickst.

Abfragen mit vordefinierten Parametern teilen

Wenn du benutzerdefinierte Parameter in deiner Abfrage enthalten hast, kannst du einen Link zur Abfrage teilen und die Parameter in der URL einfügen, sodass sie beim Laden der Seite vorausgefüllt werden.

Du musst die Parameter in der URL im Format params={"parameter_name":"value"} angeben. Trenne mehrere Parameter mit Kommas. Zum Beispiel:

discourse.example.com/g/my-group/reports/6?params={"param1":"value1","param2":"value2"}

Kombiniert mit dem oben erwähnten Parameter run kannst du einen Bericht mit vordefinierten Parametern teilen, der beim Laden automatisch ausgeführt wird.

Ergebnismengenbegrenzung und Export von Abfragen

Bei großen Abfragen wirst du möglicherweise feststellen, dass es eine Begrenzung für die Anzahl der Zeilen gibt, die der Data Explorer anzeigt. Standardmäßig ist das Limit auf 1000 Zeilen festgelegt. Dies dient dazu, zu große Abfragen zu verhindern, die die Leistung deiner Discourse-Instanz verlangsamen oder stören könnten.

Wenn du diese Begrenzung umgehen möchtest, hast du einige Optionen:

  1. Paginierung: Du kannst deine Ergebnisse paginieren. Anstatt alle Ergebnisse auf einmal zurückzugeben, kannst du deine Abfrage so schreiben, dass sie einen bestimmten Bereich von Ergebnissen zurückgibt. Du kannst diesen Bereich dann anpassen, um verschiedene Abschnitte deiner Daten anzusehen. Dies erhöht das Limit nicht, ermöglicht es dir jedoch, alle deine Daten abschnittsweise anzusehen.
  2. Limit erhöhen: Wenn du Zugriff auf den Discourse-Server hast und dich damit wohlfühlst, Änderungen an den Discourse-Einstellungen vorzunehmen, kannst du das Limit erhöhen. Dies sollte jedoch mit Vorsicht erfolgen. Das Erhöhen des Limits kann deinen Server stark belasten, wenn du nicht aufpasst, insbesondere wenn mehrere Benutzer gleichzeitig große Abfragen ausführen.
  3. Ergebnisse herunterladen: Du hast auch die Möglichkeit, die Abfrageergebnisse anstatt sie direkt in Discourse anzuzeigen, herunterzuladen, indem du nach dem Ausführen der Abfrage auf die Schaltfläche JSON oder CSV klickst. Daten, die im JSON- oder CSV-Format heruntergeladen wurden, haben ein deutlich höheres Ergebnislimit von 10.000 Zeilen. Für programmatische Zwecke solltest du das JSON-Format wählen, oder wenn du die Daten in einer Tabellenkalkulationsanwendung bearbeiten möchtest, ist das CSV-Format möglicherweise bequemer.

Es ist im Allgemeinen eine gute Idee, effizientere Abfragen zu schreiben oder deine Daten zu filtern, sodass du nur das abrufst, was du benötigst, anstatt zu versuchen, das Limit zu umgehen.

Du kannst auch die SQL-Abfrage selbst im .JSON-Format exportieren, indem du auf die Schaltfläche Exportieren klickst. Abfragen, die auf diese Weise exportiert wurden, können dann in andere Discourse-Sites importiert oder mit Drittanbieteranwendungen verwendet werden.

Abfrageplan

Das Kontrollkästchen „Abfrageplan einbeziehen“ kann verwendet werden, um deine SQL-Abfragen besser zu verstehen und zu optimieren.

Wenn du dieses Kästchen aktivierst und eine Abfrage ausführst, zeigt Discourse die Sequenz der Operationen an, die zum Zugriff auf Daten in der Discourse-Datenbank verwendet werden. Dies kann Operationen wie Scans, Joins, Sortierungen und andere Datenbankaktionen umfassen. Durch die Untersuchung des Abfrageplans kannst du genau sehen, wie die Datenbank deine Abfrage ausführt.

Die Data Explorer-Tutorial-Serie

Wir haben auch eine dedizierte #sql-tutorial-Serie über den Data Explorer! Wenn du mehr über das Schreiben von SQL-Abfragen in Discourse lernen möchtest, empfehlen wir dringend, die Themen in dieser Serie durchzulesen:

121 „Gefällt mir“
Data Explorer Tutorial - Part 1 - Writing Your First Query
Daily graph of user time online
Data Explorer Tutorial - Part 2 - Discourse SQL Basics
Formatting Data Explorer Table Results
Visual forum statistics
Extracting email addresses for a group
Visual map of users
How do I download a record of top posts or most clicked links?
Tags: how can admin see who is following what tags?
Can I see in the statistics which post received the most likes
External Data Analysis
Redesign of use profile
Can staff be able to see real author of anonymous posts
How to search/filter untagged topics
Exporting all Topic titles and IDs?
Retrieving user information via REST API
How to measure active users?
Discourse view file update does not reflect in browser
Scan IP matched accounts
Create report for amount of interactions per user
Where to find User ID information
CSV of all editeds post by moderator
Can I access my Discourse forum database?
How to look up a user based on a user_id?
Can I make a plug-ins to view a certain group of people?
Legal Tools Plugin
[Paid] Data explorer queries for ticketing system use case
Transactional Email Service (Open Source)
Direct connect to the Discourse Database
See what categories new users (& other trust levels) post in most
How can I extract the adminstrative records for a EU GDPR request?
Counting and reporting post views for commercial forum users (so we can charge them per-view)
Top user list public
How do I audit votes for fraudulent behavior
How do I get a list of all users from the API?
Tracking referrals? Encouraging users to invite others?
Display Data Explorer query results in WordPress (with TwigAnything)
Database's Data Model?
Filter or create statistics
How do I add users to a group?
Discourse disk space limits per user?
Masonry Image Gallery
Estimated timeline on a project?
Report on User Fields?
Dashboard - Segment number of Posts and Topics by team
Badge image missing issue
Traditional multi level hierarchy vs flat discourse hierarchy
Is there a Trust Level Permissions Table?
Deleting posts by banned users with < 3 posts?
Calculating "Top" topics in Discourse
Is there a way to Search by Posts with No Staff replies on it
How to use SQL to query discourse database
Specify user by external id
How to check the uniqueness of users in "hot link" badge?
Active users per day
Questions about moving an existing forum to Discourse
Get a user object by username or id javascript
Best Practices on reply-by-email
Most liked reply
Likes on a post
Group forum members based on topics viewed?
The metrics on dashboard, do they include activities from administrators?
Can I access Discourse forum Database to use for PowerBI reporting?
Is there a log of user visits?
Find posts "solved" in specific month
Anonymous User Groups
Any way to NOT send emails when a topic category is changed?
View/read by user or of user's posts?
After server migration the images in posts aren't downloadable anymore
Bug with [code]anything[/code] on a single line by itself
Logo is not appearing showing broken after upload
Configuring how users can create and send invites for others to join your community
Users reporting lots of 502 errors when attempting to post due to "max consecutive replies" check
Wildcard search
What would you like to see on your Discourse 2.0 Admin Dashboard?
TeamSpeak Usergroups Sync
Use tags to duplicate images?
Database Access required for our forum
Updated discourse and now site fails to display
Automatic badge expiration
Looking to switch from Vanilla, and have a few questions
Comment on a question instead of answering it
How to create custom reports
Deleted username but can not use that username in other user
Category Remains Muted after Category is available to Everyone
Can staff see who voters in anonymous polls?
Speak to a Discourse Data Analytic representative
How do I pull a report for a single community member?
Report Links to New Topics by Date?
Excluding Suspended, Silenced and Suspect Users When Exporting
Theme-Component v Plugin: What's the difference
Export topics to Excel
Is there a document introducing the database schema design?
Overview which trust level has which possibilities
Why are some users greyed out?
How to get reports for just a specific category?
How to get posts viewed by a user via APIs?
Reports for group message statistics
TimeStamp of Tag
How we put people in a category?
Is it possible to see the dates of all scheduled topics?
Topic Count Per User for Custom Date?
Searching for unassigned topics
Reports by Discourse
How to see all invites and invite tree?
How can I get the list of Discourse Topic IDs dynamically
How to edit sign up form?
Filter posts with images (gallery view)
Tracking unique contributors
New users who visited this month?
Making report on group membership?
Where to find post contents in the database
Searching All Messages as an Administrator
Are Staff and All Groups Included in Dashboard Reporting?
Deleted user with rails console u.delete -> email still "taken"
First Name, Last Name
User posts export as csv or text
User Messages Inbox Error 500
Description of fields returned by Discourse API
Failed to bootstrap due to out of memory killer
Inviting Feedback for Discourse Wiki ("Morphpedia")
What will happen to my forum if discourse suddenly stopped?
Why aren't warnings easily accessible like suspensions are?
Create a Data Explorer query using the API
Automate the syncing of Discourse queries to Google Sheets
Organization of community Data Explorer queries
Get total list of topics and their view counts from Discourse API
Working around the 10,000 result limit of data explorer?
Selecting the Quarter results in custom way
Create a Report on Profile data
Who marked Solution for Topic
Can you view a 'revised' post after it has been revised
More data from Admin reports
Regarding possibility to use Discourse as an alternative to JIRA or Zendesk
Retrieve latest posts by ID
More granular Discourse metrics?
Dump all conversations in a file and structured data
Login type report / list?
Special role to access dashboard
Best API for All First Posts in a Category
Data Explorer: Posts by Category (Including Subcategories)
Can the period stats use custom time frames to not be limited to only the most recent period?
Tracking who accepted which invite link
Advanced Search: Find posts having staff color
2021: The Year in Review
Filter topics not answered by Staff
Can I download a user database and sort by time viewed?
Category API request downloads all topics
User Data By Date Rage
Browse the Postgres database
How do I extract raw data from my discourse community site?
Some issues with searching (sorting, searching deleted posts and such)
How to Delete Uploaded Files?
How to show badges in the message list?
How to show badges in the message list?
How to find pageview data for a specific topic?
Badges for X Number of Solutions Created?
Permanent deletion bug
Adding SSO after many users already signed up -- how to migrate them?
How could I get voters from a poll?
Notifications from muted categories when mailing list mode is enabled
API: how to get joined at date in user summary
Edit a user preference for everyone or a subset of users
Create a Network chart of your forum - data visualization
Discourse Narrative Bot Data Explorer Queries :robot:
How do I get a report of total topics by subcategory for all subcategories please?
Plugin causing errors during rebuild
User field searching / reporting
Admin dashboard report reference guide
Comment, Question, & Discussion Level Agreement Voting - is there an extension?
How to find deleted posts
SQL query for last created users of the past 30 days
How can I see Survey Results or Responses
Is there a plugin for detecting forum access data?
How to show non-staff posts with zero replies
Viewing all published pages in a single site window
Accessing a user's chat activity
Configure Facebook login for Discourse
Admin Reporting & Analysis: Incremental Changes
Access to OpenID claims data?
How to calculate engagement rate for Discourse?
How to export more than the 10,000 limit?
`/admin/customize/permalinks` only shows ~100 permalinks
Can we delete all 'Automatically Bumped' msgs in one go?
User Status
Sort or Order post with combination of both (Replies + Activity)
Dynamically update available user field values during a profile fill in
Can I create a dashboard for a specific group inside the community?
Error during upgrading from Beta 3.1.x to latest
Must have plugins and components for Discourse?
Full IP access log
Available settings for global rate limits and throttling
How can I use GUI to access the postgresql db in docker
Data Explorer query for topics N+ days old, that are unsolved
Page Publishing
Tips for Exporting User Data
Identify private message interactions between users
View tag changes
Types of community & their characteristics
Discourse Chatbot :robot:
Run Data Explorer queries with the Discourse API
2023: The Year in Review
"Ensure ad-blockers are disabled and try reloading the page." when enabling Data Explorer
Exploring Discourse Data Explorer on my Sandbox
Order/Filter searched topics by latest update to First Post
Discourse Automation
API Filter users by emails, including secondary emails
How do I clear user warnings?
Exclude certain categories from the Trust Levels
Topic Ratings Plugin
Forum Data
Is it possible to view all staff notices?
Discourse Retort
Advice on archiving a site
Cleaning up uploads and purging uploads from S3
Content Audit : Report to pull Categories, Topics and Replies
Exporting all Forum Posts for Manual Upload into External LLMs?
discourse容器部署方式下,如何在外部连接到数据库,例如使用DBeaver连接
I'm attempting to merge user accounts
获取昨日点赞或者浏览量,前10的帖子
Populate Data Explorer params with URL params
AI sentiment and emotion analysis reports
Bulk Export of Raw Post Sources with Markup
Bundling more popular plugins with Discourse core
Setting up automated admin notice alerts
Listing event invitees with email addresses
More charting options for Data Explorer
Topics list filter feature
Migrate a phpBB3 forum to Discourse
Using Parameters in Data Explorer Queries
How to find how long a user has viewed a topic/who has posted new topics/country of users
Error trying to edit a post with an image in (NginX Proxy Manager?)
Restrict moderator access to only the stats panel on the admin dashboard?
How does auto-close topics work?
Poll: Export poll results in CSV for quiz creator?
Query to find out who marked the solution as solved
Possible to run a report for most posts within community?
Add an Admin subtab for Inactive users
Questions regarding Discourse features
How to query an email list of users that are not actived
Advice on a support forum
Shopify Integration
How do I see Facebook signups?
Creating and managing polls
Poll: Export poll results in CSV for quiz creator?
Discourse disk space limits per user?
Sorting all users by total posts?
SQL: The most N used words per user (speak their language!)
User Summary - Most Liked By user attributions are incorrect
Maximum Number of Search Results?
Get only top level posts in topic via discourse API
How to get all the deleted posts for a specific topic
Stats reports on a per-category basis?
Data analytics by complex networks and text mining
Error thrown when importing a query in Data Explorer
Zero search results searching private messages for specific keyword
A way to see full list of users granted with a certain badge?
Who messaged the most?
Who messaged the most?
How to open hyperlinks in a new tab
Run report of digest Unsubscribes
Need log the who downloaded attachments
Poll problem - exact vote numbers needed
Telegram Notifications Plugin (discourse-telegram-notifications)
Get last :heart: via API
Is it possible to keep the votes history of a poll?
How do I check a badge's status midway to it being awarded?
What plugins do you use - and why?
Export list of users based on date range
How to get all posts a user interacted with?
How can I email all recently active users?
Raw Function limited to 100