איך עושים JOIN?

[OdedDvir]

@nigun ייתכן שסוג הנתונים של מחרוזת בשילוב עם מספר הרשומות הגדול יוצר מעמסה.
ראשית, הייתי מנסה לבצע את הJoin על קבוצה קטנה, למשל ה-1000 הראשונים מכל טבלה ולראות אם נתקע:

SELECT P.user, P.points FROM (SELECT TOP 1000 * FROM points) AS P JOIN (SELECT TOP 1000 * FROM userinfo) AS I ON P.user=I.user ;

בטבלת points יש 371574 שורות
בטבלת info יש 29542 שורות.

לפי הנתונים, מספר הרשומות האפשריות בJoin הוא 371K * 29K = 10,759,000,000!
לפי סדר הריצה כנראה הDB מבצע JOIN ואח"כ מסנן.
אם אתה צריך רק קבוצה מסויימת, תסנן את שתי הטבלאות לפני הJOIN

עריכה: בהתבוננות שניה, עדיין לא הבנתי מדוע אתה מבצע JOIN אך לא מציג כלום מטבלת userinfo

[nigun]

@OdedDvir
א. בMYSQL לא עובד TOP
אז השתמשתי בLIMIT.
וזה אכן עבד.
ב. הורדתי את הלימיט והשאילתא עבדה
מה ההבדל בין השאילתות?

[OdedDvir]

@nigun אמר באיך עושים JOIN?:

מה ההבדל בין השאילתות?

לא הבנתי למה כוונתך

[nigun]

@OdedDvir
מה ההבדל בין

SELECpoints.user ,points.points FROM points JOIN info ON info.user=points.user

לבין

SELECT P.user, P.points FROM (SELECT TOP 1000 * FROM points) AS P JOIN (SELECT TOP 1000 * FROM userinfo) AS I ON P.user=I.user ;

[nigun]

@OdedDvir אמר באיך עושים JOIN?:

עריכה: בהתבוננות שניה, עדיין לא הבנתי מדוע אתה מבצע JOIN אך לא מציג כלום מטבלת userinfo

שניה, פעם ראשונה שאני עושה JOIN
אני עדיין מנסה להבין איך זה עובד?

[nigun]

יופי עכשיו השאילתא:

 SELECT P.user, P.points,I.nameText FROM (SELECT * FROM points ) AS P JOIN (SELECT * FROM userinfo ) AS I ON P.user=I.user and P.grup=123;

מחזירה לי תוצאות תוך 6.58 שניות

[OdedDvir]

@nigun אמר באיך עושים JOIN?:

מה ההבדל בין ...

לכאורה אין הבדל:

SELECT points.user, points.points FROM points JOIN info ON info.user=points.user 

לבין (אם נוריד את ה TOP\LIMIT)

SELECT points.user, points.points FROM points JOIN userinfo ON points.user=userinfo.user;

אינני יודע, אך אולי ב MYSQL הסדר של ה ON משנה וצריך לרשום:

ON points.user=info.user 

ולא

ON info.user=points.user

[nigun]

@OdedDvir
בשניהם זה נתקע.
אולי אני ישאיר את זה לחצי שעה
ונראה מתי זה מצליח להביא את התוצאות בסוף.

[OdedDvir]

@nigun אמר באיך עושים JOIN?:

אולי אני ישאיר את זה לחצי שעה

אני עדיין מציע לך לבצע סינון WHERE לפי הקבוצה לפני הJOIN, ולהרוויח את הזמן הזה:

SELECT P.user, P.points,I.nameText
FROM (SELECT * FROM points WHERE points.grup=123) AS P
JOIN (SELECT * FROM userinfo WHERE userinfo.grup=123) AS I
ON P.user=I.user; 

[nigun]

@nigun אמר באיך עושים JOIN?:

@OdedDvir
בשניהם זה נתקע.
אולי אני ישאיר את זה לחצי שעה
ונראה מתי זה מצליח להביא את התוצאות בסוף.

בדקתי עכשיו
ואני רואה שהבקשה ארכה 31 דקות!!!!
מעניין מה ההבדל?

[nigun]

@OdedDvir אמר באיך עושים JOIN?:

@nigun אמר באיך עושים JOIN?:

אולי אני ישאיר את זה לחצי שעה

אני עדיין מציע לך לבצע סינון WHERE לפי הקבוצה לפני הJOIN, ולהרוויח את הזמן הזה:

SELECT P.user, P.points,I.nameText
FROM (SELECT * FROM points WHERE points.grup=123) AS P
JOIN (SELECT * FROM userinfo WHERE userinfo.grup=123) AS I
ON P.user=I.user; 

יפה
עכשיו זה ירד ל0.23 שניות.

[dovid]

בדרך כלל המסד נתונים לבד בוחר לבצע סינון לפני הJOIN אם יש לו אינדיקציות ברורות שזה שווה.

[nigun]

@dovid
אז מה השתבש אצלי?

[dovid]

@nigun זה מה שאני שואל את עצמי לאורך כל האשכול.

[OdedDvir]

@nigun אמר באיך עושים JOIN?:

מעניין מה ההבדל?

כתבתי למעלה, שמשום מה סדר הריצה של המסד נתונים שלך היה קודם כל לבצע JOIN (מה שיצר כנראה מליוני רשומות) ורק אח"כ סינון ב-WHERE.
תוסיף את העניין שמדובר ב-JOIN של מחרוזות שגם הוא איטי בהרבה מJOIN של מספרים - וקיבלת חצי שעה של תעסוקה למעבד...

@dovid אמר באיך עושים JOIN?:

בדרך כלל המסד נתונים לבד בוחר לבצע סינון לפני הJOIN אם יש לו אינדיקציות ברורות שזה שווה.

אולי עדיף לא להשאיר את הדבר בידיים של הDB איפה שאפשר בקלות לקבוע את הסדר כדלעיל?

[nigun]

בהמשך לשאלה הנ"ל
לפעמים יש משתמשים שלא רשומים ב userinfo
אבל אני בכל זאת אני רוצה לקבל את הרשומה שלהם בpoints
איך אני כותב את השאילתא?

[OdedDvir]

@nigun בעיקרון אתה כותב LEFT JOIN במקום JOIN

[dovid]

LEFT JOIN זה למקרה שאתה רוצה את כל השורות של הטבלה שצויינה ראשונה (שזה לשמאל הביטוי JOIN). למקרה הפוך יש RIGHT JOIN. הברירת מחדל היא INNER שזה רק הזהים, ויש את FULL שזה הכל משני הצדדים. בחלק ממסדי הנתונים האחרון לא נתמך.

[dovid]

@OdedDvir אמר באיך עושים JOIN?:

אולי עדיף לא להשאיר את הדבר בידיים של הDB איפה שאפשר בקלות לקבוע את הסדר כדלעיל?

זה לגיטימי לעיתים נדירות, אחרת הרסת את כל הרעיון של SQL ("תגיד מה אתה רוצה, אני אדאג לאיך").
מקרה שבו הDB כ"כ מזייף הוא משונה מאוד. ב99% מהמקרים הDB חכם מספיק לעשות את הסדר הכי טוב.

[OdedDvir]

@dovid אמר באיך עושים JOIN?:

זה לגיטימי לעיתים נדירות, אחרת הרסת את כל הרעיון של SQL ("תגיד מה אתה רוצה, אני אדאג לאיך").

אני עדיין אוחז ב"תגיד מה אתה רוצה ועדיין תדאג"...

מקרה שבו הDB כ"כ מזייף הוא משונה מאוד. ב99% מהמקרים הDB חכם מספיק לעשות את הסדר הכי טוב.

מעניין לראות את תוכנית הריצה של השאילתא הארוכה. אם @nigun יוכל להראות אותה כאן (כמובן רק אם זה לא ידרוש שוב חצי שעה...)