מהירות העבודה של גוגל סקריפט

[שמחה זו הסיסמא]

האם יש דרך לשפר את מהירות העבודה של גוגל סקריפט (בתשלום)

[dovid]

@שמחה-זו-הסיסמא מה לאט לך שמה?

[שמחה זו הסיסמא]

@dovid כל פעם שמפעילים סקריפט זה לוקח זמן, כמובן לפי כמות העבודה שלו.

אם אתה רוצה משהו ספציפי אז לדוגמא כשאני שולח בקשה באמצעות שרת חיצוני לסקריפט שמפעיל את הפונציה goGet לוקח לסקריפט הרבה זמן יחסית לענות

אפשר לראות כאן הרחבה על העניין של פונקציה goGet

[dovid]

@שמחה-זו-הסיסמא מה עושה הפונקציה, משהו מורכב או משהו פשוט?
אם יש שמה למשל לולאה שמליון פעם בודקת אם A1 = 0 אז זה צפוי להיות לאט, אבל יש דרך קלה מאוד למהר את זה, לבדוק רק פעם אחת. הבנת את השאלה שלי? כל קוד איטי או יקר צריך לבחון אם יש דרך זולה יותר להשיג את המטרה. מה מטרת הקוד, מה הוא עושה?

[שמחה זו הסיסמא]

@dovid
הבנתי את השאלה שלך, אבל מדובר במגוון של דברים, ואני מחפש אפשרות אולי בתשלום שתמהר את הפעולה שלו, ולא לשכלל את הקוד שלי.
על אף שאני אבדוק גם את מה שאתה אומר

מישהוא אמר לי שאולי עם google cloud זה אפשרי רק שאני לא יודע איך מתעסקים עם זה

[צדיק תמים]

@dovid אני כתבתי את הקוד המדובר
ולעניות דעתי אין בו קריאות מיותרות
יש קריאה אחת בהתחלה לקבל את כל הנתונים כמערך דו מימדי (ככה הם קוראים לזה), זה נצרך בגלל שהקוד מחפש שורה שעומדת בתנאים מסוימים
ובסיום יש קריאה נוספת לעדכון
האמת שבמקור עשיתי בבת אחת עדכון לכל השורה (כלומר getRange לכל השורה ואז setValues), כאשר היכן שאין מה לעדכן (לא נשלח ערך חדש עבור התא) מכניס את התוכן המקורי (שהתקבל בקריאה הראשונה),
ועכשיו שיניתי כך שיעדכן רק היכן שיש צורך, כך שזה במקום קריאה אחת לעדכון של כל השורה, יש בין 1 ל7 (תלוי בכמות התאים שמתעדכנים) קריאות קטנות כדי לעדכן כל תא, אבל מבדיקה שלי זה לא גורם לאיטיות, נראה שבאמת לוקח לסקריפט זמן לפעול
למעשה זה החלקים היחידים שמתקשרים עם השיטס:

const sheet = SpreadsheetApp.openByUrl(sheetUrl).getSheetByName(sheetName);
const table = sheet.getDataRange().getValues();

בהתחלה, כאשר לא מדובר בגליון גדול
ואז לוגיקה די פשוטה של JS, ובסוף

for (const [i, call] of row.entries()) {
    if (call !== 'original-value') {
        sheet.getRange(rowIndex + 2, i + 1, 1, 1).setValue([call]);
    }
}

או:

sheet.deleteRow(rowIndex + 2);

[dovid]

@צדיק-תמים כלומר לא הסקריפט לוקח זמן אלא פשוט יש שיהוי בין הבקשה להפעלה?

[Y.Excel.Access]

@צדיק-תמים אמר במהירות העבודה של גוגל סקריפט:

למעשה זה החלקים היחידים שמתקשרים עם השיטס:

const sheet = SpreadsheetApp.openByUrl(sheetUrl).getSheetByName(sheetName);
const table = sheet.getDataRange().getValues();

בהתחלה, כאשר לא מדובר בגליון גדול
ואז לוגיקה די פשוטה של JS, ובסוף

for (const [i, call] of row.entries()) {
    if (call !== 'original-value') {
        sheet.getRange(rowIndex + 2, i + 1, 1, 1).setValue([call]);
    }
}

או:

sheet.deleteRow(rowIndex + 2);

לכאורה העניין הוא בשימוש ב for עם setValue ולא ב setValues אחד. כי הדבר הכבד כאן הוא הקריאה שוב ושוב לקובץ מקובץ הקוד החיצוני.
הרחבה - (איך להזין מערך ל SHEETS בקריאה אחת) - https://stackoverflow.com/questions/11495588/write-an-array-of-values-to-a-range-of-cells-in-a-spreadsheet

[צדיק תמים]

@dovid אכן, אפילו במקרה שהבקשה נופלת מייד בתחילת הפונקציית doPost, בלי שום לוגיקה מורכבת או גישה לנתונים כמו שיסט.
לדוגמה אפילו קוד פשוט כזה:

const secret = 'tgy4rugh84'
function doPost(req) {
  if (req.parameter.secret !== secret) {
    return ContentService.createTextOutput(
      JSON.stringify({
        error: 'Unauthorized',
      })
    ).setMimeType(ContentService.MimeType.JSON);
  }
  return ContentService.createTextOutput(
    JSON.stringify({
      message: 'OK',
    })
  ).setMimeType(ContentService.MimeType.JSON);
}

לוקח לו להחזיר תשובה בין 0.9 ל1.5 שניות

[צדיק תמים]

@Y-Excel-Access @צדיק-תמים אמר במהירות העבודה של גוגל סקריפט:

האמת שבמקור עשיתי בבת אחת עדכון לכל השורה (כלומר getRange לכל השורה ואז setValues), כאשר היכן שאין מה לעדכן (לא נשלח ערך חדש עבור התא) מכניס את התוכן המקורי (שהתקבל בקריאה הראשונה),
ועכשיו שיניתי כך שיעדכן רק היכן שיש צורך, כך שזה במקום קריאה אחת לעדכון של כל השורה, בין 1 ל7 (תלוי בכמות התאים שמתעדכנים) קריאות קטנות כדי לעדכן כל תא, אבל מבדיקה שלי זה לא גורם לאיטיות,

כלומר שאני מכיר את הצורה הנ"ל, ובמקרה הזה היא לא מתאימה (כיוון שישנם תאים עם נוסחאות, והgetDataRange().getValues() מקבל אותם כטקסט מקובע וממילא גם הsetValues בסוף מחזיר אותם כטקסט, ודורס את הנוסחה).
בכל מקרה כמו שכתבתי, אני לא חושב שעדכון של כל תא בשורה המסוימת בנפרד, במקום עדכון בבת אחת של כל ה1-7 תאים, הוא זה שגורם לאיטיות. הסקריפט אמור להתמודד בקלות עם כזה דבר. ראה גם מה שכתבתי בתגובה מעל

[OdedDvir]

@צדיק-תמים אמר במהירות העבודה של גוגל סקריפט:

אפילו קוד פשוט כזה לוקח לו להחזיר תשובה בין 0.9 ל1.5 שניות

האם אתה מתכוון גם באופן שהגליון ריק לגמרי מנתונים ונוסחאות?

[צדיק תמים]

@OdedDvir
0.9 - 1.5 שניות זה בלי שום גליון... בדיקה פשוטה של תנאי לוגי, והחזרת תשובה. תסתכל בקטע קוד שהבאתי.

[OdedDvir]

@צדיק-תמים איך אפשר לדעת מהקוד מה מכיל הגיליון?
ההשערה שלי היא שגם נתונים ונוסחאות שקיימות בגיליון, גורמות להאטה בתהליך, אפילו בלי שהתהליך יגש לגליון. תבדוק את הקוד על גליון נקי.

[dovid]

@OdedDvir זה פרוייקט app script, הוא חי לעצמו ללא כל חוברת עבודה/גיליון.

[OdedDvir]

אולי להשתמש ב CacheService כדי לשפר את התגובות הבאות? זה לא בדיוק פותר את שורש הבעיה...

[צדיק תמים]

@OdedDvir לא רלוונטי במקרה הזה, הפעולה צריכה להיות על הנתונים בזמן אמת, כמו כן לאיטיות המובנית שהדגמתי כאן עם קוד פשוט של request => response בלי שום קבלת נתונים מרוחקים, זה לא יעזור.
אבל זה כלי שימושי לפעמים, תודה שהכרת לי אותו
עריכה - השתמשתי בו עכשיו למשהו שחסך לי הרבה קומבינות בדרכים שהכרתי... תודה!

רק חבל שזה מוגבל לאלף רשומות...

[Y.Excel.Access]

@צדיק-תמים אמר במהירות העבודה של גוגל סקריפט:

@OdedDvir
0.9 - 1.5 שניות זה בלי שום גליון... בדיקה פשוטה של תנאי לוגי, והחזרת תשובה. תסתכל בקטע קוד שהבאתי.

כל פעולה של APP SCRIPT המתקשרת עם SHEETS לוקחת כזה זמן, לא משנה כמה היא פשוטה. ואפילו מאקרו פשוט של 'כתוב ב A1 "אא" ' יקח לו כזה זמן.

-מה שאומר - לא יודע אם יש לזה פתרון אפשרי.

[dovid]

@Y-Excel-Access לא קראת מה שכתבו, אין בכלל התקשרות לsheet.

[שמחה זו הסיסמא]

@Y-Excel-Access
מה שאומר שאין לזה אולי פתרון אפשרי בכתיבת הקוד, אבל כן יתכן ויש לזה פיתרון אפשרי עם תשלום ל google שיקצו עבור זה יותר משאבים כדי שיקח פחות זמן
זו הייתה השאלה מתחילה ואולי מן הראוי להתמקד בדרך הזו אם יש מישהו שיכול לעזור

ושוב... תודה רבה מאוד לכל מי שמנסה לעזור

[dovid]

@שמחה-זו-הסיסמא לא מצאתי זכר בגוגל לתיעוד על האיטיות הזאת, אז קשה לי להאמין שיש תשלום שמסיר אותה.
אני גם חושב שלרוב השימושים הקלאסיים לא נוראה אם זה שניה או שלוש, כך שלדעתי הפתרון המסתמן זה פונקציית ענן שזה ממש דומה לapp script.