דילוג לתוכן
  • דף הבית
  • קטגוריות
  • פוסטים אחרונים
  • משתמשים
  • חיפוש
  • חוקי הפורום
כיווץ
תחומים

תחומים - פורום חרדי מקצועי

💡 רוצה לזכור קריאת שמע בזמן? לחץ כאן!
  1. דף הבית
  2. תוכנה
  3. בירור בירור מספר דברים בשיטת zstd

בירור בירור מספר דברים בשיטת zstd

מתוזמן נעוץ נעול הועבר תוכנה
8 פוסטים 4 כותבים 33 צפיות 3 עוקבים
  • מהישן לחדש
  • מהחדש לישן
  • הכי הרבה הצבעות
תגובה
  • תגובה כנושא
התחברו כדי לפרסם תגובה
נושא זה נמחק. רק משתמשים עם הרשאות מתאימות יוכלו לצפות בו.
  • ה מחובר
    ה מחובר
    המלאך.
    כתב נערך לאחרונה על ידי
    #1

    יש פה כמה נקודות.
    מדובר פה על מסד נתונים של החיפוש הרגיל לאוצריא.
    1 האם לספרייה המקורית בc יש יתרון על פני הספרייה לדארט (זה מיועד לאוצריא),
    2 האם תמיכה בחישובים בריבוי הליבות ייאיץ את המהירות.
    3 האם במקרה ובו זה ישוכתב בראסט או c עם ffi לדארט יהיה שיפור במהירות בהקשר של ה איטיות של הצינור - דארט שאינה שפת לוע לבל.
    4 האם טעינת הבלוק הבא למחזור הצ'יינג' יועיל?

    אשמח לתשובתכם.
    למרות שידוע לי שבדברים כאלה בסופו של דבר מה שמשנה זה המדידה במציאות בכל זאת-
    אשמח להשערתכם 🙂.

    yossizY תגובה 1 תגובה אחרונה
    0
    • dovidD מנותק
      dovidD מנותק
      dovid
      ניהול
      כתב נערך לאחרונה על ידי dovid
      #2

      זה נראה שבאת לפה אחרי דיון ארוך, ואתה בטח תתפלא שאנחנו לא בעומק הפרטים.
      ZSTD, לפחות מה שאני מכיר מהשם הזה, זה ספריית דחיסה שמחייבת אימון מראש.
      את אוצריא אני לא מכיר, מה הקשר חיפוש לדחיסה?
      אם אנחנו עדיין על הקו... מה אתה מחפש לייעל, את האימון או את הדחיסה או הפרישה?

      • מנטור אישי בתכנות והמסתעף – להתקדם לשלב הבא!
      • בכל נושא אפשר ליצור קשר dovid@tchumim.com
      ה תגובה 1 תגובה אחרונה
      0
      • dovidD dovid

        זה נראה שבאת לפה אחרי דיון ארוך, ואתה בטח תתפלא שאנחנו לא בעומק הפרטים.
        ZSTD, לפחות מה שאני מכיר מהשם הזה, זה ספריית דחיסה שמחייבת אימון מראש.
        את אוצריא אני לא מכיר, מה הקשר חיפוש לדחיסה?
        אם אנחנו עדיין על הקו... מה אתה מחפש לייעל, את האימון או את הדחיסה או הפרישה?

        ה מנותק
        ה מנותק
        הבל הבלים
        כתב נערך לאחרונה על ידי
        #3

        @dovid
        מדובר על המסד נתונים של הספרייה ששוקל כיום כ 7 GB, והייתה הצעה לדחוס אותו כדי לחסוך במקום.
        והנידון הוא מה ה"נזק" ואיך לעשות את זה עם הכי פחות נזק.

        תגובה 1 תגובה אחרונה
        0
        • dovidD מנותק
          dovidD מנותק
          dovid
          ניהול
          כתב נערך לאחרונה על ידי dovid
          #4

          "לדחוס" עם ZSTD זה שלוש חלקים בלי קשר:
          אימון, שזה יכול להתבצע פעם אחת ולתמיד בכלל במחשב פצצה כל שהוא, או לחכות שלושה ימים.
          דחיסה, שזה לכאורה מעט פעמים, כי לא כל הזמן מוזן תוכן חדש. אפשר אפילו לשמור תוכן חדש לא דחוס, ולדחוס אותו ברקע לאט לאט.
          פרישה, שזה בעת טעינה, גם לא אמור להיות טיל של העולם, גם לפתוח וורד עובר פרישה.

          לעניין החיפוש זה עניין שונה לגמרי, אם החיפוש כיום הוא סריקה מלאה, תגנזו דחוף את תכנית הדחיסה.
          החיפוש צריך להיות מבוסס אינדקס שלא עובר שום דחיסה.

          • מנטור אישי בתכנות והמסתעף – להתקדם לשלב הבא!
          • בכל נושא אפשר ליצור קשר dovid@tchumim.com
          ה תגובה 1 תגובה אחרונה
          1
          • dovidD dovid

            "לדחוס" עם ZSTD זה שלוש חלקים בלי קשר:
            אימון, שזה יכול להתבצע פעם אחת ולתמיד בכלל במחשב פצצה כל שהוא, או לחכות שלושה ימים.
            דחיסה, שזה לכאורה מעט פעמים, כי לא כל הזמן מוזן תוכן חדש. אפשר אפילו לשמור תוכן חדש לא דחוס, ולדחוס אותו ברקע לאט לאט.
            פרישה, שזה בעת טעינה, גם לא אמור להיות טיל של העולם, גם לפתוח וורד עובר פרישה.

            לעניין החיפוש זה עניין שונה לגמרי, אם החיפוש כיום הוא סריקה מלאה, תגנזו דחוף את תכנית הדחיסה.
            החיפוש צריך להיות מבוסס אינדקס שלא עובר שום דחיסה.

            ה מנותק
            ה מנותק
            הבל הבלים
            כתב נערך לאחרונה על ידי
            #5

            @dovid
            החיפוש אכן מבוסס אינדקס.
            אני חושב שזו טעות של @המלאך.

            תגובה 1 תגובה אחרונה
            0
            • dovidD מנותק
              dovidD מנותק
              dovid
              ניהול
              כתב נערך לאחרונה על ידי
              #6

              אז אם ככה השאלה נשארת האם בשביל דחיסה/פרישה, יש ייתרון בשימוש בספריה אחרת שהיא בשפה יותר low-level.
              דעתי היא שההפרש לא שווה את העלות - מפתחים במה שהכי נח. לו יצוייר שיש משהו יעיל יותר, זה לא יהיה בר אבחנה, בטל בשישים באיטיות מסביב.

              • מנטור אישי בתכנות והמסתעף – להתקדם לשלב הבא!
              • בכל נושא אפשר ליצור קשר dovid@tchumim.com
              תגובה 1 תגובה אחרונה
              2
              • ה המלאך.

                יש פה כמה נקודות.
                מדובר פה על מסד נתונים של החיפוש הרגיל לאוצריא.
                1 האם לספרייה המקורית בc יש יתרון על פני הספרייה לדארט (זה מיועד לאוצריא),
                2 האם תמיכה בחישובים בריבוי הליבות ייאיץ את המהירות.
                3 האם במקרה ובו זה ישוכתב בראסט או c עם ffi לדארט יהיה שיפור במהירות בהקשר של ה איטיות של הצינור - דארט שאינה שפת לוע לבל.
                4 האם טעינת הבלוק הבא למחזור הצ'יינג' יועיל?

                אשמח לתשובתכם.
                למרות שידוע לי שבדברים כאלה בסופו של דבר מה שמשנה זה המדידה במציאות בכל זאת-
                אשמח להשערתכם 🙂.

                yossizY מחובר
                yossizY מחובר
                yossiz
                כתב נערך לאחרונה על ידי
                #7

                @המלאך. כתב בבירור בירור מספר דברים בשיטת zstd:

                אשמח להשערתכם

                אם יש ערך לעוד השערה...
                השערתי שההבדל לא יהיה מורגש כלל אם מה שמסביב יבוצע בצורה הנכונה

                📧 יוסי@מייל.קום | 🌎 בלוג | ☕ קפה
                👈 רוצים כתובת מייל בעברית? כנסו למייל.קום 👉

                dovidD תגובה 1 תגובה אחרונה
                1
                • yossizY yossiz

                  @המלאך. כתב בבירור בירור מספר דברים בשיטת zstd:

                  אשמח להשערתכם

                  אם יש ערך לעוד השערה...
                  השערתי שההבדל לא יהיה מורגש כלל אם מה שמסביב יבוצע בצורה הנכונה

                  dovidD מנותק
                  dovidD מנותק
                  dovid
                  ניהול
                  כתב נערך לאחרונה על ידי
                  #8

                  @yossiz כתב בבירור בירור מספר דברים בשיטת zstd:

                  אם יש ערך לעוד השערה...

                  יש ערך ועוד איך, אני לפחות כעת בטוח ורגוע במה שעניתי אחרי חוות דעתך.

                  • מנטור אישי בתכנות והמסתעף – להתקדם לשלב הבא!
                  • בכל נושא אפשר ליצור קשר dovid@tchumim.com
                  תגובה 1 תגובה אחרונה
                  1
                  תגובה
                  • תגובה כנושא
                  התחברו כדי לפרסם תגובה
                  • מהישן לחדש
                  • מהחדש לישן
                  • הכי הרבה הצבעות


                  בא תתחבר לדף היומי!
                  • התחברות

                  • אין לך חשבון עדיין? הרשמה

                  • התחברו או הירשמו כדי לחפש.
                  • פוסט ראשון
                    פוסט אחרון
                  0
                  • דף הבית
                  • קטגוריות
                  • פוסטים אחרונים
                  • משתמשים
                  • חיפוש
                  • חוקי הפורום