מהו האחסון המהיר ביותר האפשרי של נתוני טקסט ב-C# ?

[pcinfogmach]

@dovid כתב במהו האחסון המהיר ביותר האפשרי של נתוני טקסט ב-C# ?:

הם טוענים בדיוק את אותו נפח מהר יותר?

אני חושב שכן אם הבנתי נכון ככה ה-Highlighter שלהם עובד הוא טוען את תוכן הספר ואז יוצר tokens ואז מחשב גזירים

[pcinfogmach]

@dovid כתב במהו האחסון המהיר ביותר האפשרי של נתוני טקסט ב-C# ?:

א. שליפה יותר סלקטיבית - לטעון רק מה שצריך ולא מסמך מלא.

יש צורה גם לשלוף חלקים מאמצע או מסוף המסמך?

[dovid]

@pcinfogmach כתב במהו האחסון המהיר ביותר האפשרי של נתוני טקסט ב-C# ?:

@dovid כתב במהו האחסון המהיר ביותר האפשרי של נתוני טקסט ב-C# ?:

א. שליפה יותר סלקטיבית - לטעון רק מה שצריך ולא מסמך מלא.

יש צורה גם לשלוף חלקים מאמצע או מסוף המסמך?

לא בקובץ טקסט.
לכן צריך לשמור מלא קבצים קטנים או להשתמש במסד נתונים.

[dovid]

@pcinfogmach כתב במהו האחסון המהיר ביותר האפשרי של נתוני טקסט ב-C# ?:

כן בדקתי את זה. כמובן שגם עיבוד הנתונים לוקח יותר זמן, אבל גם הטעינה.

בדוק את זה לעומק יותר, האם בלי שום עיבוד יש טעינה שלוקחת זמן? כמה MB מדובר?

[pcinfogmach]

@dovid כתב במהו האחסון המהיר ביותר האפשרי של נתוני טקסט ב-C# ?:

לכן צריך לשמור מלא קבצים קטנים או להשתמש במסד נתונים.

מצד איחסון הטקסט בלבד ולא משאר הבחינות האם אני מרוויח משהו ממסד נתונים (חוץ מהעובדה שאין לי אלפי קבצי טקסט במחשב).

[yossiz]

@pcinfogmach זה לא נשמע הגיוני שטעינה מהדיסק הוא צואר הבקבוק. זה לא אמור להיות כמה שניות. אני בטוח שהטעינה האיטית הוא בגלל פירמוט הטקסט להציג בפקד

[pcinfogmach]

@yossiz @dovid

אוקיי אבדוק את זה שוב.

[pcinfogmach]

אוקיי בבדיקות שערכתי בlinqpad נראה שאתם צודקים במקסימום שהגעתי אליו היה 0.200 שניות

[aaron]

@dovid כתב במהו האחסון המהיר ביותר האפשרי של נתוני טקסט ב-C# ?:

@pcinfogmach כתב במהו האחסון המהיר ביותר האפשרי של נתוני טקסט ב-C# ?:

@dovid כתב במהו האחסון המהיר ביותר האפשרי של נתוני טקסט ב-C# ?:

א. שליפה יותר סלקטיבית - לטעון רק מה שצריך ולא מסמך מלא.

יש צורה גם לשלוף חלקים מאמצע או מסוף המסמך?

לא בקובץ טקסט.
לכן צריך לשמור מלא קבצים קטנים או להשתמש במסד נתונים.

אני בטוח שיש file.seek כלשהו גם בC#..
בכל מקרה אלא אם מדובר בדיסק איטי במיוחד, קריאה של כמה קבצי טקסט זה לא מה שיאט אותך משמעותית מספיק, לא חושב ששם הצוואר בקבוק שלך.

[dovid]

@aaron כתב במהו האחסון המהיר ביותר האפשרי של נתוני טקסט ב-C# ?:

אני בטוח שיש file.seek כלשהו גם בC#..

זה בדיוק מה שמסד נתונים עושה, אבל קובץ טקסט לא מתאים לגישה אקראית.
לא שייך לעשות seek בלי לדעת איפה (בינארית, מממ... למעט אם אתה כותב בUTF-16), זה מחייב אותך להחזיק קבצי אינדקס.