עזרה - שינוי שם בקבצי PDF מרובים לפי טקסט מתוך המסמך

[מעלה ומוריד]

צהרים טובים
יש לי 12 תיקיות שכל אחת מכילה כ100 מסמכי PDF שהם בעצם קבלות על תרומות.
שמות המסמכים נראים כך:

אני צריך תוכנה/סקריפט שמאפשר לשנות שם לקבצי PDF מרובים לפי טקסט שהסקריפט/תוכנה תשלוף מתוך הקובץ,
המטרה היא שהסקריפט ישאב את שם התורם (ואולי גם הסכום) וישנה את שם הקובץ לשם התורם, ויריץ את הפעולה על כלל המסמכים.

שאלתי ובקשתי, האם מישהו מכיר סקריפט כזה
או שמא יש מי שיסכים לכתוב אותו, בכפוף למורכבות כמובן.

[רחמים]

@מעלה-ומוריד אני מוכן לכתוב כזה סקריפט, היה בקשר yaakobov001@gmail.com לקבל הצעת מחיר.

[yossiz]

@מעלה-ומוריד אולי עם קצת מאמץ קבוצתי יוכלו חברי תחומים התותחים למצוא לך פתרון מצויין שתשאיר את חשבון הבנק שלך מעל קו האדום התחתון...

ההתחלה:

• תוכנת pdftotext (הורדה). מריצים את זה ככה:

pdftotext -enc UTF-8 -layout source-file.pdf -

הנה קבלנו את התוכן של ה-pdf ל-stdout. (הסברים מה זה stdout במדריך שורת הפקודה שלי...)

• שלב הבא, נמצא regex ששולף את הטקסט הרצוי

• נרכיב פקודה שעושה שינוי השם לפי התוצאה של הפקודות הנ"ל.

לפני שנתחיל, בא נחליט באיזה שפה נכתוב את זה?

לכאורה powershell, למישהו יש הצעה טובה יותר?

[yossiz]

@yossiz אמר בעזרה - שינוי שם בקבצי PDF מרובים לפי טקסט מתוך המסמך:

אולי עם קצת מאמץ קבוצתי

חברה, תעזרו לי קצת... אני לא מכיר powershell מספיק. אני לא רוצה לעשות את הכל לבד.

[מעלה ומוריד]

@yossiz

תודה רבה! אתה לגמרי איש נדיר. שמישהו יביא איזה סקריפט לשכפל אותך...
האם צריך להעלות מסמך לדוגמא?

[רחמים]

@yossiz לפני שאתה מתאמץ, אולי @מעלה-ומוריד יפרש יותר באיזה קובץ PDF מדובר? האם באמת יש שם טקסט? או אולי בכלל זה סריקה וצריך OCR, ואולי הקבלות מולאו בכתב יד וצריך OCR של כתב יד?

[yossiz]

@מעלה-ומוריד באמת כדאי להעלות מסמך לדוגמה שנוכל לראות איך הוא בנוי
(נ.ב. למען האמת, @מעלה-ומוריד כבר שלח לי בפרטי קובץ דוגמה, לפני שהוא פתח פה את הפוסט, והוא באמת טקסט. אני הוא שהמלצתי לו לשאול פה, על סמך שיש עוד כמה שישמחו לעזור לי. ההתחלה שהבאתי למעלה הוא תוצאה של שיעורי בית שעשיתי לפני שהוא העלה את הפוסט.)

[מעלה ומוריד]

@yossiz @רחמים הנה מסמך לדוגמה
שוב תודה רבה!

[רחמים]

@מעלה-ומוריד לא צירפת כלום

[מעלה ומוריד]

@רחמים אמר בעזרה - שינוי שם בקבצי PDF מרובים לפי טקסט מתוך המסמך:

@מעלה-ומוריד לא צירפת כלום

תיקנתי (היה חסר https)..

[dovid]

בארגון בו אני עובד בניתי תוכנה קבועה לזה, והיא עובדת ב"ה.
אבל במקרה אחר בו היא נדרשה היא לא עובדת (בדיוק כמו הקובץ דוגמה שהעלית) הקובץ לא קריא. ניסיתי המון ניסיונות ולא הצלחתי, אני מקוה ש@yossiz יצליח פה ושעל הדרך בעייתי תיפתר גם.

עריכה:
אבל פה לפחות את המספרים והמיילים והטלפונים זה מחלץ מצוין. אפשר מזה בטח להגיע לשם התורם...
אצלי אפילו האנגלית לא קריאה, רק המספרים. טוב אני יחקור שוב עם מה שעשיתי, תודה @מעלה-ומוריד.

[aaron]

@yossiz אמר בעזרה - שינוי שם בקבצי PDF מרובים לפי טקסט מתוך המסמך:

לכאורה powershell, למישהו יש הצעה טובה יותר?

bash? סתם, צוחק.
נראה לי שהחלק המכאיב זה לבנות regex, מישהו פה התנסה בריג'קס בPS? כי נראה שזה לא תואם..

[yossiz]

@aaron אמר בעזרה - שינוי שם בקבצי PDF מרובים לפי טקסט מתוך המסמך:

bash? סתם, צוחק.

מה מצחיק? באמת אולי bash היה יותר קל לי, אבל זה לא שימושי ל@מעלה-ומוריד.

נראה לי שהחלק המכאיב זה לבנות regex, מישהו פה התנסה בריג'קס בPS? כי נראה שזה לא תואם..

טוב, נצטרך להוכיח לך שאתה לא צודק...
אולי אתה תרים את הכפפה ותכתוב משהו?

[aaron]

@yossiz אמר בעזרה - שינוי שם בקבצי PDF מרובים לפי טקסט מתוך המסמך:

טוב, נצטרך להוכיח לך שאתה לא צודק...

שאני לא צודק במה?
זה ודאי לא תואם.. נתחיל בזה שאין פלאג של multiline.. כבר כאב ראש..
(על הדרך גיליתי שיש powershell על דוקר.. אחרת באמת לא היה לי איך לבדוק בכלל)

[yossiz]

param([string]$path = '.')

$pdftotext = "C:\path\to\pdftotext.exe"

[Console]::OutputEncoding = [text.encoding]::utf8

Get-ChildItem -path $path -Filter '*.pdf' | ForEach-Object -Process {
  $donor = &$pdftotext -enc UTF-8 -simple $_.FullName - | Select-Object -Index 9
  Copy-Item -Path $_.FullName -Destination "$($path)/$($donor.trim()).pdf"
}

[yossiz]

@dovid אמר בעזרה - שינוי שם בקבצי PDF מרובים לפי טקסט מתוך המסמך:

אצלי אפילו האנגלית לא קריאה, רק המספרים

מה הסיפור עם הקובץ? נוצרה מאותה תוכנה? הבנת למה אין טקסט?

[yossiz]

@aaron אמר בעזרה - שינוי שם בקבצי PDF מרובים לפי טקסט מתוך המסמך:

נתחיל בזה שאין פלאג של multiline

פשוט לא נכון. הוצאת שם רע. סביר לטעון שיש טעיות בתכנון של powershell. אבל אל תנסה לטעון שיש טעויות טפשיות שכל מתחיל לא היה עושה.

https://stackoverflow.com/a/12573413

על הדרך גיליתי שיש powershell על דוקר.. אחרת באמת לא היה לי איך לבדוק בכלל

אפשר פשוט להשתמש בווינדוס ?
בנוסף, מה לא טוב בזה?

[yossiz]

מי שרוצה לתרום עדיין...
יש עדיין מה לשפר בסקריפט שכתבתי:

• צריך לסנן תווים מיוחדים מתוך השם החדש הקובץ
• צריך לתת שם ייחודי לכל קובץ כדי שלא יהיה שגיאה כאשר יש שני קבצים עם שם תורם זהה
• צריך לטפל שבהרצה שנייה הסקריפט יתעלם מקבצים שכבר טופלו

[aaron]

@yossiz אמר בעזרה - שינוי שם בקבצי PDF מרובים לפי טקסט מתוך המסמך:

פשוט לא נכון. הוצאת שם רע. סביר לטעון שיש טעיות בתכנון של powershell. אבל אל תנסה לטעון שיש טעויות טפשיות שכל מתחיל לא היה עושה.

צודק, לא הבדלתי בכך שבמקרה הזה מדובר בקלט מstdout מה שאומר שהוא מסופק כשורות נפרדות ולא כטקסט רציף (עם \n)

עריכה: אולי אין קשר..

@yossiz אמר בעזרה - שינוי שם בקבצי PDF מרובים לפי טקסט מתוך המסמך:

אפשר פשוט להשתמש בווינדוס ?
בנוסף, מה לא טוב בזה?

אילו היה וינדוס...
ואני משתדל לא להתקין אף פעם ישירות מRPM\DEB. זה מתכון לחבילות לא מעודכנות.. (חוץ מחבילות שכשאתה מתקין הם גם מוסיפות את עצמם לריפו?)
בכל מקרה, לא רואה סיבה "לזהם" את הסביבת עבודה כשיש דוקר פשוט וקל..

[OdedDvir]

@yossiz אמר בעזרה - שינוי שם בקבצי PDF מרובים לפי טקסט מתוך המסמך:

יש עדיין מה לשפר בסקריפט שכתבתי:

אני לא מבין בPS אבל הנה השני סנט שלי:

צריך לתת שם ייחודי לכל קובץ כדי שלא יהיה שגיאה כאשר יש שני קבצים עם שם תורם זהה

לשנות את שם הקובץ המקורי ל: שם המקורי+שם התורם.

צריך לטפל שבהרצה שנייה הסקריפט יתעלם מקבצים שכבר טופלו

לבדוק אם שם הקובץ גדול מ-10 תווים (ואז הוא טופל)

צריך לסנן תווים מיוחדים מתוך השם החדש הקובץ

$Path.Split([IO.Path]::GetInvalidFileNameChars()) -join '_'

ממיר את כל התווים הלא תקניים לקו תחתון (מקור)

ישר כח על העזרה @yossiz !