פרויקט התממשקות עם הבנק

[שואף]

תודה רבה התקדמנו לשגיאה הבאה..
מקווה שאני לא משגע אותך

(node:28869) UnhandledPromiseRejectionWarning: Error: Failed to launch chrome!
/root/node_modules/puppeteer/.local-chromium/linux-637110/chrome-linux/chrome: error while loading shared libraries: libnss3.so: cannot open shared object file: No such file or directory


TROUBLESHOOTING: https://github.com/GoogleChrome/puppeteer/blob/master/docs/troubleshooting.md

    at onClose (/root/node_modules/puppeteer/lib/Launcher.js:342:14)
    at Interface.helper.addEventListener (/root/node_modules/puppeteer/lib/Launcher.js:331:50)
    at Interface.emit (events.js:187:15)
    at Interface.close (readline.js:379:8)
    at Socket.onend (readline.js:157:10)
    at Socket.emit (events.js:187:15)
    at endReadableNT (_stream_readable.js:1094:12)
    at process._tickCallback (internal/process/next_tick.js:63:19)
(node:28869) UnhandledPromiseRejectionWarning: Unhandled promise rejection. This error originated either by throwing inside of an async function without a catch block, or by rejecting a promise which was not handled with .catch(). (rejection id: 1)
(node:28869) [DEP0018] DeprecationWarning: Unhandled promise rejections are deprecated. In the future, promise rejections that are not handled will terminate the Node.js process with a non-zero exit code.

[שואף]

מה שמעניין, שמהמחשב זה סוףסוף עובד, אני יושב וצוחק לראות איך זה פותח את הכרום ומכניס הסיסמא שלי ומושך נתונים..
אבל בלינוקס זה לא עובד

תודה רבה על הכל

[yossiz]

@שואף

sudo apt install libnss3

[WWW]

@שואף כמה זמן לוקח לו עד שמופיע הנתונים?

[שואף]

@yossiz תודה
@WWW כעשרים שניות בערך. אני מאמין שבלינוקס זה יותר מהר

יש עדיין שגיאה בלינוקס

(node:1306) UnhandledPromiseRejectionWarning: Error: Failed to launch chrome!
[1317:1317:0306/124807.187852:ERROR:zygote_host_impl_linux.cc(89)] Running as root without --no-sandbox is not supported. See https://crbug.com/638180.


TROUBLESHOOTING: https://github.com/GoogleChrome/puppeteer/blob/master/docs/troubleshooting.md

    at onClose (/root/node_modules/puppeteer/lib/Launcher.js:342:14)
    at Interface.helper.addEventListener (/root/node_modules/puppeteer/lib/Launcher.js:331:50)
    at Interface.emit (events.js:187:15)
    at Interface.close (readline.js:379:8)
    at Socket.onend (readline.js:157:10)
    at Socket.emit (events.js:187:15)
    at endReadableNT (_stream_readable.js:1094:12)
    at process._tickCallback (internal/process/next_tick.js:63:19)
(node:1306) UnhandledPromiseRejectionWarning: Unhandled promise rejection. This error originated either by throwing inside of an async function without a catch block, or by rejecting a promise which was not handled with .catch(). (rejection id: 1)
(node:1306) [DEP0018] DeprecationWarning: Unhandled promise rejections are deprecated. In the future, promise rejections that are not handled will terminate the Node.js process with a non-zero exit code.

אני רואה שיש דף בגיטהב של troubleshooting, לא הבנתי הכל שמה אבל אני מנסה לאט לאט

[yossiz]

@שואף כרום לא נותן להריץ אותו כרוט בלי פרמטר --no-sandbox.
או תריץ כמשתמש רגיל, או תמצא דרך להגיד ל-pupeteer להוסיף את הפרמטר הנ"ל.

[שואף]

נכון
אז עברתי ליוזר אחר, והגיעה שגיאה חדשה..

(node:2056) UnhandledPromiseRejectionWarning: Error: Failed to launch chrome!
MobaXterm X11 proxy: Unsupported authorisation protocol

(chrome:2067): Gtk-WARNING **: 12:58:14.700: cannot open display: localhost:11.0

[yossiz]

@שואף תעשה

showBrowser: false

[WWW]

@yossiz כבר הצלחתי להתגבר על כל הבעיות, אבל אני מקבל:

scraping failed for the following reason: generic

בבנק הפועלים.

[dovid]

@WWW תראה את כל הקוד, כמובן תצנזר את השם והסיסמה.

[WWW]

@dovid לפי ההוראות שלך:

const  createScraper = require('israeli-bank-scrapers').createScraper;

const credentials = {
  userCode: '123456',
  password: '7890123'
};
const options = {
  companyId: 'hapoalim', // mandatory; one of 'hapoalim', 'leumi', 'discount', 'otsarHahayal', 'visaCal', 'leumiCard', 'isracard', 'amex'
  //startDate: Date, // the date to fetch transactions from (can't be before the minimum allowed time difference for the scraper)
  combineInstallments: false, // if set to true, all installment transactions will be combine into the first one
  //showBrowser: true, // shows the browser while scraping, good for debugging (default false)
  verbose: true // include more debug info about in the output
};
const scraper = createScraper(options);

scraper.scrape(credentials).then(function(scrapeResult) {
	if (scrapeResult.success) {
		scrapeResult.accounts.forEach((account) => {
		console.log(`found ${account.txns.length} transactions for account number ${account.accountNumber}`);
	  });
	}
	else {
		console.error(`scraping failed for the following reason: ${scrapeResult.errorType}`);
	}
});

נסיתי גם username לפנ"כ ואותה שגיאה.

[WWW]

@dovid ניסיתי גם עם שם משתמש שגוי, וקבלתי אותו שגיאה.

[dovid]

@WWW אמר בפרויקט התממשקות עם הבנק:

@dovid ניסיתי גם עם שם משתמש שגוי, וקבלתי אותו שגיאה.

ניסית אבל גם נכונים בטוח?
תסיר את סימון ההערה מshowBrowser: true ותראה איפה זה נתקע.
כמו"כ למה לא שמת תאריך, אולי זה חובה? שים למשל

 new Date(2019,1,1)

[WWW]

@dovid אמר בפרויקט התממשקות עם הבנק:

ניסית אבל גם נכונים בטוח?

מתברר שלא.
כתבתי בהתחלה נתונים נכונים, וכנראה שאיכשהו מחקתי איזה תו לפני השמירה...

תסיר את סימון ההערה מshowBrowser: true ותראה איפה זה נתקע.

אני מריץ על השרת.

@dovid אמר בפרויקט התממשקות עם הבנק:

כמו"כ למה לא שמת תאריך, אולי זה חובה? שים למשל

ניסיתי עם זה, וגם בלי זה..., וזה עובד!

found 58 transactions for account number 12-000-00000
found 0 transactions for account number 12-000-00000

[dovid]

@WWW אמר בפרויקט התממשקות עם הבנק:

אני מריץ על השרת.

למה חביבי?
אתם כולכם אוהבים לעבוד קשה?

[WWW]

@שואף איך ממשיכים עם זה הלאה?
יש אפשרות לקבל את היתרה בחשבון?

[שואף]

@yossiz תודה זה עכשיו עובד. מעניין שבשרת זה לוקח יותר זמן מבמחשב.
@WWW עכשיו השמים הם הגבול... רק צריך להבין קצת יותר איך הכל עובד, אבל בעיקרון אפשר לעשות כל מה שעושים דרך האתר.

אני מבין שהפוקנציה מחזירה אובייקט שיש בו את כל הפעולות, והדוגמא שיש בגיטהב היא סה"כ סופרת את הפעולות ומציגה את המספר. עכשיו צריך לנתח את האובייקט הזה ולשלוף תוצאות. אני מאמין שהיתרה העדכנית זה התוצאה של הפעולה האחרונה.

[שואף]

תחליף את החלק האחרון לזה

scraper.scrape(credentials).then(function(scrapeResult ) {
	if (scrapeResult.success) {
		console.log(JSON.stringify(scrapeResult.accounts, null, 4));
	}
	else {
	  console.error(`scraping failed for the following reason: ${scrapeResult.errorType}`);
	}
});

אבל אין שם יתרה עדכנית.

[dovid]

@שואף אמר בפרויקט התממשקות עם הבנק:

@yossiz תודה זה עכשיו עובד. מעניין שבשרת זה לוקח יותר זמן מבמחשב.

כי השרת שלך הרבה יותר חלש מהמחשב. הם עובדים ע"י הרצת כרום ברקע.

[WWW]

@dovid אמר בפרויקט התממשקות עם הבנק:

כי השרת שלך הרבה יותר חלש מהמחשב. הם עובדים ע"י הרצת כרום ברקע.

ולכן זה חסרון אדיר, יחסית לדרך פעולה 2 שהוזכר כאן.
זה משהו כמו להריץ אמולטור לאנדרואיד...

אני מתאר לעצמי מה יקרה אם ארצה לעשות 100 או 1000 חיבורים כאלה בו זמנית.