הבגי"ה הכי קשוח שהיה פה אי פעם ... מישהו מתמצא ב MONGODB ?

**גיא** · 16-12-20, 13:56

שאלה ..
ועזרה ...
וכו' ...

כדי לא לגרום לקריסת השרת .. אני אפרט בפרטי אם קיים פה קוסם כזה.

אבל בגדול, שליפה שלא מצליחה לי ..

תודה.

**boaz avrahami** · 16-12-20, 15:36

למה אתה לא נעזר במטריקס שהם הנציגים?

**נדב42** · 16-12-20, 16:00

לא מומחה בעצמי, אבל מכיר לפחות שניים..

**קייס קינום** · 16-12-20, 17:48

השתמשתי בו בפרויקט או שניים. מה השאלה?

**alto** · 16-12-20, 18:06

הפורום הזה מתדרדר...
לא מומחה גדול אבל מכיר.

Sent from my Mi A2 using Tapatalk

**גיא** · 16-12-20, 18:20

קולקשן שנראה ככה:

{
"_id": "5fd90c63f982dd0c58f1be39",
"status": "ok",
"totalResults": 70,
"articles": [
{
"source": {
"id": null,
"name": "Geektime.co.il"
},
"author": "עידן בן טובים",
"title": "חברת Unity רוכשת את RestAR הישראלית שתהפוך למרכז פיתוח ראשון בישראל - גיקטיים",
"description": "הסטארטאפ הישראלי גייס רק 1.5 מיליון דולר, והמנכ׳׳ל מספר לגיקטיים: ׳׳3 פעמים היה לי פחות משבוע לגייס השקעה נוספת עבור המשכורות הבאות או לפטר את כל העובדים׳׳.",
"url": "https://www.geektime.co.il/unity-acquires-restar/",
"urlToImage": "https://files.geektime.co.il/wp-content/uploads/2020/12/cover-bar-shimon-large-1608050488-600x315.jpg",
"publishedAt": "2020-12-15T17:31:50Z",
"content": "1.5 , : 3 .\r\n: \r\n: RestAR , Unity . , RestAR Unity . . , , .\r\nRestAR , -AR . . , . .\r\n-RestAR , . , , -eCommerce . .\r\nRestAR Wix Capital, Wix . 500Startups, ( ), Dafiti . , 7 .\r\n?\r\n , \r\n: RestAR\r\n, -… [+209 chars]"
},
{
"source": {
"id": null,
"name": "Calcalist.co.il"
},
"author": "הגר רבט",
"title": "חברת Artlist רוכשת קטלוג מדיה אמריקאי תמורת 65 מיליון דולר - כלכליסט",
"description": "חברת הווידאו הישראלית מודיעה על רכישת חברת Motion Array. הרכישה תגדיל את מספר המשתמשים של ארטליסט ליותר מ-6 מיליון ברחבי העולם, ותרחיב את סל המוצרים שלה ביותר מחצי מיליון מדיות דיגיטליות חדשות",
"url": "https://www.calcalist.co.il/internet/articles/0,7340,L-3881937,00.html",
"urlToImage": "https://images1.calcalist.co.il/PicServer3/2020/06/29/1000943/5_l.jpg",
"publishedAt": "2020-12-15T13:59:34Z",
"content": "- (Artlist) () Motion Array , 65 . -6 , . \r\n -2016 : , : , . "" , . -2019 . , , . \r\nMotion Array, 2013, , , , , , .\r\n , , . . , , : Nike, Wix, Coca Cola, Ikea, Google, Mercedes, Adobe, Netflix, Salin… [+152 chars]"
},

אני מנסה נואשות לחלץ משם מידע לפי חיפוש .. משהו כמו זה למשל:

> db.news.find( { "articles.url": { $in: "facebook" , $in: "Globes" } } )

ועוד מליון ווריאציות דומות
ניסיתי גם עם aggregate ולא ממש מצליח.

החשד שלי הוא שהדברים שאני מחפש הם ברצה השלישית פנימה. אבל אני מחפש אותם ברמה השניה ..
אבל אין לי באמת מושג.

אשמח לכל עיצה.

תודה.

וסליחה משאר גולשי הפורום המכובד על הרעש הסטאטי שהם חוטפים עכשיו ..

**קייס קינום** · 16-12-20, 19:08

קשה לקרוא את הג׳יסון ככה אבל נראה לי שבעקרון אין לך דבר כזה articles.url אלא articles[0].url וכן הלאה, ככה שהייתי הולך בכיוון של map/reduce (גילוי נאות אני מתכנת די חלוד, הכל בע״מ)

**alto** · 16-12-20, 19:32

אז ככה:
- העברית מחרבשת את הJSON לגמרי
- ה JSON לא תקין, לא שזאת הבעייה.
- הצלחתי להריץ שאילתא שעבדה: לא מצליח להכניס את הקוד פה (בעיית עברית באתר) אז הנה תמונה:

Click image for larger version.

Name: mongo.png
Views: 130
Size: 6.0 קילובייט
ID: 131933

השאילתה מביאה את כל הרשומות (פה היתה אחת בלבד) שבהן אחד המאמרים מכיל ב URL כלכליסט

ד"א, היתה לי בעייה להכניס או יותר נכון לקרוא את הנתונים כאשר ה keys היו במרכאות, כך שיצרתי json לא תקין כש ה keys לא בתוך מרכאות, והכנסתי אותו למונגו כדי להצליח לתשאל , יכול להיות שזו גם הבעייה בשאילתה שלך או בנתונים, לא בטוח

**גיא** · 16-12-20, 19:41

נכתב במקור על ידי alto

אז ככה:
- העברית מחרבשת את הJSON לגמרי
- ה JSON לא תקין, לא שזאת הבעייה.
- הצלחתי להריץ שאילתא שעבדה: לא מצליח להכניס את הקוד פה (בעיית עברית באתר) אז הנה תמונה:[LEFT][FONT=arial black]

השאילתה מביאה את כל הרשומות (פה היתה אחת בלבד) שבהן אחד המאמרים מכיל ב URL כלכליסט

בשביל ליישר לשמאל

[ l e f t ]

כמובן בלי רווחים

תודה אני רץ לבדוק

**גיא** · 16-12-20, 20:02

נגמרו לי 15 דק' העדכון ...

אני אולי לא הסברתי את עצמי טוב, פה כבר הייתי .. אני מחפש לפלטר הודעה ספציפית .. למשל אם אני מחפש author שכולל facebook ביחד עם publishedAt שכולל 10:37 אני רוצה לקבל רק את הבלוק הספציפי שמסומן בצילום המצורף .. כרגע אני מקבל את כל 70 ההודעות יחד. כי אחת מהן לפחות ענתה על הקריטריון ..

יש דבר כזה ?

Click image for larger version.

Name: Screenshot at 2020-12-16 19-54-41.png
Views: 147
Size: 185.3 קילובייט
ID: 131934

- - - Updated - - -

נכתב במקור על ידי קייס קינום

קשה לקרוא את הג׳יסון ככה אבל נראה לי שבעקרון אין לך דבר כזה articles.url אלא articles[0].url וכן הלאה, ככה שהייתי הולך בכיוון של map/reduce (גילוי נאות אני מתכנת די חלוד, הכל בע״מ)

כן ... אולי אתה צודק.

בודק, תודה.

**alto** · 16-12-20, 20:19

נכתב במקור על ידי גיא

נגמרו לי 15 דק' העדכון ...

אני אולי לא הסברתי את עצמי טוב, פה כבר הייתי .. אני מחפש לפלטר הודעה ספציפית .. למשל אם אני מחפש author שכולל facebook ביחד עם publishedAt שכולל 10:37 אני רוצה לקבל רק את הבלוק הספציפי שמסומן בצילום המצורף .. כרגע אני מקבל את כל 70 ההודעות יחד. כי אחת מהן לפחות ענתה על הקריטריון ..

יש דבר כזה ?

- - - Updated - - -

כן ... אולי אתה צודק.

בודק, תודה.

עד כמה שזוכר, אבל ממש לא בטוח אפשר להשתמש בפילטר כדי לקבל חלק מהדוקומנט אבל זה בעייתי, תלוי גרסת מונגו והרבה פחות יעיל אני חושב.
אם המטרה היא לקבל ארטיקלס ספציפיים לפי המקור הייתי בונה טבלה שלהם ולא כסאב דוקומנטים

Sent from my Mi A2 using Tapatalk

**גיא** · 16-12-20, 20:25

נכתב במקור על ידי alto

עד כמה שזוכר, אבל ממש לא בטוח אפשר להשתמש בפילטר כדי לקבל חלק מהדוקומנט אבל זה בעייתי, תלוי גרסת מונגו והרבה פחות יעיל אני חושב.
אם המטרה היא לקבל ארטיקלס ספציפיים לפי המקור הייתי בונה טבלה שלהם ולא כסאב דוקומנטים

Sent from my Mi A2 using Tapatalk

ככה זה מגיע ..

אתה אומר לפרק אותם בפייתון מחוץ למונגו ?

תודה בכל מקרה

**alto** · 16-12-20, 20:50

נכתב במקור על ידי גיא

ככה זה מגיע ..

אתה אומר לפרק אותם בפייתון מחוץ למונגו ?

תודה בכל מקרה

אם מדובר על הרבה רשומות אז בוודאות כן, כי אז גם אפשר לאנדקס כמו שצריך

Sent from my Mi A2 using Tapatalk

**קייס קינום** · 16-12-20, 20:58

לדעתי תלוי מאד כמה רשומות יש ועד כמה המהירות היא קריטית. אתה בוודאות יכול לפתור את זה בתוך מונגו עם map/reduce. ביצועים זה כבר ענין אחר, אבל בהנחה שאתה לא בונה איזה פייסבוק כמעט תמיד עדיף ללכת על הפתרון הכי קל למימוש ותחזוקה, לאו דוקא מה שירוץ הכי מהר.

**גיא** · 16-12-20, 22:30

טוב ..

רק למען הסיכוי הזעום שמישהו פעם יחפש את זה ..

פיצלתי את הרשומות בפייתון לפני השמירה למונגו ועכשיו הכל פועל ..

תודה למייעצים

וטוב לדעת שאפילו בזה ג'יפולוג מבין

נושא: הבגי"ה הכי קשוח שהיה פה אי פעם ... מישהו מתמצא ב MONGODB ?

כלי נושא

חיפוש נושאים