I need a large amount of data for processing. Can I get some meaningful data from deep web for testing my system?
I'm trying to get data from a CKAN web site (data.gov) and process it with spark, is kafka the best way to get thata data from CKAN?
אני צריך כמות גדולה של נתונים לעיבוד. האם אוכל לקבל נתונים משמעותיים מהאינטרנט העמוק לבדיקת המערכת שלי?
אני מנסה להשיג נתונים מאתר אינטרנט של CKAN (data.gov) ולעבד אותם עם spark, האם קפקא היא הדרך הטובה ביותר לקבל נתונים מ-CKAN?