அப்பாச்சி ஸ்பார்க் & ஸ்கலாவுடன் பெரிய தரவு செயலாக்கம்



அப்பாச்சி ஸ்பார்க் பெரிய தரவு செயலாக்கத்தில் ஒரு சிறந்த வளர்ச்சியாக வந்துள்ளது.

c ++ எடுத்துக்காட்டில் செயல்பாடு ஓவர்லோடிங்

IST: 7:00 AM - 08:00 AM, 17 அக்டோபர் 14





பி.டி.டி: மாலை 6:30 - இரவு 7:30, 16 அக்டோபர் ’14

வரையறுக்கப்பட்ட இடங்கள் !! வலதுபுறத்தில் உள்ள படிவத்தை பூர்த்தி செய்து இன்று உங்கள் ஸ்லாட்டை முன்பதிவு செய்யுங்கள்.



அனைவருக்கும் வணக்கம், நாங்கள் அக்டோபர் 18, 14 அன்று அப்பாச்சி ஸ்பார்க் மற்றும் ஸ்கலாவில் இலவச வெபினாரை நடத்துகிறோம். வெபினரின் தலைப்பு ‘அப்பாச்சி தீப்பொறி மற்றும் ஸ்கலாவுடன் பெரிய தரவு செயலாக்கம்’ . இந்த வெபினாரில், அப்பாச்சி ஸ்பார்க் மற்றும் ஸ்கலா தொடர்பான அத்தியாவசிய தலைப்புகள் விவாதிக்கப்படும். எந்தவொரு கேள்விகள் அல்லது சந்தேகங்கள் அமர்வின் போது தெளிவுபடுத்தப்படலாம்.

மறைக்க வேண்டிய தலைப்புகள்:

  • பெரிய தரவு என்றால் என்ன?
  • தீப்பொறி என்றால் என்ன?
  • ஏன் தீப்பொறி?
  • தீப்பொறி சுற்றுச்சூழல் அமைப்பு
  • ஸ்கலா பற்றிய குறிப்பு
  • ஏன் ஸ்கலா?
  • ஹலோ ஸ்பார்க் - கைகளில்

ஏன் தீப்பொறி?

அப்பாச்சி ஸ்பார்க் என்பது ஹடூப் சமூகக் கிளஸ்டர்களுக்கான திறந்த மூல கிளஸ்டர் கம்ப்யூட்டிங் கட்டமைப்பாகும். இது ஒப்பிடமுடியாத வேகம், பயன்பாட்டின் எளிமை மற்றும் அதிநவீன பகுப்பாய்வுகளுடன் பெரிய அளவிலான தரவுகளுக்கான சிறந்த தரவு பகுப்பாய்வு மற்றும் செயலாக்க இயந்திரங்களில் ஒன்றாக இருக்க தகுதி பெறுகிறது. அப்பாச்சி ஸ்பார்க்கை செயல்பாட்டு மற்றும் புலனாய்வு பகுப்பாய்வுகளுக்கு குறுக்குவழியாக மாற்றும் நன்மைகள் மற்றும் அம்சங்கள் பின்வருமாறு:

  • ஸ்பார்க் மீது உருவாக்கப்பட்ட நிரல்கள் ஹடூப் மேப்ரூட்ஸில் உருவாக்கப்பட்டதை விட 100 மடங்கு வேகமாக இயங்கும்.
  • ஸ்பார்க் 80 உயர் மட்ட ஆபரேட்டர்களை தொகுக்கிறது.
  • ஸ்பார்க் ஸ்ட்ரீமிங் நிகழ்நேர தரவு செயலாக்கத்தை செயல்படுத்துகிறது.
  • வரைபட எக்ஸ் என்பது வரைகலை கணக்கீடுகளுக்கான நூலகமாகும்.
  • MLib என்பது ஸ்பார்க்கின் இயந்திர கற்றல் நூலகமாகும்.
  • முதன்மையாக ஸ்கலாவில் எழுதப்பட்ட, ஸ்பார்க் எந்த ஜே.வி.எம் அடிப்படையிலான செயல்பாட்டு அமைப்பிலும் உட்பொதிக்கப்படலாம், அதே நேரத்தில் REPL (படிக்க, மதிப்பீடு, செயல்முறை மற்றும் சுமை) வழியிலும் பயன்படுத்தலாம்.
  • இது சக்திவாய்ந்த கேச்சிங் மற்றும் வட்டு நிலைத்தன்மையைக் கொண்டுள்ளது.
  • SQL வினவல்களை திறமையாக கையாள ஸ்பார்க் SQL அனுமதிக்கிறது
  • அப்பாச்சி தீப்பொறியை அப்பாச்சி மெசோஸ், எச்டிஎஃப்எஸ், ஹெச்பேஸ், கசாண்ட்ரா, அல்லது ஸ்பார்க் கிளஸ்டர் மேலாளர் (ஸ்பார்க்கின் சொந்த கிளஸ்டர் மேலாளர்) மூலம் பயன்படுத்தலாம்.
  • ஸ்பார்க் ஸ்கலாவின் செயல்பாட்டு நடை மற்றும் சேகரிப்பு API ஐ உருவகப்படுத்துகிறது, இது ஸ்கலா மற்றும் ஜாவா டெவலப்பர்களுக்கு ஒரு சிறந்த நன்மை.

அப்பாச்சி தீப்பொறிக்கான தேவை:

அன்றைய தேவைகளான வேகம், அது செய்யக்கூடிய பல்வேறு பணிகள், நெகிழ்வுத்தன்மை, தரமான தரவு பகுப்பாய்வு, செலவு-செயல்திறன் போன்றவற்றின் அடிப்படையில் தொழிலுக்கு மகத்தான நன்மைகளை ஸ்பார்க் வழங்கி வருகிறது. அதிகரித்து வரும் வாடிக்கையாளர் தேவையை பூர்த்திசெய்து, ஐ.டி துறையில் உயர்நிலை, நிகழ்நேர பெரிய தரவு பகுப்பாய்வு தீர்வுகளை இது வழங்குகிறது. நிகழ்நேர பகுப்பாய்வு வணிக திறன்களைக் குவியலாகக் கொண்டுள்ளது. ஹடூப்புடனான அதன் பொருந்தக்கூடிய தன்மை நிறுவனங்கள் அதை விரைவாக ஏற்றுக்கொள்வது மிகவும் எளிதாக்குகிறது. ஸ்பார்க்-கற்ற வல்லுநர்கள் மற்றும் டெவலப்பர்களுக்கு ஒரு செங்குத்தான தேவை உள்ளது, ஏனெனில் இது ஒப்பீட்டளவில் புதிய தொழில்நுட்பமாகும், இது பெருகிய முறையில் ஏற்றுக்கொள்ளப்பட்டு வருகிறது.