ஒரு ஹடூப் கிளஸ்டரில் முனைகளை ஆணையிடுதல் மற்றும் நீக்குதல்

ஹடூப் கட்டமைப்பின் மிகவும் கவர்ச்சிகரமான அம்சங்களில் ஒன்று அதன் பொருட்கள் வன்பொருள் பயன்பாடு . இருப்பினும், இது ஒரு ஹடூப் கிளஸ்டரில் அடிக்கடி டேட்டாநோட் செயலிழப்புகளுக்கு வழிவகுக்கிறது. ஹடூப் கட்டமைப்பின் மற்றொரு குறிப்பிடத்தக்க அம்சம் தரவு அளவின் விரைவான வளர்ச்சிக்கு ஏற்ப அளவின் எளிமை . இந்த இரண்டு காரணங்களால், ஒரு ஹடூப் நிர்வாகியின் மிகவும் பொதுவான பணி ஒன்று தரகு (சேர்) மற்றும் பணிநீக்கம் (அகற்று) ஒரு ஹடூப் கிளஸ்டரில் தரவு முனைகள்.

power bi vs tableau 2016

ஒரு ஹடூப் கிளஸ்டரில் முனைகளை ஆணையிடுதல் மற்றும் நீக்குதல்:

மேலே உள்ள வரைபடம், கிளஸ்டரில் டேட்டாநோடை நீக்குவதற்கான படிப்படியான செயல்முறையைக் காட்டுகிறது.

முதல் பணி ‘ விலக்கு ‘இருவருக்கும் கோப்புகள் HDFS (hdfs-site.xml) மற்றும் வரைபடம் (mapred-site.xml).

‘விலக்கு’ கோப்பு:

• வேலை தேடுபவருக்கு வேலைநிறுத்தக்காரரால் விலக்கப்பட வேண்டிய ஹோஸ்ட்களின் பட்டியலைக் கொண்டுள்ளது. மதிப்பு காலியாக இருந்தால், எந்த ஹோஸ்ட்களும் விலக்கப்படவில்லை.
• நேமனோடிற்கு பெயர் முனையுடன் இணைக்க அனுமதிக்கப்படாத ஹோஸ்ட்களின் பட்டியலைக் கொண்டுள்ளது.

Hdfs-site.xml மற்றும் mapred-site.xml இல் உள்ள கோப்பை விலக்குவதற்கான மாதிரி உள்ளமைவு இங்கே:

hdfs-site.xml

dfs.hosts.exclude
/ home / hadoop / விலக்குகிறது
உண்மை

mapred-site.xml

mapred.hosts.exclude
/ home / hadoop / விலக்குகிறது
உண்மை

குறிப்பு: கோப்புகளின் முழு பாதை பெயர் குறிப்பிடப்பட வேண்டும்.

இதேபோல், எங்களிடம் ‘அடங்கும்’ கோப்புகள் உள்ளன:

• வேலை தேடுபவருக்கு ஜாப் டிராக்கருடன் இணைக்கக்கூடிய முனைகளின் பட்டியலைக் கொண்டுள்ளது. மதிப்பு காலியாக இருந்தால், எல்லா ஹோஸ்ட்களும் அனுமதிக்கப்படுகின்றன.
• நேமனோடிற்கு பெயர் முனையுடன் இணைக்க அனுமதிக்கப்பட்ட ஹோஸ்ட்களின் பட்டியலைக் கொண்டுள்ளது. மதிப்பு காலியாக இருந்தால், எல்லா ஹோஸ்ட்களும் அனுமதிக்கப்படுகின்றன.

தி ‘ dfsadmin ’மற்றும்‘ mradmin புதிய கட்டத்தைப் பற்றி அவர்களுக்குத் தெரியப்படுத்த, கட்டளைகள் மாற்றங்களுடன் கட்டமைப்பை புதுப்பிக்கின்றன.

தி ‘ அடிமைகள் முதன்மை சேவையகத்தில் உள்ள கோப்பில் அனைத்து தரவு முனைகளின் பட்டியலும் உள்ளது. எதிர்கால ஹடூப் டீமான் தொடக்க / நிறுத்தத்தில் ஏதேனும் சிக்கல்கள் இருப்பதை உறுதி செய்ய இது புதுப்பிக்கப்பட வேண்டும்.

தரவு முனை கமிஷன் செயல்பாட்டின் முக்கியமான படி கிளஸ்டர் பேலன்சரை இயக்குவது.

> ஹடூப் பேலன்சர்-த்ரெஷோல்ட் 40

இருப்பு பழைய முனைகளிலிருந்து புதிதாக நியமிக்கப்பட்ட முனைகளுக்கு தொகுதி தரவை நகலெடுப்பதன் மூலம் தரவு முனைகளில் ஒரு குறிப்பிட்ட வாசலுக்கு சமநிலையை வழங்க முயற்சிக்கிறது.

எனவே, இதை நீங்கள் செய்ய முடியும் - ஆணையிடும் மற்றும் களைவது ஒரு ஹடூப் கிளஸ்டரில் உள்ள முனைகள்.

எங்களுக்கு ஒரு கேள்வி கிடைத்ததா? கருத்துகள் பிரிவில் இதைக் குறிப்பிடவும், நாங்கள் உங்களைத் தொடர்புகொள்வோம்.

தொடர்புடைய இணைப்புகள்: