लैंज़ोस एल्गोरिदम

From Vigyanwiki
Revision as of 13:22, 24 July 2023 by alpha>Indicwiki (Created page with "{{Short description|Numerical eigenvalue calculation}} {{for|the null space-finding algorithm|block Lanczos algorithm}} {{for|the interpolation method|Lanczos resampling}} {{f...")
(diff) ← Older revision | Latest revision (diff) | Newer revision → (diff)

लैंज़ोस एल्गोरिदम कॉर्नेलियस लैंज़ोस द्वारा तैयार की गई एक पुनरावृत्तीय विधि है जो खोजने के लिए शक्ति पुनरावृत्ति का एक अनुकूलन है सबसे उपयोगी (अति उच्चतम/निम्नतम की ओर रुझान) eigenvalues ​​​​और eigenvectors हर्मिटियन मैट्रिक्स, कहाँ अक्सर होता है लेकिन जरूरी नहीं कि उससे बहुत छोटा हो .[1] यद्यपि सैद्धांतिक रूप से कम्प्यूटेशनल रूप से कुशल, प्रारंभिक रूप से तैयार की गई विधि अपनी संख्यात्मक स्थिरता के कारण उपयोगी नहीं थी।

1970 में, ओजाल्वो और न्यूमैन ने दिखाया कि विधि को संख्यात्मक रूप से स्थिर कैसे बनाया जाए और इसे गतिशील लोडिंग के अधीन बहुत बड़ी इंजीनियरिंग संरचनाओं के समाधान में लागू किया जाए।[2] यह लैंज़ोस वैक्टर को शुद्ध करने के लिए एक विधि का उपयोग करके हासिल किया गया था (यानी प्रत्येक नए जेनरेट किए गए वेक्टर को पहले से जेनरेट किए गए सभी के साथ बार-बार पुन: व्यवस्थित करके)[2]सटीकता की किसी भी डिग्री तक, जब प्रदर्शन नहीं किया गया, तो वैक्टरों की एक श्रृंखला उत्पन्न हुई जो सबसे कम प्राकृतिक आवृत्तियों से जुड़े वैक्टरों द्वारा अत्यधिक दूषित थीं।

अपने मूल काम में, इन लेखकों ने यह भी सुझाव दिया कि शुरुआती वेक्टर का चयन कैसे करें (यानी शुरुआती वेक्टर के प्रत्येक तत्व का चयन करने के लिए यादृच्छिक संख्या जेनरेटर का उपयोग करें) और निर्धारण के लिए अनुभवजन्य रूप से निर्धारित विधि का सुझाव दिया , सदिशों की कम संख्या (अर्थात इसे वांछित सटीक eigenvalues ​​​​की संख्या का लगभग 1.5 गुना चुना जाना चाहिए)। इसके तुरंत बाद उनके काम का अनुसरण पेगे ने किया, जिन्होंने एक त्रुटि विश्लेषण भी प्रदान किया।[3][4] 1988 में, ओजाल्वो ने इस एल्गोरिदम का अधिक विस्तृत इतिहास और एक कुशल आइगेनवैल्यू त्रुटि परीक्षण तैयार किया।[5]


एल्गोरिदम

एक हर्मिटियन मैट्रिक्स इनपुट करें आकार का , और वैकल्पिक रूप से कई पुनरावृत्तियाँ (डिफ़ॉल्ट के रूप में, चलो ).
  • कड़ाई से बोलते हुए, एल्गोरिदम को स्पष्ट मैट्रिक्स तक पहुंच की आवश्यकता नहीं है, बल्कि केवल एक फ़ंक्शन की आवश्यकता है जो एक मनमाना वेक्टर द्वारा मैट्रिक्स के उत्पाद की गणना करता है। इस फ़ंक्शन को अधिक से अधिक कॉल किया जाता है बार.
आउटपुट ए आव्यूह रूढ़िवादिता कॉलम और एक त्रिविकर्ण मैट्रिक्स वास्तविक सममित मैट्रिक्स के साथ आकार का . अगर , तब एकात्मक मैट्रिक्स है, और .
चेतावनी लैंज़ोस पुनरावृत्ति संख्यात्मक अस्थिरता से ग्रस्त है। गैर-सटीक अंकगणित में निष्पादित होने पर, परिणामों की वैधता सुनिश्चित करने के लिए अतिरिक्त उपाय (जैसा कि बाद के अनुभागों में बताया गया है) किए जाने चाहिए।
  1. होने देना यूक्लिडियन मानदंड के साथ एक मनमाना वेक्टर बनें .
  2. संक्षिप्त प्रारंभिक पुनरावृत्ति चरण:
    1. होने देना .
    2. होने देना .
    3. होने देना .
  3. के लिए करना:
    1. होने देना (यूक्लिडियन मानदंड भी)।
    2. अगर , तो करने दें ,
      अन्यथा इस रूप में चुनें यूक्लिडियन मानदंड के साथ एक मनमाना वेक्टर यह सभी के लिए ओर्थोगोनल है .
    3. होने देना .
    4. होने देना .
    5. होने देना .
  4. होने देना कॉलम के साथ मैट्रिक्स बनें . होने देना .
टिप्पणी के लिए .

पुनरावृत्ति प्रक्रिया को लिखने के सैद्धांतिक रूप से चार तरीके हैं। पेगे और अन्य कार्यों से पता चलता है कि संचालन का उपरोक्त क्रम संख्यात्मक रूप से सबसे स्थिर है।[6][7] व्यवहार में प्रारंभिक वेक्टर प्रक्रिया के एक अन्य तर्क के रूप में लिया जा सकता है और संख्यात्मक अशुद्धि के संकेतकों को अतिरिक्त लूप समाप्ति शर्तों के रूप में शामिल किया जा रहा है।

मैट्रिक्स-वेक्टर गुणन की गणना न करते हुए, प्रत्येक पुनरावृत्ति करता है अंकगणितीय परिचालन. मैट्रिक्स-वेक्टर गुणन किया जा सकता है अंकगणितीय संक्रियाएँ जहाँ एक पंक्ति में शून्येतर तत्वों की औसत संख्या है। कुल जटिलता इस प्रकार है , या अगर ; लैंज़ोस एल्गोरिदम विरल मैट्रिक्स के लिए बहुत तेज़ हो सकता है। संख्यात्मक स्थिरता में सुधार के लिए योजनाओं को आम तौर पर इस उच्च प्रदर्शन के आधार पर आंका जाता है।

वैक्टर लैंज़ोस वैक्टर कहलाते हैं। सदिश के बाद उपयोग नहीं किया जाता है गणना की जाती है, और वेक्टर के बाद उपयोग नहीं किया जाता है गणना की जाती है. इसलिए कोई भी तीनों के लिए एक ही भंडारण का उपयोग कर सकता है। इसी तरह, यदि केवल त्रिविकर्ण मैट्रिक्स मांगा जाता है, तो कच्चे पुनरावर्तन की आवश्यकता नहीं होती गणना करने के बाद , हालाँकि संख्यात्मक स्थिरता में सुधार के लिए कुछ योजनाओं को बाद में इसकी आवश्यकता होगी। कभी-कभी बाद के लैंज़ोस वैक्टर की पुनर्गणना की जाती है जब जरूरत है।

eigenproblem के लिए आवेदन

लैंज़ोस एल्गोरिदम को अक्सर मैट्रिक्स के आइगेनवैल्यू और आइजेनवेक्टर खोजने के संदर्भ में लाया जाता है, लेकिन जबकि एक सामान्य मैट्रिक्स विकर्णीकरण आइजेनवेक्टर और आइगेनवैल्यू को निरीक्षण से स्पष्ट कर देगा, वही लैंज़ोस एल्गोरिदम द्वारा किए गए ट्राइडिएगोनलाइज़ेशन के लिए सच नहीं है; एक भी eigenvalue या eigenvector की गणना करने के लिए गैर-तुच्छ अतिरिक्त चरणों की आवश्यकता होती है। फिर भी, लैंज़ोस एल्गोरिथ्म को लागू करना अक्सर आइगेंडेकंपोजीशन की गणना में एक महत्वपूर्ण कदम है। अगर का एक प्रतिरूप है , और अगर ( का एक eigenvector है ) तब का संगत eigenvector है (तब से ). इस प्रकार लैंज़ोस एल्गोरिथ्म eigendecomposition समस्या को बदल देता है eigendecomposition समस्या के लिए .

  1. त्रिविकर्ण मैट्रिक्स के लिए, कई विशिष्ट एल्गोरिदम मौजूद हैं, जो अक्सर सामान्य-उद्देश्य एल्गोरिदम की तुलना में बेहतर कम्प्यूटेशनल जटिलता के साथ होते हैं। उदाहरण के लिए, यदि एक त्रिविकर्ण सममित मैट्रिक्स तब:
    • त्रिविकर्ण मैट्रिक्स#निर्धारक विशेषता बहुपद की गणना करने की अनुमति देता है संचालन, और एक बिंदु पर इसका मूल्यांकन करना परिचालन.
    • फूट डालो और जीतो eigenvalue एल्गोरिदम का उपयोग संपूर्ण eigendecomposition की गणना करने के लिए किया जा सकता है में परिचालन.
    • फास्ट मल्टीपोल विधि[8] सभी eigenvalues ​​​​की गणना बस में कर सकते हैं परिचालन.
  2. कुछ सामान्य eigendecomposition एल्गोरिदम, विशेष रूप से QR एल्गोरिदम, सामान्य मैट्रिक्स की तुलना में त्रिविकर्ण मैट्रिक्स के लिए तेजी से अभिसरण करने के लिए जाने जाते हैं। त्रिविकर्ण QR की स्पर्शोन्मुख जटिलता है ठीक वैसे ही जैसे कि फूट डालो और जीतो एल्गोरिथ्म के लिए (हालाँकि स्थिर कारक भिन्न हो सकता है); चूँकि eigenvectors एक साथ हैं तत्व, यह स्पर्शोन्मुख रूप से इष्टतम है।
  3. यहां तक ​​कि एल्गोरिदम जिनकी अभिसरण दरें एकात्मक परिवर्तनों से अप्रभावित हैं, जैसे कि शक्ति विधि और व्युत्क्रम पुनरावृत्ति, त्रिविकर्ण मैट्रिक्स पर लागू होने से निम्न-स्तरीय प्रदर्शन लाभ का आनंद ले सकते हैं मूल मैट्रिक्स के बजाय . तब से अत्यधिक पूर्वानुमानित स्थितियों में सभी गैर-शून्य तत्वों के साथ बहुत विरल है, यह कैश (कंप्यूटिंग) की तुलना में उत्कृष्ट प्रदर्शन के साथ कॉम्पैक्ट स्टोरेज की अनुमति देता है। वैसे ही, जबकि सभी eigenvectors और eigenvalues ​​​​वास्तविक के साथ एक वास्तविक संख्या मैट्रिक्स है सामान्य तौर पर इसमें जटिल तत्व और आइजनवेक्टर हो सकते हैं, इसलिए वास्तविक अंकगणित आइजनवेक्टर और आइजनवेक्टर खोजने के लिए पर्याप्त है .
  4. अगर बहुत बड़ा है, फिर घट रहा है ताकि प्रबंधनीय आकार का होने पर भी यह अधिक चरम आइजनवैल्यू और आइजेनवेक्टर खोजने की अनुमति देगा ; में क्षेत्र में, लैंज़ोस एल्गोरिथ्म को हर्मिटियन मैट्रिसेस के लिए एक हानिपूर्ण संपीड़न योजना के रूप में देखा जा सकता है, जो चरम स्वदेशी मूल्यों को संरक्षित करने पर जोर देता है।

विरल मैट्रिक्स के लिए अच्छे प्रदर्शन का संयोजन और कई (सभी की गणना किए बिना) आइगेनवैल्यू की गणना करने की क्षमता लैंज़ोस एल्गोरिदम का उपयोग करने का चयन करने के मुख्य कारण हैं।

त्रिविकर्णीकरण का अनुप्रयोग

यद्यपि ईजेनप्रॉब्लम अक्सर लैंज़ोस एल्गोरिदम को लागू करने के लिए प्रेरणा होती है, एल्गोरिदम मुख्य रूप से जो ऑपरेशन करता है वह एक मैट्रिक्स का त्रिविकर्णीकरण होता है, जिसके लिए 1950 के दशक से संख्यात्मक रूप से स्थिर हाउसहोल्डर परिवर्तनों का समर्थन किया गया है। 1960 के दशक के दौरान लैंज़ोस एल्गोरिदम की उपेक्षा की गई थी। कनियल-पेगे अभिसरण सिद्धांत और संख्यात्मक अस्थिरता को रोकने के तरीकों के विकास से इसमें रुचि फिर से जीवंत हो गई, लेकिन लैंज़ोस एल्गोरिदम वैकल्पिक एल्गोरिदम बना हुआ है जिसे कोई केवल तभी आज़माता है जब हाउसहोल्डर संतोषजनक नहीं होता है।[9] जिन पहलुओं में दोनों एल्गोरिदम भिन्न हैं उनमें शामिल हैं:

  • लैंज़ोस फायदा उठाता है एक विरल मैट्रिक्स होने के नाते, जबकि हाउसहोल्डर ऐसा नहीं करता है, और विरल मैट्रिक्स #रिड्यूसिंग फिल-इन|फिल-इन उत्पन्न करेगा।
  • लैंज़ोस मूल मैट्रिक्स के साथ काम करता है (और इसे केवल अंतर्निहित रूप से ज्ञात होने में कोई समस्या नहीं है), जबकि कच्चा हाउसहोल्डर गणना के दौरान मैट्रिक्स को संशोधित करना चाहता है (हालांकि इससे बचा जा सकता है)।
  • लैंज़ोस एल्गोरिथ्म का प्रत्येक पुनरावृत्ति अंतिम परिवर्तन मैट्रिक्स का एक और कॉलम तैयार करता है , जबकि हाउसहोल्डर का एक पुनरावृत्ति एकात्मक गुणनखंडन में एक और कारक उत्पन्न करता है का . हालाँकि, प्रत्येक कारक एक एकल वेक्टर द्वारा निर्धारित होता है, इसलिए भंडारण आवश्यकताएँ दोनों एल्गोरिदम के लिए समान हैं, और में गणना की जा सकती है समय।
  • गृहस्वामी संख्यात्मक रूप से स्थिर है, जबकि कच्चा लैंज़ोस नहीं है।
  • लैंज़ोस अत्यधिक समानांतर है, केवल के साथ सिंक्रोनाइज़ेशन के बिंदु (कंप्यूटर विज्ञान) (की गणना) और ). गृहस्थ कम समानांतर होता है, जिसका एक क्रम होता है अदिश मात्राओं की गणना की जाती है जिनमें से प्रत्येक अनुक्रम में पिछली मात्रा पर निर्भर करती है।

एल्गोरिदम की व्युत्पत्ति

तर्क की कई पंक्तियाँ हैं जो लैंज़ोस एल्गोरिदम की ओर ले जाती हैं।

एक अधिक भविष्य शक्ति विधि

सबसे बड़े परिमाण के आइजेनवैल्यू और मैट्रिक्स के संबंधित आइजेनवेक्टर को खोजने की शक्ति विधि मोटे तौर पर है

  1. एक यादृच्छिक वेक्टर चुनें .
  2. के लिए (के निर्देश तक एकत्रित हो गया है) करें:
    1. होने देना
    2. होने देना
  • बड़े में सीमा, सबसे बड़े परिमाण के आइगेनवैल्यू के अनुरूप मानक आइजेनवेक्टर के पास पहुंचता है।

इस पद्धति के खिलाफ जो आलोचना की जा सकती है वह यह है कि यह बेकार है: इसमें मैट्रिक्स से जानकारी निकालने में बहुत सारा काम (चरण 2.1 में मैट्रिक्स-वेक्टर उत्पाद) खर्च होता है , लेकिन केवल अंतिम परिणाम पर ही ध्यान देता है; कार्यान्वयन आम तौर पर सभी वैक्टरों के लिए समान चर का उपयोग करते हैं , प्रत्येक नए पुनरावृत्ति में पिछले वाले के परिणामों को अधिलेखित कर दिया जाता है। इसके बजाय सभी मध्यवर्ती परिणामों को रखना और डेटा को व्यवस्थित करना वांछनीय हो सकता है।

जानकारी का एक टुकड़ा जो तुच्छ रूप से वैक्टर से उपलब्ध है क्रायलोव उपस्थानों की एक श्रृंखला है। यह बताने का एक तरीका कि एल्गोरिथम में सेट शामिल किए बिना यह दावा करना है कि यह गणना करता है

उपसमुच्चय के एक आधार का ऐसा है कि हरएक के लिए और सभी

यह तुच्छ रूप से संतुष्ट है जब तक कि से रैखिक रूप से स्वतंत्र है (और यदि ऐसी कोई निर्भरता है तो कोई इसे चुनकर अनुक्रम जारी रख सकता है एक मनमाना वेक्टर रैखिक रूप से स्वतंत्र है ). एक आधार जिसमें शामिल है हालाँकि, वेक्टर के संख्यात्मक रूप से खराब होने की संभावना है, क्योंकि वेक्टर का यह क्रम डिजाइन के अनुसार एक आइजेनवेक्टर में परिवर्तित होने के लिए है। . इससे बचने के लिए, कोई व्यक्ति शक्ति पुनरावृत्ति को ग्राम-श्मिट प्रक्रिया के साथ जोड़ सकता है, इसके बजाय इन क्रायलोव उप-स्थानों का एक ऑर्थोनॉर्मल आधार तैयार कर सकता है।

  1. एक यादृच्छिक वेक्टर चुनें यूक्लिडियन मानदंड का . होने देना .
  2. के लिए करना:
    1. होने देना .
    2. सभी के लिए होने देना . (ये के निर्देशांक हैं आधार वैक्टर के संबंध में .)
    3. होने देना . (के घटक को रद्द करें यह है .)
    4. अगर तो करने दें और ,
      अन्यथा इस रूप में चुनें यूक्लिडियन मानदंड का एक मनमाना वेक्टर यह सभी के लिए ओर्थोगोनल है .

शक्ति पुनरावृत्ति वैक्टर के बीच संबंध और ऑर्थोगोनल वैक्टर यह है कि

.

यहाँ यह देखा जा सकता है कि वास्तव में हमें इसकी आवश्यकता नहीं है इनकी गणना करने के लिए वैक्टर , क्योंकि और इसलिए बीच का अंतर और में है , जिसे ऑर्थोगोनलाइज़ेशन प्रक्रिया द्वारा रद्द कर दिया गया है। इस प्रकार क्रायलोव उप-स्थानों की श्रृंखला के लिए समान आधार की गणना की जाती है

  1. एक यादृच्छिक वेक्टर चुनें यूक्लिडियन मानदंड का .
  2. के लिए करना:
    1. होने देना .
    2. सभी के लिए होने देना .
    3. होने देना .
    4. होने देना .
    5. अगर तो करने दें ,
      अन्यथा इस रूप में चुनें यूक्लिडियन मानदंड का एक मनमाना वेक्टर यह सभी के लिए ओर्थोगोनल है .

एक प्राथमिकता गुणांक संतुष्ट करना

सभी के लिए ;

मानहानि थोड़ा अजीब लग सकता है, लेकिन सामान्य पैटर्न पर फिट बैठता है तब से

क्योंकि शक्ति पुनरावृत्ति सदिश जो इस पुनरावर्ती संतुष्टि से हटा दिए गए थे सदिश और गुणांक से पर्याप्त जानकारी शामिल है वह सब गणना की जा सकती है, इसलिए वैक्टर बदलने से कुछ भी नुकसान नहीं हुआ। (वास्तव में, यह पता चला है कि यहां एकत्र किया गया डेटा पावर विधि में समान संख्या में पुनरावृत्तियों से प्राप्त होने वाले सबसे बड़े आइगेनवैल्यू का काफी बेहतर अनुमान देता है, हालांकि इस बिंदु पर यह स्पष्ट नहीं है।)

यह अंतिम प्रक्रिया अर्नोल्डी पुनरावृत्ति है। लैंज़ोस एल्गोरिथ्म तब सरलीकरण के रूप में सामने आता है जो गणना के चरणों को समाप्त करने से प्राप्त होता है जो तब तुच्छ हो जाते हैं हर्मिटियन है—विशेष रूप से अधिकांश गुणांक शून्य हो जाते हैं।

प्राथमिक रूप से, यदि तो हर्मिटियन है

के लिए हम वह जानते हैं , और तबसे निर्माण द्वारा इस उप-स्थान के लिए ऑर्थोगोनल है, यह आंतरिक उत्पाद शून्य होना चाहिए। (यह अनिवार्य रूप से यही कारण है कि ऑर्थोगोनल बहुपदों के अनुक्रमों को हमेशा एक ऑर्थोगोनल बहुपद#पुनरावृत्ति संबंध|तीन-अवधि वाला पुनरावृत्ति संबंध दिया जा सकता है।) एक मिलता है

चूँकि वेक्टर का आदर्श होने के कारण उत्तरार्द्ध वास्तविक है। के लिए एक मिलता है

मतलब ये भी असली है.

अधिक संक्षेप में, यदि स्तंभों वाला मैट्रिक्स है फिर संख्याएँ मैट्रिक्स के तत्वों के रूप में पहचाना जा सकता है , और के लिए गणित का सवाल हेसेनबर्ग मैट्रिक्स है. तब से

गणित का सवाल हर्मिटियन है. इसका अर्थ यह है कि यह हेसेनबर्ग से भी निचला है, इसलिए यह वास्तव में त्रिविजात्मक होना चाहिए। हर्मिटियन होने के कारण, इसका मुख्य विकर्ण वास्तविक है, और चूंकि इसका पहला उपविकर्ण निर्माण से वास्तविक है, इसलिए इसके पहले सुपरविकर्ण के लिए भी यही सच है। इसलिए, एक वास्तविक, सममित मैट्रिक्स है - मैट्रिक्स लैंज़ोस एल्गोरिथम विनिर्देश के।

चरम eigenvalues ​​​​का एक साथ सन्निकटन

हर्मिटियन मैट्रिक्स के आइजेनवेक्टरों को चिह्नित करने का एक तरीका रेले भागफल के स्थिर बिंदुओं के रूप में है

विशेष रूप से, सबसे बड़ा eigenvalue का वैश्विक अधिकतम है और सबसे छोटा eigenvalue का वैश्विक न्यूनतम है .

निम्न-आयामी उप-स्थान के भीतर का अधिकतम का पता लगाना संभव हो सकता है और न्यूनतम का . बढ़ती हुई शृंखला के लिए इसे दोहराते हुए वैक्टर के दो अनुक्रम उत्पन्न करता है: और ऐसा है कि और

फिर प्रश्न उठता है कि उप-स्थानों का चयन कैसे किया जाए ताकि ये क्रम इष्टतम दर पर अभिसरित हों।

से , इष्टतम दिशा जिसमें बड़े मूल्यों की तलाश की जा सके वह ढाल का है , और इसी तरह से छोटे मूल्यों की तलाश करने के लिए इष्टतम दिशा वह नकारात्मक प्रवणता का है . सामान्य रूप में

इसलिए मैट्रिक्स अंकगणित में गणना करने के लिए रुचि की दिशाएं काफी आसान हैं, लेकिन यदि कोई दोनों में सुधार करना चाहता है और फिर ध्यान में रखने के लिए दो नई दिशाएँ हैं: और तब से और रैखिक रूप से स्वतंत्र वैक्टर हो सकते हैं (वास्तव में, ऑर्थोगोनल के करीब हैं), कोई भी सामान्य रूप से उम्मीद नहीं कर सकता है और समानांतर होना. का आयाम बढ़ाना आवश्यक नहीं है द्वारा हर कदम पर अगर क्रायलोव उप-स्थान के रूप में लिया जाता है, क्योंकि तब सभी के लिए इस प्रकार विशेष रूप से दोनों के लिए और .

दूसरे शब्दों में, हम कुछ मनमाने प्रारंभिक वेक्टर से शुरुआत कर सकते हैं वेक्टर रिक्त स्थान का निर्माण करें

और फिर तलाश करो ऐसा है कि

के बाद से वें शक्ति विधि पुनरावृत्त से संबंधित यह इस प्रकार है कि उत्पादन करने के लिए एक पुनरावृत्ति और शक्ति विधि की तुलना में धीमी गति से अभिसरण नहीं किया जा सकता है, और दोनों eigenvalue चरम सीमाओं का अनुमान लगाकर अधिक हासिल किया जाएगा। अनुकूलन की उपसमस्या के लिए कुछ पर , लम्बवत आधार रखना सुविधाजनक है इस वेक्टर स्पेस के लिए. इस प्रकार हम फिर से क्रायलोव उप-स्थानों के अनुक्रम के लिए ऐसे आधार की पुनरावृत्तीय गणना करने की समस्या की ओर अग्रसर हैं।

अभिसरण और अन्य गतिशीलता

एल्गोरिथ्म की गतिशीलता का विश्लेषण करते समय, eigenvalues ​​​​और eigenvectors लेना सुविधाजनक होता है जैसा कि दिया गया है, भले ही वे उपयोगकर्ता को स्पष्ट रूप से ज्ञात न हों। अंकन को ठीक करने के लिए, आइए आइगेनवैल्यू बनें (ये सभी जानते हैं कि ये वास्तविक हैं, और इस प्रकार ऑर्डर करना संभव है) और चलो eigenvectors का एक ऑर्थोनॉर्मल सेट बनें जैसे कि सभी के लिए .

प्रारंभिक लैंज़ोस वेक्टर के गुणांकों के लिए एक अंकन तय करना भी सुविधाजनक है इस eigenbasis के संबंध में; होने देना सभी के लिए , ताकि . एक आरंभिक सदिश कुछ eigencomponent के ख़त्म होने से संबंधित eigenvalue में अभिसरण में देरी होगी, और भले ही यह त्रुटि सीमा में एक स्थिर कारक के रूप में सामने आता है, कमी अवांछनीय बनी हुई है। लगातार इसकी चपेट में आने से बचने के लिए एक सामान्य तकनीक चुनना है पहले माध्य के साथ समान सामान्य वितरण के अनुसार तत्वों को यादृच्छिक रूप से खींचकर और फिर वेक्टर को मानक पर पुनः स्केल करें . पुनर्स्केलिंग से पहले, यह गुणांक का कारण बनता है समान सामान्य वितरण से स्वतंत्र सामान्य रूप से वितरित स्टोकेस्टिक चर भी होना चाहिए (क्योंकि निर्देशांक का परिवर्तन एकात्मक है), और वेक्टर को पुन: स्केल करने के बाद इकाई क्षेत्र पर एक समान वितरण (निरंतर) होगा . इससे उदाहरण के लिए संभावना को सीमित करना संभव हो जाता है .

तथ्य यह है कि लैंज़ोस एल्गोरिदम समन्वय-अज्ञेयवादी है - ऑपरेशन केवल वैक्टर के आंतरिक उत्पादों को देखते हैं, कभी भी वैक्टर के व्यक्तिगत तत्वों को नहीं देखते हैं - एल्गोरिदम को चलाने के लिए ज्ञात ईजेनस्ट्रक्चर के साथ उदाहरण बनाना आसान बनाता है: बनाना विकर्ण पर वांछित eigenvalues ​​​​के साथ एक विकर्ण मैट्रिक्स; जब तक आरंभिक वेक्टर पर्याप्त गैर-शून्य तत्व हैं, एल्गोरिथ्म एक सामान्य त्रिविकर्ण सममित मैट्रिक्स को आउटपुट करेगा .

कनिएल-पेगे अभिसरण सिद्धांत

बाद लैंज़ोस एल्गोरिदम के पुनरावृत्ति चरण, एक वास्तविक सममित मैट्रिक्स, जो उपरोक्त के समान है eigenvalues अभिसरण से मुख्यतः अभिसरण का तात्पर्य है को (और का सममित अभिसरण को ) जैसा बढ़ता है, और दूसरा कुछ सीमा का अभिसरण के eigenvalues ​​के उनके समकक्षों के लिए का . लैंज़ोस एल्गोरिदम के लिए अभिसरण अक्सर पावर पुनरावृत्ति एल्गोरिदम की तुलना में तेज़ परिमाण का आदेश होता है।[9]: 477 

के लिए सीमा रेले भागफल के चरम मूल्यों के रूप में eigenvalues ​​​​की उपरोक्त व्याख्या से आते हैं . तब से एक प्राथमिकता अधिकतम है कुल मिलाकर जबकि पर अधिकतम मात्र है -आयामी क्रायलोव उपस्थान, हम तुच्छ रूप से प्राप्त करते हैं . इसके विपरीत, कोई भी बिंदु उसमें क्रायलोव उपस्थान निचली सीमा प्रदान करता है के लिए , इसलिए यदि कोई बिंदु प्रदर्शित किया जा सकता है जिसके लिए छोटा है तो यह एक टाइट बाउंड प्रदान करता है .

आयाम क्रायलोव उपस्थान है

अतः इसके किसी भी तत्व को इस प्रकार व्यक्त किया जा सकता है कुछ बहुपद के लिए अधिकतम डिग्री का ; उस बहुपद के गुणांक केवल सदिशों के रैखिक संयोजन के गुणांक हैं . हम जो बहुपद चाहते हैं उसके वास्तविक गुणांक होंगे, लेकिन फिलहाल हमें जटिल गुणांकों की भी अनुमति देनी चाहिए, और हम लिखेंगे के सभी गुणांकों को सम्मिश्र संयुग्मन द्वारा प्राप्त बहुपद के लिए . क्रायलोव उप-स्थान के इस पैरामीट्रिज़ेशन में, हमारे पास है

अब के लिए अभिव्यक्ति का उपयोग करना eigenvectors के एक रैखिक संयोजन के रूप में, हमें मिलता है

और अधिक सामान्यतः
किसी भी बहुपद के लिए .

इस प्रकार

यहां अंश और हर के बीच एक महत्वपूर्ण अंतर यह है कि अंश में पद लुप्त हो जाता है, लेकिन हर में नहीं। इस प्रकार यदि कोई चुन सकता है पर बड़ा होना लेकिन अन्य सभी eigenvalues ​​​​पर छोटा होने पर, किसी को त्रुटि पर कड़ी पकड़ मिलेगी .

तब से की तुलना में कई अधिक स्वदेशी मान हैं गुणांक है, यह एक लंबा क्रम प्रतीत हो सकता है, लेकिन इसे पूरा करने का एक तरीका चेबीशेव बहुपद का उपयोग करना है। लिखना डिग्री के लिए पहली तरह का चेबीशेव बहुपद (जो संतुष्ट करता है सभी के लिए ), हमारे पास एक बहुपद है जो सीमा में रहता है ज्ञात अंतराल पर लेकिन इसके बाहर तेजी से बढ़ता है। तर्क के कुछ स्केलिंग के साथ, हम इसे छोड़कर सभी eigenvalues ​​​​को मैप कर सकते हैं में . होने देना

(यदि , इसके बजाय सबसे बड़े eigenvalue का उपयोग करें जो कि इससे बिल्कुल कम है ), फिर का अधिकतम मान के लिए है और न्यूनतम मूल्य है , इसलिए

आगे

मात्रा

(यानी, मैट्रिक्स के शेष स्पेक्ट्रम के व्यास के लिए पहले ईजेंगैप का अनुपात) इस प्रकार यहां अभिसरण दर के लिए महत्वपूर्ण महत्व है। लिख भी रहा हूँ

हम यह निष्कर्ष निकाल सकते हैं

इस प्रकार अभिसरण दर को मुख्य रूप से नियंत्रित किया जाता है , चूँकि यह सीमा एक कारक द्वारा सिकुड़ती है प्रत्येक अतिरिक्त पुनरावृत्ति के लिए.

तुलना के लिए, कोई इस बात पर विचार कर सकता है कि विद्युत विधि की अभिसरण दर किस प्रकार निर्भर करती है , लेकिन चूँकि शक्ति विधि मुख्य रूप से eigenvalues ​​​​के निरपेक्ष मूल्यों के बीच भागफल के प्रति संवेदनशील है, हमें इसकी आवश्यकता है बीच के ईगेंगैप के लिए और प्रमुख होना. उस बाधा के तहत, वह मामला जो शक्ति पद्धति को सबसे अधिक पसंद करता है , तो उस पर विचार करें। शक्ति विधि में देर से, पुनरावृत्ति वेक्टर:

[note 1]

जहां प्रत्येक नया पुनरावृत्ति प्रभावी ढंग से गुणा करता है -आयाम द्वारा

तब सबसे बड़े eigenvalue का अनुमान है

इसलिए लैंज़ोस एल्गोरिदम अभिसरण दर के लिए उपरोक्त सीमा की तुलना की जानी चाहिए

जो एक कारक से सिकुड़ता है प्रत्येक पुनरावृत्ति के लिए. इस प्रकार यह अंतर बीच में ही सिमट कर रह जाता है और . में क्षेत्र, बाद वाला अधिक पसंद है , और दोगुने बड़े ईजेंगैप के साथ पावर विधि की तरह प्रदर्शन करता है; एक उल्लेखनीय सुधार. हालाँकि, अधिक चुनौतीपूर्ण मामला यह है जिसमें ईजेंगैप पर और भी बड़ा सुधार है; वह क्षेत्र है जहां लैंज़ोस एल्गोरिदम अभिसरण-वार पावर विधि पर सबसे छोटा सुधार करता है।

संख्यात्मक स्थिरता

स्थिरता का मतलब है कि यदि छोटी-छोटी संख्यात्मक त्रुटियां पेश की जाती हैं और जमा हो जाती हैं तो एल्गोरिदम कितना प्रभावित होगा (यानी क्या यह मूल परिणाम के करीब अनुमानित परिणाम देगा)। राउंडऑफ़ वाले कंप्यूटर पर एल्गोरिदम को लागू करने की उपयोगिता का आकलन करने के लिए संख्यात्मक स्थिरता केंद्रीय मानदंड है।

लैंज़ोस एल्गोरिदम के लिए, यह साबित किया जा सकता है कि सटीक अंकगणित के साथ, वैक्टर का सेट एक ऑर्थोनॉर्मल आधार का निर्माण करता है, और हल किए गए eigenvalues/वेक्टर मूल मैट्रिक्स के अच्छे अनुमान हैं। हालाँकि, व्यवहार में (चूंकि गणना फ्लोटिंग पॉइंट अंकगणित में की जाती है जहां अशुद्धि अपरिहार्य है), ऑर्थोगोनैलिटी जल्दी से खो जाती है और कुछ मामलों में नया वेक्टर पहले से निर्मित सेट पर रैखिक रूप से निर्भर भी हो सकता है। परिणामस्वरूप, परिणामी त्रिविकर्ण मैट्रिक्स के कुछ eigenvalues ​​मूल मैट्रिक्स के सन्निकटन नहीं हो सकते हैं। इसलिए, लैंज़ोस एल्गोरिदम बहुत स्थिर नहीं है।

इस एल्गोरिदम के उपयोगकर्ताओं को उन नकली eigenvalues ​​​​को खोजने और हटाने में सक्षम होना चाहिए। लैंज़ोस एल्गोरिदम का व्यावहारिक कार्यान्वयन इस स्थिरता के मुद्दे से लड़ने के लिए तीन दिशाओं में जाता है:[6][7]

  1. रूढ़िवादिता के नुकसान को रोकें,
  2. आधार तैयार होने के बाद रूढ़िवादिता को पुनः प्राप्त करें।
  3. अच्छे और नकली सभी स्वदेशी मूल्यों की पहचान हो जाने के बाद, नकली लोगों को हटा दें।

भिन्नताएँ

लैंज़ोस एल्गोरिदम पर भिन्नताएं मौजूद हैं जहां शामिल वेक्टर वेक्टर के बजाय लंबे, संकीर्ण मैट्रिक्स हैं और सामान्यीकरण स्थिरांक छोटे वर्ग मैट्रिक्स हैं। इन्हें ब्लॉक लैंज़ोस एल्गोरिदम कहा जाता है और बड़ी संख्या में रजिस्टरों और लंबी मेमोरी-फ़ेच समय वाले कंप्यूटरों पर यह बहुत तेज़ हो सकता है।

लैंज़ोस एल्गोरिदम के कई कार्यान्वयन एक निश्चित संख्या में पुनरावृत्तियों के बाद पुनः आरंभ होते हैं। सबसे प्रभावशाली पुनः आरंभ की गई विविधताओं में से एक अंतर्निहित रूप से पुनः आरंभ की गई लैंज़ोस पद्धति है,[10] जिसे ARPACK में लागू किया गया है।[11] इसने कई अन्य पुनः आरंभित विविधताओं को जन्म दिया है जैसे कि लैंज़ोस बिडियागोनलाइज़ेशन को पुनः आरंभ किया गया।[12] एक और सफल पुनः प्रारंभ विविधता थिक-रीस्टार्ट लैंज़ोस विधि है,[13] जिसे टीआरएलएन नामक सॉफ्टवेयर पैकेज में लागू किया गया है।[14]


एक परिमित क्षेत्र पर शून्यस्थान

1995 में, पीटर मोंटगोमरी (गणितज्ञ) ने GF(2) पर एक बड़े विरल मैट्रिक्स के कर्नेल (मैट्रिक्स) के तत्वों को खोजने के लिए लैंज़ोस एल्गोरिदम पर आधारित एक एल्गोरिदम प्रकाशित किया; चूँकि परिमित क्षेत्रों में बड़े विरल मैट्रिक्स में रुचि रखने वाले लोगों का समूह और बड़ी स्वदेशी समस्याओं में रुचि रखने वाले लोगों का समूह शायद ही ओवरलैप होता है, इसे अक्सर अनुचित भ्रम पैदा किए बिना ब्लॉक लैंज़ो एल्गोरिदम भी कहा जाता है।[citation needed]

अनुप्रयोग

लैंज़ोस एल्गोरिदम बहुत आकर्षक हैं क्योंकि गुणा एकमात्र बड़े पैमाने का रैखिक ऑपरेशन है। चूंकि भारित-अवधि पाठ पुनर्प्राप्ति इंजन केवल इस ऑपरेशन को कार्यान्वित करते हैं, लैंज़ोस एल्गोरिदम को पाठ दस्तावेज़ों पर कुशलतापूर्वक लागू किया जा सकता है (अव्यक्त अर्थ अनुक्रमणिका देखें)। Eigenvectors बड़े पैमाने पर रैंकिंग विधियों के लिए भी महत्वपूर्ण हैं जैसे कि जॉन क्लेनबर्ग द्वारा विकसित HITS एल्गोरिदम, या Google द्वारा उपयोग किया जाने वाला पृष्ठ रैंक एल्गोरिदम।

लैंज़ोस एल्गोरिदम का उपयोग संघनित पदार्थ भौतिकी में दृढ़ता से सहसंबद्ध सामग्री के हैमिल्टनियन मैट्रिक्स को हल करने की एक विधि के रूप में भी किया जाता है,[15] साथ ही परमाणु भौतिकी में परमाणु शेल मॉडल कोड में भी।[16]


कार्यान्वयन

एनएजी न्यूमेरिकल लाइब्रेरी में कई रूटीन शामिल हैं[17] बड़े पैमाने पर रैखिक प्रणालियों और ईजेनसमस्याओं के समाधान के लिए जो लैंज़ोस एल्गोरिदम का उपयोग करते हैं।

MATLAB और GNU ऑक्टेव ARPACK बिल्ट-इन के साथ आते हैं। संग्रहीत और अंतर्निहित दोनों मैट्रिक्स का विश्लेषण eigs() फ़ंक्शन (Matlab/Octave) के माध्यम से किया जा सकता है।

इसी तरह, Python_(प्रोग्रामिंग_भाषा) में, SciPy पैकेज में scipy.sparse.linalg.eigsh है, जो ARPACK के SSEUPD और DSEUPD फ़ंक्शंस फ़ंक्शंस के लिए एक रैपर भी है जो इम्प्लिसिटली रीस्टार्टेड लैंक्ज़ोस विधि का उपयोग करता है।

लैंज़ोस एल्गोरिथ्म का एक मैटलैब कार्यान्वयन (सटीक मुद्दों पर ध्यान दें) गॉसियन बिलीफ प्रोपेगेशन मैटलैब पैकेज के एक भाग के रूप में उपलब्ध है। ग्राफलैब[18] सहयोगी फ़िल्टरिंग लाइब्रेरी में मल्टीकोर के लिए लैंज़ोस एल्गोरिदम (सी ++ में) के बड़े पैमाने पर समानांतर कार्यान्वयन शामिल है।

PRIMME लाइब्रेरी लैंज़ोस जैसा एल्गोरिदम भी लागू करती है।

टिप्पणियाँ

  1. The coefficients need not both be real, but the phase is of little importance. Nor need the composants for other eigenvectors have completely disappeared, but they shrink at least as fast as that for , so describes the worst case.


संदर्भ

  1. Lanczos, C. (1950). "रैखिक अंतर और अभिन्न ऑपरेटरों की eigenvalue समस्या के समाधान के लिए एक पुनरावृत्ति विधि" (PDF). Journal of Research of the National Bureau of Standards. 45 (4): 255–282. doi:10.6028/jres.045.026.
  2. 2.0 2.1 Ojalvo, I. U.; Newman, M. (1970). "स्वचालित मैट्रिक्स-कमी विधि द्वारा बड़ी संरचनाओं के कंपन मोड". AIAA Journal. 8 (7): 1234–1239. Bibcode:1970AIAAJ...8.1234N. doi:10.2514/3.5878.
  3. Paige, C. C. (1971). बहुत बड़े विरल आव्यूहों के eigenvalues ​​​​और eigenvectors की गणना (Ph.D. thesis). U. of London. OCLC 654214109. {{cite thesis}}: zero width space character in |title= at position 40 (help)
  4. Paige, C. C. (1972). "Eigenproblem के लिए लैंज़ोस विधि के कम्प्यूटेशनल वेरिएंट". J. Inst. Maths Applics. 10 (3): 373–381. doi:10.1093/imamat/10.3.373.
  5. Ojalvo, I. U. (1988). "Origins and advantages of Lanczos vectors for large dynamic systems". Proc. 6th Modal Analysis Conference (IMAC), Kissimmee, FL. pp. 489–494.
  6. 6.0 6.1 Cullum; Willoughby (1985). बड़े सममित आइगेनवैल्यू संगणना के लिए लैंज़ोस एल्गोरिदम. Vol. 1. ISBN 0-8176-3058-9.
  7. 7.0 7.1 Yousef Saad (1992-06-22). बड़ी स्वदेशी समस्याओं के लिए संख्यात्मक तरीके. ISBN 0-470-21820-7.
  8. Coakley, Ed S.; Rokhlin, Vladimir (2013). "वास्तविक सममित त्रिविकर्ण मैट्रिक्स के स्पेक्ट्रा की गणना के लिए एक तेज़ विभाजन और जीत एल्गोरिदम". Applied and Computational Harmonic Analysis. 34 (3): 379–414. doi:10.1016/j.acha.2012.06.003.
  9. 9.0 9.1 Golub, Gene H.; Van Loan, Charles F. (1996). मैट्रिक्स गणना (3. ed.). Baltimore: Johns Hopkins Univ. Press. ISBN 0-8018-5413-X.
  10. D. Calvetti; L. Reichel; D.C. Sorensen (1994). "बड़े सममित आइजेनवैल्यू समस्याओं के लिए एक अंतर्निहित रूप से पुनः आरंभ की गई लैंज़ोस विधि". Electronic Transactions on Numerical Analysis. 2: 1–21.
  11. R. B. Lehoucq; D. C. Sorensen; C. Yang (1998). ARPACK Users Guide: Solution of Large-Scale Eigenvalue Problems with Implicitly Restarted Arnoldi Methods. SIAM. doi:10.1137/1.9780898719628. ISBN 978-0-89871-407-4.
  12. E. Kokiopoulou; C. Bekas; E. Gallopoulos (2004). "अंतर्निहित रूप से पुनः आरंभ किए गए लैंज़ोस बिडियागोनलाइज़ेशन के साथ सबसे छोटे एकवचन त्रिक की गणना करना" (PDF). Appl. Numer. Math. 49: 39–61. doi:10.1016/j.apnum.2003.11.011.
  13. Kesheng Wu; Horst Simon (2000). "बड़े सममित आइगेनवैल्यू समस्याओं के लिए थिक-रीस्टार्ट लैंज़ोस विधि". SIAM Journal on Matrix Analysis and Applications. SIAM. 22 (2): 602–616. doi:10.1137/S0895479898334605.
  14. Kesheng Wu; Horst Simon (2001). "टीआरएलएन सॉफ्टवेयर पैकेज". Archived from the original on 2007-07-01. Retrieved 2007-06-30.
  15. Chen, HY; Atkinson, W.A.; Wortis, R. (July 2011). "Disorder-induced zero-bias anomaly in the Anderson-Hubbard model: Numerical and analytical calculations". Physical Review B. 84 (4): 045113. arXiv:1012.1031. Bibcode:2011PhRvB..84d5113C. doi:10.1103/PhysRevB.84.045113. S2CID 118722138.
  16. Shimizu, Noritaka (21 October 2013). "बड़े पैमाने पर समानांतर गणना के लिए परमाणु शेल-मॉडल कोड, "KSHELL"". arXiv:1310.5431 [nucl-th].
  17. The Numerical Algorithms Group. "Keyword Index: Lanczos". NAG Library Manual, Mark 23. Retrieved 2012-02-09.
  18. GraphLab Archived 2011-03-14 at the Wayback Machine


अग्रिम पठन