AI ஓவர்வியூக்களுக்குப் பிறகு புதிய தேடல் யதார்த்தம்

இணையம் என்பது இப்போது வெறும் லிங்க்குகளின் நூலகமாக இல்லாமல், பதில் சொல்லும் ஒரு மெஷினாக மாறிவருகிறது. பல தசாப்தங்களாக, சர்ச் இன்ஜின்கள் ஒரு இடைத்தரகராகவே செயல்பட்டன. அவை பயனர்களை இணையதளங்களுக்கு அழைத்துச் சென்று, தகவல்களைத் தேட உதவின. ஆனால் இப்போது, பயனர் கிளிக் செய்வதற்கு முன்பே அந்த இணையதளங்களின் தகவல்களைச் சுருக்கித் தந்துவிடுகின்றன. இந்த Zero-click search மாற்றம், கன்டென்ட் கிரியேட்டர்களுக்கும் பிளாட்ஃபார்ம்களுக்கும் இடையிலான பாரம்பரிய உறவை உடைத்துவிட்டது. பயனர்களுக்குத் தகவல் விரைவாகக் கிடைக்கிறது, ஆனால் அந்தத் தகவலை நம்பி இயங்கும் பப்ளிஷர்கள் தங்கள் டிராஃபிக்கை இழக்கிறார்கள். இது ஏதோ ஒரு சிறிய அல்காரிதம் அப்டேட் அல்ல; இணையத்தில் தகவல் பரவும் முறையையே மாற்றும் ஒரு அடிப்படை மாற்றம். உடனடி பதில்களுக்கு முக்கியத்துவம் தரும் ‘ஆன்சர் இன்ஜின்கள்’ (answer engines) உருவாகி வருகின்றன. இந்த மாற்றம், பெரிய மீடியா நிறுவனங்கள் முதல் சிறிய பிளாக்கர்கள் வரை அனைவரும் தங்கள் வெற்றியை எப்படி வரையறுக்கிறார்கள் என்பதை மறுபரிசீலனை செய்ய வைக்கிறது. உங்கள் கட்டுரையின் சுருக்கத்தை சர்ச் பக்கத்திலேயே பயனர் படித்துவிட்டால், அவர்கள் உங்கள் தளத்திற்கு வர வாய்ப்பில்லை. ஆனால், அந்தச் சுருக்கம் உருவாவதற்கு உங்கள் தகவல்தான் அடிப்படை. இந்த முரண்பாடுதான் அடுத்த தசாப்தத்தின் இணையத்தை வரையறுக்கப்போகிறது.

இந்த ஓவர்வியூக்களுக்குப் பின்னால் இருப்பது ‘ஜெனரேட்டிவ் சிந்தசிஸ்’ (Generative synthesis) தொழில்நுட்பம். கீவேர்டுகளை மட்டும் தேடாமல், பெரிய லாங்குவேஜ் மாடல்களைப் பயன்படுத்தி டாப் ரேங்கிங் பக்கங்களின் கன்டென்ட்டை இந்த சிஸ்டம் வாசிக்கிறது. பிறகு, அந்தத் தகவலை வைத்து நேரடியாகப் பதில் அளிக்கும் ஒரு பத்தியை உருவாக்குகிறது. இது ‘Retrieval-Augmented Generation’ முறையைச் சார்ந்தது. AI இணையத்திலிருந்து தொடர்புடைய தரவுகளை எடுத்து, அதை வைத்துப் பதிலை உருவாக்குகிறது. இது சாதாரண சாட்பாட்களில் இருந்து மாறுபட்டது, ஏனெனில் இது நிகழ்நேர இணைய முடிவுகளை அடிப்படையாகக் கொண்டது. ஆனால், பயனருக்குக் கிடைக்கும் முடிவு ஒன்றுதான்: அவர்கள் சர்ச் பக்கத்திலேயே தங்கிவிடுகிறார்கள். இந்தத் தொழில்நுட்பம் தகவலைத் தேடுவது மட்டுமல்ல, அதை விளக்கவும் செய்கிறது. இது பொருட்களை ஒப்பிட, சிக்கலான மருத்துவ ஆலோசனைகளைச் சுருக்க அல்லது சமையல் குறிப்புகளைப் படி வாரியாகத் தர உதவுகிறது. பயனர்கள் பல டேப்களைத் திறக்கும் சிரமத்தைக் குறைக்கவே இந்த சிஸ்டம் வடிவமைக்கப்பட்டுள்ளது. சர்ச் இன்ஜின்கள் இப்போது தொடக்கப் புள்ளியாக இல்லாமல், இறுதி இலக்காக மாறி வருகின்றன. கூகுள் மற்றும் பிங் மட்டுமல்லாமல், பெர்ப்ளெக்ஸிட்டி (Perplexity) போன்ற புதிய பிளேயர்களும் இதையே செய்கின்றன. இவை பல விருப்பங்களுக்குப் பதில் ஒரே ஒரு பதிலை முன்னிறுத்துகின்றன. இது பன்முகத்தன்மையை விட வசதிக்கே முன்னுரிமை அளிக்கிறது. இந்த புதிய சூழலைப் பற்றி கூகுளின் அதிகாரப்பூர்வ பிளாக் விரிவாக விளக்குகிறது.

இந்த மாற்றத்தின் தாக்கம் உலகளவில் சமமாக இல்லை. இணையத் தரவு விலை அதிகமாகவோ அல்லது வேகம் குறைவாகவோ உள்ள இடங்களில், ஒரு சிறிய டெக்ஸ்ட் பதில் பல மீடியா நிறைந்த இணையதளங்களை விடச் சிறந்தது. ஆனால், இது சில டெக் ஜயன்ட்களின் கைகளில் அதிகாரத்தைக் குவித்துவிடுகிறது. சர்ச் இன்ஜின் நேரடியாகப் பதில் அளிக்கும்போது, அதுவே உண்மையை முடிவு செய்யும் ஒரு கேட்கீப்பராக (gatekeeper) மாறிவிடுகிறது. செய்திகள் மற்றும் அரசியல் தகவல்களுக்கு மக்கள் ஆட்டோமேட்டட் சிஸ்டம்களை நம்பும்போது இது கவலையளிக்கிறது. சர்ச் முடிவுகளில் உள்ள பலதரப்பட்ட கருத்துகள், ஒரே ஒரு அதிகாரப்பூர்வமான குரலுக்குப் பின்னால் மறைந்துவிடுகின்றன. இது சிந்தனையை ஒரே மாதிரியாக மாற்றும் அபாயத்தை ஏற்படுத்துகிறது. மேலும், உலகளாவிய பப்ளிஷர்கள் மீது இது பெரிய பொருளாதாரத் தாக்கத்தை ஏற்படுத்துகிறது. குளோபல் சவுத் (Global South) பகுதிகளில் உள்ள பல செய்தி நிறுவனங்கள் சர்ச் டிராஃபிக்கை நம்பியே உள்ளன. அந்த டிராஃபிக் குறைந்தால், உள்ளூர் இதழியல் அழியும் அபாயம் உள்ளது. Pew Research போன்ற அமைப்புகள், இந்த மாற்றங்கள் பொது நம்பிக்கையை எப்படிப் பாதிக்கின்றன என்பதை ஆவணப்படுத்தத் தொடங்கியுள்ளன.

• சிலிக்கான் வேலியில் தகவல் கட்டுப்பாட்டின் குவிப்பு.
• சிறுபான்மை மொழிகள் மற்றும் உள்ளூர் பார்வைகளுக்கான குறைவான பார்வை.
• உலகெங்கிலும் உள்ள சுதந்திரமான மீடியா நிறுவனங்கள் மீது பொருளாதார அழுத்தம்.
• முக்கியமான முடிவுகளை எடுக்க ஆட்டோமேட்டட் சுருக்கங்களைச் சார்ந்திருத்தல்.

பத்து நீல நிற லிங்க்குகளின் முடிவு

சாரா என்ற டிஜிட்டல் மார்க்கெட்டிங் மேனேஜரின் ஒரு நாளைக் கவனியுங்கள். முன்பு, சாரா கிளிக்-த்ரூ ரேட்களை (CTR) வைத்துத் தன் வெற்றியை அளவிடுவார். அவரது கன்டென்ட் சர்ச் முடிவுகளில் முதலில் வந்தால், நிறைய வாசகர்கள் வருவார்கள். இன்று, அவர் டேஷ்போர்டைப் பார்த்தால் ஒரு விசித்திரமான போக்கு தெரிகிறது. இம்ப்ரெஷன்கள் (impressions) உச்சத்தில் உள்ளன, ஆனால் இணையதள டிராஃபிக் குறைகிறது. சாரா ‘Visibility-to-value ratio’ சிக்கலை எதிர்கொள்கிறார். அவரது பிராண்ட் முன்னெப்போதையும் விட அதிகமாகத் தெரிகிறது, ஆனால் அந்தப் பார்வையை அவரால் பணமாக்க முடியவில்லை. சர்ச் இன்ஜின் அவரது நிபுணத்துவத்தைப் பயன்படுத்திப் பயனருக்குப் பதில் அளிக்கிறது, ஆனால் பயனரை அவரது தளத்திற்கு அனுப்பவில்லை. இது சாராவைத் தன் வியூகத்தை மாற்ற வைக்கிறது. அவர் வெறும் தகவல்களை மட்டும் நம்பி விற்பனையை அதிகரிக்க முடியாது. AI-யால் மாற்ற முடியாத அளவுக்கு தனித்துவமான அல்லது இன்டராக்டிவான கன்டென்ட்டை அவர் உருவாக்க வேண்டும். சமூகத்தை உருவாக்குதல், மின்னஞ்சல் நியூஸ்லெட்டர்கள் அல்லது தளத்திற்கு வரத் தூண்டும் பிரத்யேக டூல்கள் ஆகியவற்றில் அவர் கவனம் செலுத்த வேண்டும்.

சாரா தனது கட்டுரைகளில் எவை AI-யால் மேற்கோள் காட்டப்படுகின்றன என்று ஆய்வு செய்கிறார். AI தெளிவான, கட்டமைக்கப்பட்ட தரவுகளையே விரும்புகிறது என்பதை அவர் கவனிக்கிறார். இதைச் சமாளிக்க, அவர் தனது தயாரிப்பு வழிகாட்டிகளில் AI-யால் எளிதில் நகலெடுக்க முடியாத தனிப்பட்ட அனுபவங்களையும் தரவுகளையும் சேர்க்கிறார். AI ஓவர்வியூவில் ஒரு ஆதாரமாக இருப்பது பிராண்ட் விழிப்புணர்வுக்கு உதவும் என்பதையும் அவர் உணர்கிறார். ஆனால், டிராஃபிக் ஏன் குறைகிறது என்பதைத் தன் போர்டுக்கு விளக்குவதில் அவர் சிரமப்படுகிறார். இதுதான் மில்லியன் கணக்கான தொழில் வல்லுநர்களின் புதிய யதார்த்தம். டிஸ்கவரி மாறிவிட்டது. முதல் லிங்க்காக இருப்பது முக்கியமல்ல, AI தவிர்க்க முடியாத ஆதாரமாக இருப்பதே முக்கியம். ஆனாலும், பார்வை என்பது வருகைக்கு உத்தரவாதம் அளிக்காது.

இந்தச் சூழல் எல்லா துறைகளிலும் நடக்கிறது. டிராவல் பிளாக்கர்கள் முதல் சாப்ட்வேர் நிறுவனங்கள் வரை, வெறும் பார்வை மட்டும் போதாது, தவிர்க்க முடியாதவர்களாக மாற வேண்டும். வணிகங்கள் தங்கள் AI காலத்திற்கான SEO அணுகுமுறையை மாற்ற வேண்டும். நாங்கள் கவர் செய்ய வேண்டும் என்று நீங்கள் நினைக்கும் AI கதை, கருவி, போக்கு அல்லது கேள்வி உங்களிடம் உள்ளதா? உங்கள் கட்டுரை யோசனையை எங்களுக்கு அனுப்பவும் — அதைக் கேட்க நாங்கள் விரும்புகிறோம்.

இந்த மாடலின் எதிர்காலம் குறித்து நாம் கடினமான கேள்விகளைக் கேட்க வேண்டும். கன்டென்ட் கிரியேட்டர்கள் அழிந்தால், இந்த மாடல்களைப் பயிற்றுவிக்கத் தேவையான தகவல்களை யார் தருவார்கள்? சர்ச் இன்ஜின்கள் டிராஃபிக்கை அனுப்பவில்லை என்றால், பப்ளிஷர்கள் புதிய தகவல்களை உருவாக்க மாட்டார்கள். இது AI மாடல்கள் மற்ற AI உருவாக்கிய கன்டென்ட்டை வைத்துப் பயிற்றுவிக்கப்படும் ஒரு சுழற்சிக்கு வழிவகுக்கும். இது தகவல் சூழலைச் சிதைக்கும் பெரிய அபாயம். மேலும், தனியுரிமை சிக்கல்களும் உள்ளன. தனிப்பயனாக்கப்பட்ட ஓவர்வியூக்களைத் தர, சர்ச் இன்ஜின்கள் நம் வரலாற்றைத் தெரிந்து கொள்ள வேண்டும். வேகமான பதிலுக்காக நம் தரவுகளைத் தருகிறோமா? துல்லியத்தன்மை ஒரு பெரிய கேள்வி. AI இன்னும் ஹாலுசினேஷன் (hallucinations) சிக்கல்களைக் கொண்டுள்ளது. ஒரு சர்ச் இன்ஜின் தவறான தகவலை உண்மையாகச் சொல்லும்போது, அதன் தாக்கம் ஒரு இணையதளத்தை விடப் பெரியது. வெளிப்படைத்தன்மையை நாம் கோர வேண்டும். வசதிக்காக இணையத்தின் பன்முகத்தன்மையையும் துல்லியத்தையும் இழக்கக்கூடாது. இது குறித்து The Verge இதழிலும் விரிவாக விவாதிக்கப்பட்டுள்ளது.

நவீன டிஸ்கவரியின் தொழில்நுட்பக் கட்டமைப்பு

தொழில்நுட்ப ரீதியாக, ஜெனரேட்டிவ் தேடலுக்குப் புதிய டூல்கள் தேவை. டெவலப்பர்கள் இப்போது பாரம்பரிய பாட்களை விட LLM கிராலர்களுக்கு (crawlers) ஏற்றவாறு ஆப்டிமைஸ் செய்கிறார்கள். இதற்கு கட்டமைக்கப்பட்ட தரவு (structured data) அவசியம். பல நிறுவனங்கள் தங்கள் அகத் தரவுத்தளங்களை சர்ச் API-களுடன் இணைக்கின்றன. லோக்கல் ஸ்டோரேஜ் மற்றும் எட்ஜ் கம்ப்யூட்டிங் முக்கியத்துவம் பெறுகின்றன. நிகழ்நேர அப்டேட்கள் இப்போதும் ஒரு சவால்தான். ரேங்கிங்கை மட்டும் பார்க்காமல், AI-generated சுருக்கங்களில் உள்ள உணர்வுகள் மற்றும் துல்லியத்தை கண்காணிக்க டெவலப்பர்கள் டூல்களை உருவாக்குகிறார்கள். கீவேர்ட் அடர்த்தியை விட, தரவு ஒருமைப்பாடு (data integrity) முக்கியமாகிறது. சிக்கலான இந்த அமைப்புகளில், லோக்கல் தரவை நிர்வகிப்பதும் அதை குளோபல் மாடல்களுடன் சிங்க் செய்வதும் ஒரு பெரிய போட்டி நன்மையாகும்.

• வேகமான செமண்டிக் ரிட்ரீவலுக்காக வெக்டர் டேட்டாபேஸ்களின் ஒருங்கிணைப்பு.
• பெரிய தரவுகளைக் கையாள கன்டெக்ஸ்ட் விண்டோக்களை ஆப்டிமைஸ் செய்தல்.
• ஜெனரேட்டிவ் தேடல் அம்சங்களை ஸ்கேல் செய்யும்போது API ரேட் லிமிட்களை நிர்வகித்தல்.
• அடிக்கடி கேட்கப்படும் கேள்விகளுக்கு வலுவான கேச்சிங் (caching) உத்திகளைச் செயல்படுத்துதல்.

புதிய தகவல் ஓட்டத்திற்கு ஏற்ப மாறுதல்

தேடல் சூழல் நிரந்தரமாக மாறிவிட்டது. நல்ல ரேங்கிங் இருந்தால் கிளிக் கிடைக்கும் என்ற உலகம் முடிந்துவிட்டது. AI தகவலை எப்படிப் புரிந்துகொண்டு சுருக்குகிறது என்பதைப் புரிந்துகொள்வதில்தான் இப்போது வெற்றி இருக்கிறது. டிராஃபிக் இழப்பு ஒரு அச்சுறுத்தல் என்றாலும், அதிகரித்த பார்வை பிராண்ட் பில்டிங்கிற்குப் புதிய வாய்ப்புகளைத் தருகிறது. வெறும் டிராஃபிக் எண்களைப் பார்க்காமல், வணிக மதிப்பிற்கு முக்கியத்துவம் கொடுங்கள். இந்த மாற்றத்திற்கு ஏற்ப மாறுபவர்கள் வெற்றி பெறுவார்கள். தேடல் என்பது இனி ஒரு சிங்கிள் புராடக்ட் அல்ல, அது பல சாட் இன்டர்ஃபேஸ்கள் மற்றும் ஆன்சர் இன்ஜின்களின் தொகுப்பு. இந்த ஆட்டோமேட்டட் உலகில் உண்மையைச் சொல்லும் முதன்மை ஆதாரமாக இருப்பதே நம் இலக்கு.

ஆசிரியரின் குறிப்பு: கணினித் துறையில் நிபுணர்கள் அல்லாதவர்கள், ஆனால் செயற்கை நுண்ணறிவைப் புரிந்துகொள்ளவும், அதை அதிக நம்பிக்கையுடன் பயன்படுத்தவும், ஏற்கனவே வந்துகொண்டிருக்கும் எதிர்காலத்தைப் பின்தொடரவும் விரும்பும் மக்களுக்காக, பலமொழி AI செய்திகள் மற்றும் வழிகாட்டல் மையமாக இந்த தளத்தை நாங்கள் உருவாக்கினோம்.

ஒரு பிழையைக் கண்டறிந்தீர்களா அல்லது திருத்தப்பட வேண்டிய ஒன்று இருக்கிறதா? எங்களுக்குத் தெரியப்படுத்துங்கள்.