ਸ਼ੁਰੂਆਤ ਕਰਨ ਵਾਲਿਆਂ ਲਈ ਵਧੀਆ ਲੋਕਲ AI ਸੈੱਟਅੱਪ
ਆਰਟੀਫੀਸ਼ੀਅਲ ਇੰਟੈਲੀਜੈਂਸ ਲਈ ਵੱਡੇ ਟੈਕ ਸਰਵਰਾਂ ‘ਤੇ ਪੂਰੀ ਤਰ੍ਹਾਂ ਨਿਰਭਰ ਰਹਿਣ ਦਾ ਦੌਰ ਖਤਮ ਹੋ ਰਿਹਾ ਹੈ। ਹਾਲਾਂਕਿ ਜ਼ਿਆਦਾਤਰ ਲੋਕ ਅਜੇ ਵੀ ਬ੍ਰਾਊਜ਼ਰ ਜਾਂ ਪੇਡ ਸਬਸਕ੍ਰਿਪਸ਼ਨ ਰਾਹੀਂ ਲਾਰਜ ਲੈਂਗੂਏਜ ਮਾਡਲਾਂ ਨਾਲ ਗੱਲਬਾਤ ਕਰਦੇ ਹਨ, ਪਰ ਉਪਭੋਗਤਾਵਾਂ ਦੀ ਇੱਕ ਵਧ ਰਹੀ ਗਿਣਤੀ ਇਹਨਾਂ ਸਿਸਟਮਾਂ ਨੂੰ ਆਪਣੇ ਹਾਰਡਵੇਅਰ ‘ਤੇ ਲਿਜਾ ਰਹੀ ਹੈ। ਇਹ ਬਦਲਾਅ ਹੁਣ ਸਿਰਫ਼ ਡਿਵੈਲਪਰਾਂ ਜਾਂ ਖੋਜਕਰਤਾਵਾਂ ਲਈ ਨਹੀਂ ਹੈ। ਹੁਣ ਇੱਕ ਆਮ ਲੈਪਟਾਪ ਵਾਲਾ ਸ਼ੁਰੂਆਤੀ ਵਿਅਕਤੀ ਵੀ ਬਿਨਾਂ ਇੰਟਰਨੈਟ ਕਨੈਕਸ਼ਨ ਦੇ ਇੱਕ ਸਮਰੱਥ ਅਸਿਸਟੈਂਟ ਚਲਾ ਸਕਦਾ ਹੈ। ਮੁੱਖ ਉਦੇਸ਼ ਸਧਾਰਨ ਹੈ। ਤੁਸੀਂ ਆਪਣੇ ਡੇਟਾ ‘ਤੇ ਪੂਰਾ ਕੰਟਰੋਲ ਪ੍ਰਾਪਤ ਕਰਦੇ ਹੋ ਅਤੇ ਉਹਨਾਂ ਕੰਪਨੀਆਂ ਨੂੰ ਮਾਸਿਕ ਫੀਸ ਦੇਣਾ ਬੰਦ ਕਰ ਦਿੰਦੇ ਹੋ ਜੋ ਕਿਸੇ ਵੀ ਸਮੇਂ ਆਪਣੀਆਂ ਸੇਵਾਵਾਂ ਦੀਆਂ ਸ਼ਰਤਾਂ ਬਦਲ ਸਕਦੀਆਂ ਹਨ। ਇਹ ਤਬਦੀਲੀ ਪਰਸਨਲ ਕੰਪਿਊਟਿੰਗ ਪ੍ਰਭੂਸੱਤਾ ਵੱਲ ਇੱਕ ਕਦਮ ਹੈ ਜੋ ਅਸੀਂ ਪੀਸੀ ਦੇ ਸ਼ੁਰੂਆਤੀ ਦਿਨਾਂ ਤੋਂ ਬਾਅਦ ਨਹੀਂ ਦੇਖਿਆ ਹੈ। ਇਹ ਉਹਨਾਂ ਮਾਡਲਾਂ ਨੂੰ ਚਲਾਉਣ ਵਾਲੇ ਗਣਿਤ ਨੂੰ ਲੈ ਕੇ ਤੁਹਾਡੀ ਆਪਣੀ ਡਿਸਕ ‘ਤੇ ਰੱਖਣ ਬਾਰੇ ਹੈ। ਸ਼ੁਰੂਆਤ ਕਰਨ ਲਈ ਤੁਹਾਨੂੰ ਕਿਸੇ ਵੱਡੇ ਸਰਵਰ ਫਾਰਮ ਦੀ ਲੋੜ ਨਹੀਂ ਹੈ। ਤੁਹਾਨੂੰ ਸਿਰਫ਼ ਸਹੀ ਸਾਫਟਵੇਅਰ ਅਤੇ ਇਸ ਗੱਲ ਦੀ ਮੁੱਢਲੀ ਸਮਝ ਦੀ ਲੋੜ ਹੈ ਕਿ ਤੁਹਾਡਾ ਕੰਪਿਊਟਰ ਆਪਣੀ ਮੈਮੋਰੀ ਦੀ ਵਰਤੋਂ ਕਿਵੇਂ ਕਰਦਾ ਹੈ। ਕਲਾਉਡ ਤੋਂ ਲੋਕਲ ਵੱਲ ਵਧਣਾ ਅੱਜ ਸਾਡੇ ਸਾਫਟਵੇਅਰ ਦੀ ਵਰਤੋਂ ਕਰਨ ਦੇ ਤਰੀਕੇ ਵਿੱਚ ਸਭ ਤੋਂ ਮਹੱਤਵਪੂਰਨ ਬਦਲਾਅ ਹੈ।
ਤੁਹਾਡੇ ਇੰਟਰਨਲ ਅਸਿਸਟੈਂਟ ਦੀ ਕਾਰਜਪ੍ਰਣਾਲੀ
AI ਨੂੰ ਲੋਕਲ ਤੌਰ ‘ਤੇ ਚਲਾਉਣ ਦਾ ਮਤਲਬ ਹੈ ਕਿ ਤੁਹਾਡਾ ਕੰਪਿਊਟਰ ਕਿਸੇ ਦੂਜੇ ਰਾਜ ਵਿੱਚ ਡੇਟਾ ਸੈਂਟਰ ਨੂੰ ਬੇਨਤੀ ਭੇਜਣ ਦੀ ਬਜਾਏ ਹਰ ਗਣਨਾ ਨੂੰ ਖੁਦ ਸੰਭਾਲਦਾ ਹੈ। ਜਦੋਂ ਤੁਸੀਂ ਕਲਾਉਡ ਸਰਵਿਸ ਵਿੱਚ ਕੋਈ ਪ੍ਰੋਂਪਟ ਟਾਈਪ ਕਰਦੇ ਹੋ, ਤਾਂ ਤੁਹਾਡਾ ਟੈਕਸਟ ਵੈੱਬ ਰਾਹੀਂ ਯਾਤਰਾ ਕਰਦਾ ਹੈ, ਇੱਕ ਕਾਰਪੋਰੇਟ ਸਰਵਰ ‘ਤੇ ਰਹਿੰਦਾ ਹੈ, ਅਤੇ ਅਜਿਹੇ ਹਾਰਡਵੇਅਰ ਦੁਆਰਾ ਪ੍ਰੋਸੈਸ ਕੀਤਾ ਜਾਂਦਾ ਹੈ ਜਿਸ ‘ਤੇ ਤੁਹਾਡਾ ਕੋਈ ਕੰਟਰੋਲ ਨਹੀਂ ਹੁੰਦਾ। ਜਦੋਂ ਤੁਸੀਂ ਮਾਡਲ ਨੂੰ ਲੋਕਲ ਚਲਾਉਂਦੇ ਹੋ, ਤਾਂ ਉਹ ਪ੍ਰਕਿਰਿਆ ਤੁਹਾਡੀ ਮਸ਼ੀਨ ਦੇ ਅੰਦਰ ਹੀ ਰਹਿੰਦੀ ਹੈ। ਇਹ ਕੁਆਂਟਾਈਜੇਸ਼ਨ (quantization) ਨਾਮਕ ਤਕਨੀਕ ਦੁਆਰਾ ਸੰਭਵ ਹੋਇਆ ਹੈ। ਇਹ ਪ੍ਰਕਿਰਿਆ ਮਾਡਲ ਦੇ ਆਕਾਰ ਨੂੰ ਛੋਟਾ ਕਰ ਦਿੰਦੀ ਹੈ ਤਾਂ ਜੋ ਇਹ ਇੱਕ ਸਟੈਂਡਰਡ ਹੋਮ ਕੰਪਿਊਟਰ ਦੀ ਮੈਮੋਰੀ ਵਿੱਚ ਫਿੱਟ ਹੋ ਸਕੇ। ਇੱਕ ਮਾਡਲ ਜਿਸਨੂੰ ਅਸਲ ਵਿੱਚ ਚਾਲੀ ਗੀਗਾਬਾਈਟ ਸਪੇਸ ਦੀ ਲੋੜ ਹੋ ਸਕਦੀ ਹੈ, ਉਸਨੂੰ ਇਸਦੀ ਬੁੱਧੀ ਗੁਆਏ ਬਿਨਾਂ ਅੱਠ ਜਾਂ ਦਸ ਗੀਗਾਬਾਈਟ ਤੱਕ ਸੰਕੁਚਿਤ ਕੀਤਾ ਜਾ ਸਕਦਾ ਹੈ। ਇਹ ਇਸਨੂੰ ਆਧੁਨਿਕ ਪ੍ਰੋਸੈਸਰ ਜਾਂ ਸਮਰਪਿਤ ਗ੍ਰਾਫਿਕਸ ਕਾਰਡ ਵਾਲੇ ਕਿਸੇ ਵੀ ਵਿਅਕਤੀ ਲਈ ਪਹੁੰਚਯੋਗ ਬਣਾਉਂਦਾ ਹੈ। Ollama ਜਾਂ LM Studio ਵਰਗੇ ਟੂਲਸ ਨੇ ਇਸਨੂੰ ਇੰਨਾ ਸਰਲ ਬਣਾ ਦਿੱਤਾ ਹੈ ਕਿ ਇਹ ਮਿਊਜ਼ਿਕ ਪਲੇਅਰ ਨੂੰ ਇੰਸਟਾਲ ਕਰਨ ਜਿੰਨਾ ਆਸਾਨ ਹੈ। ਤੁਸੀਂ ਐਪਲੀਕੇਸ਼ਨ ਡਾਊਨਲੋਡ ਕਰਦੇ ਹੋ, ਸੂਚੀ ਵਿੱਚੋਂ ਇੱਕ ਮਾਡਲ ਚੁਣਦੇ ਹੋ, ਅਤੇ ਚੈਟਿੰਗ ਸ਼ੁਰੂ ਕਰਦੇ ਹੋ। ਇਹ ਟੂਲ ਮਾਡਲ ਨੂੰ RAM ਵਿੱਚ ਲੋਡ ਕਰਨ ਅਤੇ ਪ੍ਰੋਸੈਸਰ ਸਾਈਕਲਾਂ ਦਾ ਪ੍ਰਬੰਧਨ ਕਰਨ ਵਰਗੇ ਗੁੰਝਲਦਾਰ ਬੈਕਗ੍ਰਾਉਂਡ ਕੰਮਾਂ ਨੂੰ ਸੰਭਾਲਦੇ ਹਨ। ਉਹ ਇੱਕ ਸਾਫ਼ ਇੰਟਰਫੇਸ ਪ੍ਰਦਾਨ ਕਰਦੇ ਹਨ ਜੋ ਪ੍ਰਸਿੱਧ ਵੈੱਬ ਵਰਜਨਾਂ ਵਰਗਾ ਹੀ ਲੱਗਦਾ ਹੈ। ਤੁਸੀਂ ਅਸਲ ਵਿੱਚ ਆਪਣੇ ਡੈਸਕ ‘ਤੇ ਹੁਣ ਤੱਕ ਬਣਾਏ ਗਏ ਸਭ ਤੋਂ ਉੱਨਤ ਸਾਫਟਵੇਅਰ ਦਾ ਇੱਕ ਪ੍ਰਾਈਵੇਟ ਵਰਜਨ ਚਲਾ ਰਹੇ ਹੋ। ਇਹ AI ਦਾ ਸਿਮੂਲੇਸ਼ਨ ਨਹੀਂ ਹੈ, ਸਗੋਂ ਤੁਹਾਡੇ ਸਿਲੀਕਾਨ ‘ਤੇ ਚੱਲਣ ਵਾਲੇ ਅਸਲ ਮਾਡਲ ਵੇਟਸ ਹਨ। ਸਾਫਟਵੇਅਰ ਕੱਚੀਆਂ ਗਣਿਤਿਕ ਫਾਈਲਾਂ ਅਤੇ ਉਹਨਾਂ ਨਾਲ ਸੰਚਾਰ ਕਰਨ ਲਈ ਤੁਹਾਡੇ ਦੁਆਰਾ ਵਰਤੀ ਜਾਂਦੀ ਮਨੁੱਖੀ ਭਾਸ਼ਾ ਦੇ ਵਿਚਕਾਰ ਇੱਕ ਪੁਲ ਵਜੋਂ ਕੰਮ ਕਰਦਾ ਹੈ। ਇਹ ਮੈਮੋਰੀ ਪ੍ਰਬੰਧਨ ਅਤੇ ਇੰਸਟ੍ਰਕਸ਼ਨ ਸੈੱਟਾਂ ਦੇ ਭਾਰੀ ਕੰਮ ਨੂੰ ਸੰਭਾਲਦਾ ਹੈ ਤਾਂ ਜੋ ਤੁਸੀਂ ਆਉਟਪੁੱਟ ‘ਤੇ ਧਿਆਨ ਦੇ ਸਕੋ।
ਡੇਟਾ ਮਾਲਕੀ ਵਿੱਚ ਗਲੋਬਲ ਬਦਲਾਅ
ਲੋਕਲ ਸੈੱਟਅੱਪ ਵੱਲ ਵਧਣਾ ਡੇਟਾ ਰੈਜ਼ੀਡੈਂਸੀ ਅਤੇ ਗੋਪਨੀਯਤਾ ਬਾਰੇ ਇੱਕ ਵੱਡੇ ਅੰਤਰਰਾਸ਼ਟਰੀ ਰੁਝਾਨ ਦਾ ਹਿੱਸਾ ਹੈ। ਬਹੁਤ ਸਾਰੇ ਦੇਸ਼ਾਂ ਵਿੱਚ ਹੁਣ ਸਖ਼ਤ ਕਾਨੂੰਨ ਹਨ ਕਿ ਨਿੱਜੀ ਅਤੇ ਕਾਰਪੋਰੇਟ ਡੇਟਾ ਕਿੱਥੇ ਸਟੋਰ ਕੀਤਾ ਜਾ ਸਕਦਾ ਹੈ। ਯੂਰਪ ਵਿੱਚ ਇੱਕ ਛੋਟੇ ਕਾਰੋਬਾਰ ਜਾਂ ਏਸ਼ੀਆ ਵਿੱਚ ਇੱਕ ਵਿਸ਼ਲੇਸ਼ਕ ਲਈ, ਸੰਵੇਦਨਸ਼ੀਲ ਦਸਤਾਵੇਜ਼ਾਂ ਨੂੰ US-ਅਧਾਰਿਤ ਕਲਾਉਡ ਪ੍ਰੋਵਾਈਡਰ ਨੂੰ ਭੇਜਣਾ ਇੱਕ ਕਾਨੂੰਨੀ ਜੋਖਮ ਹੋ ਸਕਦਾ ਹੈ। ਲੋਕਲ AI ਇਸ ਰੁਕਾਵਟ ਨੂੰ ਪੂਰੀ ਤਰ੍ਹਾਂ ਦੂਰ ਕਰਦਾ ਹੈ। ਇਹ ਪੇਸ਼ੇਵਰਾਂ ਨੂੰ ਸਥਾਨਕ ਨਿਯਮਾਂ ਦੀ ਪੂਰੀ ਪਾਲਣਾ ਕਰਦੇ ਹੋਏ ਉੱਨਤ ਟੂਲਸ ਦੀ ਵਰਤੋਂ ਕਰਨ ਦੀ ਇਜਾਜ਼ਤ ਦਿੰਦਾ ਹੈ।