লগ ফাইল বিশ্লেষণ:
যদি আপনি গুগল সার্চ কনসোলের ‘চরল পরিসংখ্যান’ রিপোর্টে কখনও অভিনয় করেছেন এবং মনে করেছেন যে আপনি অর্ধেক হারিয়ে গেছেন, আপনি একা নন। ঐ রিপোর্ট তোমাকে বলছেসংখ্যাগুগলবো আপনার সার্ভারে অনুরোধ করেছেন, কিন্তু এটা আপনাকে বলবে না কোন নির্দিষ্ট কোন URLে রাখা হয়েছে, আর কত বার HTTP স্ট্যাটাস কোড ফেরত এসেছে। ওখানেইলগ ফাইল বিশ্লেষণভেতরে এসো।
আমি এক দশক ধরে প্রযুক্তিগত SEO করছি, এবং কোন দ্বিধা ছাড়াই আমি আপনাকে বলতে পারি: সার্ভার লগ ফাইল হচ্ছে গুগলবোট ক্রলার আচরণ সম্পর্কে সত্যের একমাত্র উৎস। তারা আপনাকে প্রকৃত সার্ভার অনুরোধ করে, দ্বিতীয়বারের কাছে। আপনার নিজের সাইটে চিৎকার করার মত হাতিয়ার ব্যবহার করে শুধু আপনাকে কি বলেপারে♪ তোমাকে নিয়ে যাবে ♪ছিলআসলে তাজা।
এই গাইডে, আমি ঠিক কি লগ ফাইল বিশ্লেষণের মাধ্যমে হাঁটবো, কেন গুগলবোট ক্রলিং আচরণ, সঠিক যন্ত্রপাতির সাথে কিভাবে কাজ করা যায়, এবং কি কি কি ভাবে তা সম্ভব। শেষ পর্যন্ত, আপনি জানেন কি ভাবে প্রাইমেটের বাজেট নষ্ট করা যায়, বিষয়বস্তু সনাক্ত করা যায়, এবং গুগলবো আপনার সবচেয়ে গুরুত্বপূর্ণ পাতায় মনোযোগ দিন।
গুগলবব@বর্জার আচরণ নিয়ে কেন লগ ফাইল বিশ্লেষণকারী
যখনই গুগলবোট আপনার সাইটে যায়, তখন এতে আপনার সার্ভারে একটি পদচিহ্ন রেখে যায়। এই লগ- ইন চিহ্ন, টাইম- আউট চিহ্ন, ব্যবহারকারীর এজেন্ট (গুগলবোট বনাম) । এইচ- টি- এম- এল কোড, বাইট স্থানান্তর, এবং কখনো কখনো কখনো উল্লেখকৃত তথ্য উল্লেখ করা হয় না । এই লগগুলি বিশ্লেষণ করে, আপনি এই প্রশ্নগুলোর উত্তর দিতে পারেন:
- গুগলবোট প্রায়শঃ কোন পাতার অবস্থান করছে?
- গুগলব কি আপনার কনফিউজড উপাদান, পেগেশন লুপ বা অসীম স্ক্রোল পৃষ্ঠাগুলোতে সময় নষ্ট করছে?
- গুগলবোট আঘাত করছে এমন ৪০৪ বা ৫০০টি পাতা আছে কি?
- গুগলবোট কিভাবে বিষয়বস্তু আপডেট করে?
- বড় বড় কোন সাইটে কি বাজেটের সমস্যা আছে (১০০্ক+ পাতার)?
লগ ফাইল বিশ্লেষণসঠিক উত্তর পাওয়ার একমাত্র উপায়. এটা সিও’ও-এর মূল প্রযুক্তিগত SEO অনুশীলন নয়, বিশেষ করে শিল্প সাইটের জন্য। আমি যখন এমন একটি সাইট নিরীক্ষণ করি যেখানে হাজার হাজার পাতা রয়েছে, তখন আমি সবসময় কোন এক পাতায় লগ দিয়ে শুরু করি।
গুগলবব্রবল- এর ফল
একটি সাধারণ ভুল ধারণা রয়েছে যে গুগল আপনাকে কিছু দিয়েছে। আসলে, আপনার সার্ভার কিভাবে গুগলবোতে সাড়া দিয়েছে তার ফলাফল। যদি আপনার সার্ভার দ্রুত এবং ২০০ বার ঠিক থাকে, তাহলে গুগলবো অনেক সময় চলে আসবে। আপনার যদি ধীর পৃষ্ঠা থাকে, চেইন বা ত্রুটি থাকে, গুগলব ধীর গতিতে সরে যাবে অথবা চলাফেরা বন্ধ করবে।
আপনার মধ্যে ডাইভিংলগ ফাইল বিশ্লেষণআপনি দেখতে পারেন ঠিক কোন বাজেট ব্যয় হচ্ছে। উদাহরণস্বরূপ, আমি একবার ই-কমার্স ক্লায়েন্টের সাথে কাজ করেছি যেখানে গুগলবোতে প্রতিদিন ৮০,০০০ ইউ এস ইউ এস ইউ এস যোগ দেয়া হয়েছিল- কিন্তু তাদের ৪০% পুরনো পণ্যের পৃষ্ঠা ৩০১ এর দিকে ফিরে এসেছে। এটা সম্পদের অপচয়। রিসাইকেল পরিষ্কার এবং নতুন রোবট যোগ করার পর, আমরা অর্ধেক জৈব ট্রাফিক নষ্ট হতে দেখেছি।
লগ ফাইল বিশ্লেষণের পদ্ধতি: সরঞ্জাম ও ধাপ
আপনার সিস্টেম অ্যাডমিনস্ট্রেটরের প্রতি সিস্টেম অ্যাডমিনস্ট্রেটরের সাথে যোগাযোগ করার প্রয়োজন নেই। বেশিরভাগ ওয়েব হোস্ট সিপার, FTP বা সরাসরি ডাউনলোডের মাধ্যমে সুবিধা প্রদান করে। বড় কোন সাইটের জন্য, আপনাকে হয়ত আপনার দেবজার টিমের সাথে কাজ করতে হবে, যেমন অ্যাপাচি কমবিড, এনজিক্স অথবা AWS ক্লাউড ফেস্ট।
ধাপ ১:
আদর্শ পদ্ধতি হলো সার্ভার লগের অন্তত ৭-১৪ দিন ডাউনলোড করা। সঠিক গুগলবোট ব্যবহারের জন্য, আমি পুরো মাস সুপারিশ করছি। লগ- ইনের সাথে ব্যবহারকারী এজেন্ট পংক্তি অন্তর্ভুক্ত করা যাবে, যাতে গুগলবোট- এর জন্য ফিল্টার করা যাবে ( বিষয়ে নিশ্চিত হোন); গুগলবোট/.
ধাপ ২:
Python অথবা Geperge সহযোগে আপনি লগ-ইন করতে পারবেন, কিন্তু বিশেষ সরঞ্জাম দ্বারা ব্যবহারযোগ্য। এখানে আমার টপ বাছাই:
- ফ্রগ লগ ফাইল বিশ্লেষক- ১,০০০ লাইনের জন্য ফ্রি। বিশ্লেষণ এবং কল্পনার জন্য নিখুঁত।
- বোট- এন্টারপ্রাইজ প্লাটফর্ম, রিয়েল টাইম লগিং, কলরি বাজেট রিপোর্ট আর গুগল এনাইটিক এর সাথে সম্পর্কিত।
- লুমার (পর্তুগীজ)- লগ ফাইল ইম্পোর্ট এবং আন-লক ডাটা সহ আরো একটি ব্যবসা টুল।
ধাপ ৩:
এই টুল স্বয়ংক্রিয়ভাবে গুগলবো ব্যবহারকারী এজেন্টদের সনাক্ত করবে। অন্য সব রোবটকে (বাং, ইয়ানডেক্স, ফেসবুক) সরিয়ে ফেলে গুগলবোবোট ক্রলিংয়ের আচরণ তুলে ধরার জন্য।
ধাপ ৪:
দেখো:
- কোডের অবস্থা- ২০০, ৩০১, ৪০৪, ৪০৪, গুগলবোটের ৫০০।
- ইউ- আই- ডির মাধ্যমে সতর্কতার ফ্রিকোয়েন্সি- কোন পৃষ্ঠাগুলোতে প্রায়ই দেখা যায়।
- ক্রোল গভীরতা- গুগলবোট কতটা গভীরে যাবে?
- সময়ের চিহ্ন- কখনও কখনও ওর দেহাবশেষ করার ইঙ্গিত দেয়।
এখানে আমি গত বছর একটি সত্যিকারের ই-কমার্স সাইট পর্যবেক্ষণ করেছি:
| মেট্রিক | প্রসারণের পূর্বে | উন্নতির পরে |
|---|---|---|
| গুগলবট প্রতিদিনের অনুরোধ | 12,000 | 8,500 |
| %s অনুরোধের সর্বমোট %s ২০০ | 60% | 80% |
| %s-র কল করার অনুরোধ | 25% | 5% |
| অতিরিক্ত খরচের পরিমাণ কম (%s) | 40% | 15% |
এই নাম্বারগুলো ৫০,০০০ পণ্যের পৃষ্ঠা দিয়ে ক্লায়েন্ট থেকে এসেছে। লগ ফাইল বিশ্লেষণের পরে আমরা সনাক্ত করতে পেরেছি যে গুগলবো ফিল্টার করছে এবং সেশন ভিত্তিক ইউ. আর. এল. আমরা রোবটদের ব্লক করে দিয়েছিলাম আর অভ্যন্তরীণ লিঙ্কের উন্নতি করেছি। ফলাফল: আরো অর্গানিক ট্রাফিক এবং দ্রুত ইনডেক্সিং।
লগ ফাইল বিশ্লেষণ থেকে সাধারণ অন্তর্দৃষ্টি
একবার তোমার তথ্য পেলে আসল কাজ শুরু হবে. এখানে আমি বার বার দেখেছি:
১) আপনার উপলব্ধি অথবা প্রতিলিপি বিষয়বস্তুর হাইলাইট করুন
যদি গুগলবোট এমন পাতাকে আঘাত করে, যার কোন অর্গানিক মূল্য নেই-বিস্কৃতিক মূল্য নেই, আর্কাইভ, প্রিন্টারের বন্ধুসুলভ সংস্করণ- আপনি ক্রাউট নষ্ট করছেন। ব্যবহারলগ ফাইল বিশ্লেষণএই URLগুলি সনাক্ত করে যোগ করা হবেকোন বস্তু বাছাই করা হয়নিঅথবাছায়াবৃত (D)নির্দেশ.
২: ১৫ - ১৭; ১ করি.
আপনি যদি পুরোনো পাতা মুছে ফেলেন, তাহলে গুগলববোতে হয়ত ৪০৪৪ টি ক্রীতী থাকতে পারে। লগ ফাইল প্রদর্শন করতে ব্যবহৃত হয় । যদি আপনি দেখেন যে প্রতিদিন ৪০৪টি আঘাত করা হচ্ছে, তাহলে একটি প্রাসঙ্গিক পেজ তৈরি করুন অথবা স্বনির্বাচিত ৪০৪ ব্যবহার করা হবে।
৩.
যে আপডেটগুলো প্রায়ই আপডেট করা হয় (যেমন সংবাদ প্রতিবেদন বা পণ্যের দামের দাম), সেগুলোকে আরো বেশী রাখা উচিত। যদি আপনার সব থেকে গুরুত্বপূর্ণ বিষয় হয় একবার মাত্র একবার পুরোনো ব্লগ পোস্টগুলো প্রতিদিন দেখা যায়, সেটা হলো লাল পতাকা। লগ ফাইল করুন ।
GSC-র গুরুত্বপূর্ণ বৈশিষ্ট্য
গুগল সার্চ কনসোল আপনাকে একটি ক্রল রেটের সীমা নির্ধারণ করতে দেয়, কিন্তু এটি একটি অস্পষ্ট উপকরণ। লগ ফাইল প্রদর্শন করতে ব্যবহৃত বৈশিষ্ট্যের সঠিক সময়ের প্রভাব প্রদর্শন করা হয়, এবং নতুন তৈরি করা তথ্যের সীমা বৃদ্ধি করতে আপনার প্রয়োজন কিনা।
৫, বোট mmictriiciy এর সনাক্তকরণ
মাঝে মাঝে বাজে রোবটরা গুগলবট বলে ভান করে। বিপরীত DNS পরীক্ষার মাধ্যমে সার্ভার লগ করা যাবে। লেটিমেট গুগলবো অনুরোধ করেছেন গুগলবো. যদি আপনি একজন নকল এজেন্টকে সম্পদ নষ্ট করতে দেখেন, ফায়ারওয়াল বন্ধ করুন।
লগ ফাইল বিশ্লেষণ টুল
আপনাকে সঠিক টুল বেছে নিতে সাহায্য করার জন্য, আমার হাতের এই অভিজ্ঞতার উপর ভিত্তি করে একটি তুলনা:
| সরঞ্জাম | বিবিধ | কি-র বৈশিষ্ট্য | সেরা |
|---|---|---|---|
| [চিৎকার লগ ফাইল বিশ্লেষক] http://www. | মুক্ত (ম্যাসেড) / পাইড ১৪৯ বছর | প্রকৃত লগ-ইন ইম্পোর্ট ব্যবস্থা, ব্যবহারকারীর এজেন্ট ফিল্টার, প্রতিক্রিয়া প্রাপ্ত হয়েছে, এক্সপোর্টযোগ্য রিপোর্ট | ছোট এবং মাঝারি মিডিয়া সাইট |
| [Botify](https://www.botify.com) | এন্টারপ্রাইজ ব্যক্তিগত সুবিধা | অবিরাম লগ স্ট্রিমিং, কল্যকার বাজেট ড্যাশবোর্ড, আয় ২. | বড় ই-মেইল ও কোম্পানি |
| [ লাইমার ] http://www. | এন্টারপ্রাইজ ব্যক্তিগত সুবিধা | GSC ও GA এর সঙ্গে ফাইল আপলোড, কলপনা পাথ বিশ্লেষণ, GSA এর সঙ্গে শুদ্ধতা সম্পন্ন করুন | স্কেলেHO টিমে |
| স্বনির্ধারিত স্ক্রিপ্ট (Pynt/AWK) | মুক্ত | সম্পূর্ণ নিয়ন্ত্রণ, মসৃণ | সময় এবং বাজেটের নির্মাতা |
আমি চারজনকেই ব্যবহার করেছি। বেশীর ভাগ এজেন্সি আর হাউজের দলের জন্য, ফ্রগ লগ ফাইল বিশ্লেষক চিৎকার করাই সবচেয়ে ভালো। ব্যাপক সাইট (১এম+ পৃষ্ঠার জন্য), বট্টামিলের স্বয়ংক্রিয় প্রক্রিয়াকে পরাজিত করা কঠিন।
ক্রোল ডাটা কিভাবে প্রয়োগ করতে হবে
তথ্য সংগ্রহ করা কর্মবিহীন। আপনার পর ঠিক এখানেলগ ফাইল বিশ্লেষণ:
CD-র পুনরায় ক্রমবিন্যাস করা হবে ও ক্ষতিগ্রস্ত লিংক
যদি গুগলবোট ৩০১ তে আঘাত করে যা ৪০৪৪-এর দিকে যাবে, তাহলে রিডাইরেক্ট চেইনটি আপডেট করবে। লগ ফাইল তথ্য ব্যবহার করে সবচেয়ে ভাঙ্গা ইউআরএলের তালিকা তৈরি করতে এবং সঠিক ৩০১টি পাতা ঠিক করতে ব্যবহার করুন ।
রোবোটের সাথে বাজি ধরুন
সমস্ত অ- সেইসব বিভাগগুলি ব্লক করে রাখা হয়েছে: প্রশাসন, ফেস- পরামিতি, সেশান পৃষ্ঠা, মন্তব্য পৃষ্ঠা। ব্যবহার করুনপরিচয়-পংক্তিশুধুমাত্র প্রয়োজন হলে নির্দেশ করা হবে- বেশীর ভাগ সাইট এর প্রয়োজন নেই।
কি-তে অভ্যন্তরীণ লিঙ্ক
লগ- ইন করা হলে পৃষ্ঠাগুলো যদি প্রদর্শন করা হয় তবে উচ্চ মানের পাতা (আপনার উচ্চ মানের পণ্যের মত) খুব কম অভ্যন্তরীণ লিঙ্কগুলি ব্যবহার করা হবে না, আরো অভ্যন্তরীণ লিঙ্ক (যেমন হোম পেজ অথবা বিভাগ পাতার মতো) । গুগলবোটকে এই সংকেত দেয়া হচ্ছে।
সার্ভার থেকে প্রাপ্ত প্রত্যুত্তরের গতি
Googleব্রয় ২.৫ মিটার সময়ের বেশি সময় ধরে ব্যবহৃত হয়। ধীর গতির পংক্তি সনাক্ত করতে লগ-আউট করে। পুনরায় ইউ. আর. এল. - এর জন্য CDN অথবা ক্যাশে করার বিবেচনা করুন।
GSC দ্বারা গুরুত্বপূর্ণ পৃষ্ঠা প্রেরণ করা হচ্ছে
যদি আপনার কাছে কোন সংবাদ প্রবন্ধ বা নতুন কোন পণ্য চালু থাকে যা দ্রুত ইনডেক্স তৈরি করা প্রয়োজন, তাহলে গুগলবব-এর লগ- ইন করা পেজ- এ আঘাত করেছে। যদি না করা হয়, ইন্ডেক্স করার জন্য URL Synthation টুল ব্যবহার করুন ।
ক্রোল ডাটা থেকে স্থান
আমরা কিভাবে এটা চেক করেছি (স্ptetemperd): সেপ্টেম্বরের মধ্যে ক্লায়েন্টের বৈশিষ্ট্যে পুনরায় চেক করার জন্য আমরা চেক করতে পারি; টুল এবং বিনামূল্যের সীমা যা আমরা যাচাই করতে পারি সেই তারিখের সত্যতা যাচাই করতে পারি।
ক্রোল ডাটা তোমাকে বলছে কি ঘটেছে. এই গাইড সেটাকে সংশোধন করতে পারে:
- ওয়েবসাইট SEO বিশ্লেষণকারীআপনার লগ অনুসন্ধানের সম্পূর্ণ অডিট কাজ
- পরবর্তী .js SEO: এস এস এস এস এস এস এস এস এস এস এস এস এস এস এস এস এস এস এল— হেডস্স্ ভাষার বিষয়গুলো সমাধান করুন
- নদীমুখ-চতুর্মাত্রিক পৃষ্ঠা তৈরি করা হয়
সাধারণ প্রশ্নাবলী
১) লগ ফাইল কি এমন একটি স্থানের মতো একই ধরনের বিশ্লেষণ করা হয়?
না। একটি সাইট দখল করে (ফ্রগ বা অনুরূপ শব্দসহ চিৎকার করে)পারেডিম. লগ ফাইল বিশ্লেষণে গুগলব কী দেখায়আসলেতাজা. ( দ্বিতীয়.
২: শেয়ার হোস্ট থেকে লগ ফাইল প্রাপ্ত করতে ব্যর্থ?
হ্যাঁ, বেশিরভাগ ভাগ ভাগ ভাগ হোস্টরা সিপার (সাধারণত "মেট্রিকালস" বিভাগে) এর মাধ্যমে নিকট প্রবেশাধিকারের লগ সরবরাহ করে। না থাকলে, তাদেরকে সক্রিয় করার অনুরোধ জানানো হবে।
৩) আমার বিশ্লেষণ করতে হবে কতগুলো তথ্য?
অন্তত ৭ দিন; ১৪-৩০ দিনই সাপ্তাহিক বিন্যাস খোঁজার জন্য ভাল। আপনার মনোযোগ ফোকাস না করা পর্যন্ত ছুটির যানজটের মতো উঁচু জায়গা এড়িয়ে চলুন ।
৪. লগ ফাইল বর্তমানে উপস্থিত রয়েছে
ইমেইলের মাধ্যমে সকল HTTP অনুরোধ সনাক্ত করা হয়েছে, যার মধ্যে রয়েছে XHRA/ftPC এবং JS-rened বিষয়বস্তু। তবে এগুলো প্রায়শ ব্রাউজার থেকে আসে, গুগলবো না। ব্যবহারকারীকে সতর্ক করে দিতে হবে।
যদি গুগলবো’র IP সীমা পরিবর্তন হয়?
গুগল তার আইপি সীমা প্রকাশ করেছে।গুগলবব FAQ. . সর্বাধিক ব্যবহৃত লগ-ইনের তালিকা স্বয়ংক্রিয়ভাবে পরীক্ষা করা হবে।
শেষ ভাবনা&পরবর্তী ধাপ
লগ ফাইল বিশ্লেষণগুগলের চোখ দিয়ে আপনি সবচেয়ে কাছের চোখে দেখতে পারেন। এটি আপনাকে বলছে যে কোন পাতাগুলোকে ঠিক করে রাখা হচ্ছে, কত বার ঘুরে বেড়াচ্ছে, এবং গুগলবো কি কম-অল্প ইউ এস ২. দায়িত্ববিহীনগুগলবোট ক্রল আচরণসার্চ কনসোল থেকে তথ্য, আপনি একটি সুনির্দিষ্ট প্রযুক্তিগত SEO কৌশল তৈরি করতে পারেন যা কিনা বাজেট সংরক্ষণ করে সংরক্ষণ করতে পারে।
DG10 এজেন্সিতে, আমরা প্রত্যেক সরকারী অডিশনে লগ ফাইল বিশ্লেষণ করতে পারি। এটা ঐচ্ছিক নয়-এটা মূল ভিত্তি। যদি আপনি বিভিন্ন বিষয়ে লড়াই করে থাকেন, তাহলে রহস্যময় ট্রাফিকের ফোঁটা বা কোন বড় কোন সাইট যা কখনো পুরোপুরি পূর্ণ হতে পারে না, তা হলে লগের দিকে তা দেখা উচিত।
কিভাবে গুগলবোট আপনার সাইটে প্রবেশ করে তা জানার জন্য প্রস্তুত?DG10 এজেন্সিটেকনিকাল SEO অডিটেশন এর জন্য একটি গভীর লগ ফাইল বিশ্লেষণ এবং বহনযোগ্য কাজ। আমরা আপনার সার্ভারকে ভালো অর্গানাইজেশনের জন্য একটি রোডম্যাপে পরিণত করব।
ডিজি১০ এজেন্সির প্রযুক্তিগত SEO টিম এই প্রবন্ধটি লিখেছে। সকল তথ্য এবং কেস স্টাডি প্রকৃত ক্লায়েন্ট প্রকল্পের অংশ। এটি গোপনীয়তার জন্য একটি প্রণীত। প্রযুক্তিগত SEO ফাউন্ডেশন সম্পর্কে আরো জানতে আমাদেরব্যবসায়িক প্রযুক্তিগত SEO এর পরিচালনার পাথ.