পাইথনের সাথে সেলেনিয়াম মডিউলটি ব্যবহার করে আমি কীভাবে কোনও চলকটিতে এইচটিএমএল উত্স পেতে পারি ?
আমি এরকম কিছু করতে চেয়েছিলাম:
from selenium import webdriver
browser = webdriver.Firefox()
browser.get("http://example.com")
if "whatever" in html_source:
# Do something
else:
# Do something else
কিভাবে আমি এটি করতে পারব? আমি এইচটিএমএল উত্স অ্যাক্সেস কিভাবে জানি না।
উত্তর:
আপনার page_sourceসম্পত্তিটি অ্যাক্সেস করতে হবে :
from selenium import webdriver
browser = webdriver.Firefox()
browser.get("http://example.com")
html_source = browser.page_source
if "whatever" in html_source:
# do something
else:
# do something else
find_element_by_xpath("//*").get_attribute("outerHTML")(
সেলেনিয়াম 2 লাইব্রেরির সাথে আপনি ব্যবহার করতে পারেন get_source()
import Selenium2Library
s = Selenium2Library.Selenium2Library()
s.open_browser("localhost:7080", "firefox")
source = s.get_source()
চালক.পৃষ্ঠা_স্রোত পৃষ্ঠা পৃষ্ঠা কোড পেতে আপনাকে সহায়তা করবে। পৃষ্ঠার উত্সটিতে পাঠ্য উপস্থিত রয়েছে কিনা তা আপনি পরীক্ষা করতে পারেন।
from selenium import webdriver
driver = webdriver.Firefox()
driver.get("some url")
if "your text here" in driver.page_source:
print('Found it!')
else:
print('Did not find it.')
আপনি যদি পৃষ্ঠার উত্সটি কোনও ভেরিয়েবলে সঞ্চয় করতে চান তবে ড্রাইভার.জেটের পরে নীচে লাইন যুক্ত করুন :
var_pgsource=driver.page_source
এবং যদি শর্তটি পরিবর্তন করুন :
if "your text here" in var_pgsource:
পৃষ্ঠার উত্সটি ব্যবহার করে আপনি পুরো এইচটিএমএল কোডটি পাবেন।
সুতরাং প্রথমে কোড বা ট্যাগের ব্লকটি স্থির করুন যেখানে আপনাকে তথ্য পুনরুদ্ধার করতে বা উপাদানটি ক্লিক করতে হবে ..
options = driver.find_elements_by_name_("XXX")
for option in options:
if option.text == "XXXXXX":
print(option.text)
option.click()
নাম, এক্সপথ, আইডি, লিঙ্ক এবং সিএসএস পাথের সাহায্যে আপনি উপাদানগুলি খুঁজে পেতে পারেন।
আপনি কেবল WebDriverঅবজেক্টটি ব্যবহার করতে পারেন , এবং এর @propertyক্ষেত্রের মাধ্যমে পৃষ্ঠা উত্স কোডটিতে অ্যাক্সেস করতে পারেন page_source...
এই কোড স্নিপেট চেষ্টা করুন :-)
from selenium import webdriver
driver = webdriver.Firefox('path/to/executable')
driver.get('https://some-domain.com')
source = driver.page_source
if 'stuff' in source:
print('found...')
else:
print('not in source...')
from bs4 import BeautifulSoup
from selenium import webdriver
driver = webdriver.Chrome()
html_source_code = driver.execute_script("return document.body.innerHTML;")
html_soup: BeautifulSoup = BeautifulSoup(html_source_code, 'html.parser')
এখন আপনি ডেটা উত্তোলনের জন্য বিউটিউসসুপ ফাংশন প্রয়োগ করতে পারেন ...
আমি urlib দিয়ে উত্সটি পাওয়ার পরামর্শ দিয়েছি এবং, আপনি যদি বিশ্লেষণ করতে যাচ্ছেন তবে বিউটিফুল স্যুপ জাতীয় কিছু ব্যবহার করুন ।
import urllib
url = urllib.urlopen("http://example.com") # Open the URL.
content = url.readlines() # Read the source and save it to a variable.