Scrapping: Google Search - Revision history

Onnowpurbo at 05:46, 30 March 2025

2025-03-30T05:46:56Z

Onnowpurbo: /* ✅ Script dengan `googlesearch-python` (tanpa API) */

2025-03-30T02:49:00Z

✅ Script dengan `googlesearch-python` (tanpa API)

Onnowpurbo: Created page with "Berikut ini adalah '''script Python sederhana''' untuk scraping hasil pencarian Google berdasarkan '''keyword''', lalu '''menyimpan hasilnya ke file (CSV atau TXT)'''. '''Cat..."

2025-03-28T23:07:34Z

Created page with "Berikut ini adalah '''script Python sederhana''' untuk scraping hasil pencarian Google berdasarkan '''keyword''', lalu '''menyimpan hasilnya ke file (CSV atau TXT)'''. '''Cat..."

New page

Berikut ini adalah '''script Python sederhana''' untuk scraping hasil pencarian Google berdasarkan '''keyword''', lalu '''menyimpan hasilnya ke file (CSV atau TXT)'''.

'''Catatan:''' Kita tidak bisa scraping langsung dari `https://www.google.com` karena Google melindungi halamannya dengan anti-bot. Sebagai alternatif legal dan lebih stabil, kita bisa gunakan '''SerpApi''' (gratis hingga 100 permintaan/bulan) atau '''Bing Search''' sebagai fallback. Namun, untuk langsung scraping halaman Google, kita bisa pakai `googlesearch` dari `googlesearch-python`.

==✅ Script dengan `googlesearch-python` (tanpa API)==

pip install googlesearch-python

from googlesearch import search
import csv

def google_scrape(keyword, num_results=10, output_file='results.csv'):
print(f"Searching Google for: {keyword}")

# Lakukan pencarian
results = search(keyword, num_results=num_results)

# Simpan ke file CSV
with open(output_file, mode='w', newline='', encoding='utf-8') as file:
writer = csv.writer(file)
writer.writerow(['Keyword', 'URL'])
for url in results:
writer.writerow([keyword, url])

print(f"Saved {len(results)} results to '{output_file}'")

# Contoh penggunaan
keyword = "berita terbaru teknologi Indonesia"
google_scrape(keyword, num_results=20)

==Output==
File `results.csv` akan berisi:

Keyword,URL
berita terbaru teknologi Indonesia,https://tekno.tempo.co/...
berita terbaru teknologi Indonesia,https://inet.detik.com/...

==Opsi Lain: Versi Tanpa `googlesearch`, Full Scraping (Lebih Riskan)==

Kalau kamu ingin versi yang benar-benar scraping HTML dari Google, kamu bisa pakai `requests` dan `BeautifulSoup` tapi '''kemungkinan akan diblokir atau gagal''' karena Google deteksi bot. Rekomendasi: pakai proxy atau API seperti SerpApi jika ingin lebih stabil dan legal.

==Pranala Menarik==

* [[Scrapping]]

← Older revision		Revision as of 05:46, 30 March 2025
Line 6:		Line 6:


−	pip install googlesearch-python	+	pip install googlesearch-python nltk matplotlib wordcloud
		+
		+

	from googlesearch import search		from googlesearch import search

@@ Line 7: / Line 7: @@
   pip install googlesearch-python
   from googlesearch import search
   import csv
-  def google_scrape(keyword, num_results=10, output_file='results.csv'):
+  def google_scrape(keyword, num_results=40,
       print(f"Searching Google for: {keyword}")
-−
-      # Lakukan pencarian
+      # Lakukan pencarian dan ubah hasil ke dalam list
-      results = search(keyword, num_results=num_results)
+      results = list(search(keyword, num_results=num_results))
-−
       # Simpan ke file CSV
       with open(output_file, mode='w', newline='', encoding='utf-8') as file:
@@ Line 24: / Line 24: @@
           for url in results:
               writer.writerow([keyword, url])
-−
       print(f"Saved {len(results)} results to '{output_file}'")
   # Contoh penggunaan
   keyword = "berita terbaru teknologi Indonesia"
-  google_scrape(keyword, num_results=20)
+  google_scrape(keyword, num_results=40)
 ==Output==