Skip to content

Python script, which empowers people with no programming background to generate robust leads on a mass scale. This repo will be compiled of various versatile techniques used in lead generation.

collecting leads from google maps page added

Madia1f627ffc577
diff --git a/leads.csv b/leads.csv
index 3b4c301..e04e874 100644
--- a/leads.csv
+++ b/leads.csv
@@ -1,3 +1,21 @@
Title,Address,WebSite,PhoneNumber
+Breakfast Cafe,"Малая Никитская ул., 2/1 стр. 1, Москва, Россия, 121069",friends-forever.ru,+7 916 640-86-36
SOS,"Мясницкая ул., дом 11, Москва, Россия, 101000",sos.cafe,+7 495 150-43-34
Unlock cafe,"Лубянский пр-д, 19 строение 1, Москва, Россия, 101000",unlock.cafe,+7 495 623-25-78
+Ресторан Bon App Cafe в Тверском районе,"Никольская улица, 25, 1 этаж, ​ТЦ Наутилиус, Москва, Россия, 109012",bonappcafe.ru,+7 495 204-49-17
+ПРОСВЕТ,"ул. Ильинка, 4, 7 подъезд, Москва, Россия, 109012",instagram.com,+7 925 606-36-59
+Urban Cafe,"Берсеневская набережная, 8 строение 1, Москва, Россия, 119072",urbancafe.moscow,+7 495 787-28-87
+Cafe Sobranie,"ул. Большая Дмитровка, 1, Москва, Россия, 125009",Добавить сайт,Добавить номер телефона
+Фестивальное,"Красная пл., 3, ГУМ, Москва, Россия, 109012",Добавить сайт,Добавить номер телефона
+Scramble,"ул. Спиридоновка, 24, к.1, Москва, Россия, 123001",friends-forever.ru,+7 495 691-18-50
+У Фонтана Кафе,"Красная пл., 3, Москва, Россия, 109012",gum.ru,+7 495 995-88-99
+PRIME,"Тверская ул., 15, Москва, Россия, 125009",prime-star.ru,+7 495 664-23-63
+ОМ ФУД КАФЕ (OM Food Cafe),"ул. Рождественка, 11/4к1с4, Москва, Россия, 107031",omfoodcafe.ru,+7 495 532-75-42
+Surf Coffee,"Мясницкая ул., 16, Москва, Россия, 101000",surfcoffee.ru,+7 965 213-15-20
+Му-Му,"ул. Рождественка, 5/7с89, Москва, Россия, 109012",cafemumu.ru,+7 989 488-06-85
+Му-Му,"Манежная пл., 1, стр. 2 ТЦ «Охотный ряд», средний уровень, Москва, Россия, 125009",cafemumu.ru,+7 985 129-82-76
+Saperavi cafe,"ул. Покровка, д. 5, стр. 5, Москва, Россия, 101000",saperavicafe.ru,+7 495 648-66-33
+Авокадо,"Чистопрудный бул., 12, к. 2, Москва, Россия, 101000",avocadocafe.ru,+7 495 621-77-19
+Кафе Lights cafe,"Нижняя Радищевская ул., 14/2 строение 1, 1 этаж, Москва, Россия, 109240",lightscafe.ru,+7 495 233-12-59
+Юлина кухня,"ул. Охотный Ряд, 2, Москва, Россия, 109012",jvkitchen.ru,+7 495 125-40-40
+The Library Bar,"ул. Бахрушина, 11, Москва, Россия, 115184",Добавить сайт,+7 495 720-53-03
diff --git a/webdriver.py b/webdriver.py
index 8b3da63..a252e39 100644
--- a/webdriver.py
+++ b/webdriver.py
@@ -26,6 +26,9 @@ class Webdriver:
'PhoneNumber': re.compile(r'(phone_gm_blue_24dp.png)')
}
+ viewport = {'width': 1920, 'height': 1080, 'deviceScaleFactor': 1.0,
+ 'isMobile': False, 'hasTouch': False, 'isLandscape': False}
+
def __init__(self, filename='leads.csv'):
if not filename.endswith('.csv'):
raise ValueError(
@@ -51,7 +54,7 @@ class Webdriver:
self.page = (await self.browser.pages())[0]
- await self.page.setViewport({'width': 1920, 'height': 1080})
+ await self.page.setViewport(self.viewport)
await self.page.setUserAgent(ua.random)
await self.page.reload()
await self.page.goto(URL)
@@ -74,6 +77,7 @@ class Webdriver:
async def scrape(self):
await self.page.waitForSelector('.section-result-content')
+ home = self.page.url
overall = len(await self.page.querySelectorAll('.section-result-content'))
for i in range(overall):
@@ -85,16 +89,16 @@ class Webdriver:
])
print('I am on the page')
- sleep(5)
+ sleep(2)
data = self.extract(await self.page.content())
self.store(data)
await asyncio.wait([
- self.page.goBack(),
+ self.page.goto(home),
self.page.waitForNavigation()
])
- sleep(5)
+ sleep(2)
print('I am back')
def extract(self, html):