Semalt: Вебсайтҳои маъруфи таҳрирнашаванда

Барои дастӣ харошидан, шумо бояд малакаҳои аълои барномасозӣ дошта бошед. Ғайр аз ин, шумо метавонед як қатор воситаҳои истихроҷи вебро истифода баред , ки ҳадафи хондан, сохтан ва шикастани додаҳо дар формати мушаххас пешбинӣ шудааст. Аммо, баъзе вебсайтҳо қобили дастрас нестанд ва ин маънои онро дорад, ки онҳо усулҳои зиддилағжиш истифода мекунанд ё қайдҳои худро мунтазам иваз мекунанд. Масалан, LinkedIn, Alibaba ва Facebook тафсилоти воридшавиро талаб мекунанд, ворид кардани CAPTCHA ва маҳкам кардани суроғаҳои IP бо мақсади ҳимоя ва махфияти корбарони онҳо.

1. Facebook:

Facebook яке аз маъруфтарин шабакаҳои иҷтимоӣ ба шумор меравад, ки дар саросари ҷаҳон зиёда аз 20 миллион корбари фаъол дорад. Шумораи зиёди барномаҳо ва барномаҳои скрептерҳо мавҷуданд, ки ҳадафи онҳо гирифтани маълумоти инфиродӣ аз Facebook мебошанд. Мутаассифона, аксари воситаҳо ба мо маълумоти дақиқ ва хоно намедиҳанд. Facebook барои спаммерҳо ва ҳакерҳо ҷамъоварии маълумотро дар бораи корбарони он мушкил кардааст. Онро танҳо бо кӯмаки як таҳлилгари HTML, масалан Python, ба даст овардан мумкин аст, аммо аксар вебмастерҳо ва freelancers ҳатто асосҳои Pythonро намедонанд. Ба наздикӣ, як скрепери Facebook барои гирифтани иттилооти муҳим аз ин вебсайти шабакаи иҷтимоӣ роҳандозӣ шуд. Бо як скрабери Facebook шумо метавонед танҳо номҳо ва суроғаҳои почтаи электронии корбарони Facebook ҷамъоварӣ кунед. Аммо агар шумо мехоҳед маълумоти амиқро ҷамъ оваред, шумо наметавонед ин асбоб ё ягон скрепери шабеҳро истифода баред.

2. LinkedIn:

LinkedIn як вебсайти дигари шабакаи иҷтимоӣ аст, ки скрепингро ғайриимкон менамояд. Аммо, шумо метавонед қисман маълумотро аз якчанд веб саҳифаҳо бароваред, аммо аксарияти маълумот дастнорас аст. Шумо метавонед танҳо маълумотро аз профили ҷамъиятии LinkedIn бо истифода аз Import.io ё Kimono Labs тоза кунед. Аз сабаби чораҳои қавии бехатарии LinkedIn, фурӯшандагон наметавонанд аз хизматрасониҳои скрепер бартарӣ бигиранд. Бо вуҷуди ин, онҳо ба истифодаи Extractor Lead, ки ба тоза кардани профилҳои ҷамъиятӣ кӯмак мерасонанд, шурӯъ карданд. Ин восита метавонад танҳо пайвандҳои профил, номҳо ва суроғаҳои почтаи электрониро захмӣ кунад. Аммо агар шумо хоҳед, ки Skype, Yahoo Messenger ID, суроғаи пурра ва идентификатори Twitter-и корбарро гиред, LinkedIn ба шумо иҷоза намедиҳад.

3. Алибаба:

Alibaba як конгломерати технологӣ мебошад, ки хидматрасонии истеъмолкунандагонро ба таври онлайн пешниҳод мекунад. Мутаассифона, ҳеҷ роҳе барои каҷ кардани маълумот аз ин вебсайт вуҷуд надорад. Баръакси Amazon ва eBay, Alibaba барои корбарони худ гирифтани маълумотро дар бораи маҳсулот, тасвирҳо, тавсифҳо ва нархҳо мушкил кардааст. Дар соли 2015, як қатор асбобҳое, ки метавонанд маълумотро аз Алибаба сабт кунанд, ба омма пешкаш карда шуданд. Аксари воситаҳо пулакӣ мебошанд ва ба интизориҳои оғози кор мувофиқат намекунанд. Alibaba доираи васеи тиҷоратро дар тамоми ҷаҳон идора мекунад ва харидорон бо таъминкунандагонро мепайвандад. Дар ҳамин ҳол, он махфияти онҳоро кафолат медиҳад ва намегузорад, ки касе маълумотро ғорат кунад. То моҳи октябри соли 2017, Alibaba дар саросари платформаи худ зиёда аз 500 миллион корбарони фаъол дорад. Alibaba ҳатто дар афзоиши даромади абр бозигарони бузурги абрӣ ба монанди Amazon, Google ва Microsoft-ро аз пеш гузошт. Он стратегияҳои беҳтарини таъмини махфияти таъминкунандагони онро амалӣ кардааст ва ҳамаи суроғаҳои шубҳаноки IP-ро дар сонияҳо маҳкам мекунад.

mass gmail