🚨 Web’den veri çekmek artık çok daha kolay ve güçlü hale geldi.
Bir geliştirici olarak en çok ihtiyaç duyduğum şeylerden biri, herhangi bir siteyi temiz ve hızlı şekilde veriye dönüştürmekti. İşte tam da bu işi yapan 8 güçlü GitHub reposu:
1. **Firecrawl** — URL ver, siteyi otomatik dolaş, temiz veri al. JS destekli.
→ https://t.co/90iVS74nb2
2. **Crawl4AI** — LLM’ler için özel tasarlanmış, tamamen ücretsiz ve çok hızlı.
→ https://t.co/oXqbGuiblH
3. **browser-use** — AI ajanların tarayıcıyı insan gibi kullanmasını sağlar (tıkla, form doldur, login ol).
→ https://t.co/3DZ1P9tq2W
4. **Crawlee** — Profesyonel seviye scraping: proxy rotasyonu, anti-detection, kuyruk yönetimi.
→ https://t.co/CVK2i8TQ2t
5. **Scrapy** — Yıllardır sektörün standardı. Büyük ölçekli projeler için en stabil çözüm.
→ https://t.co/9nqbddozS1
6. **Scrapling** — Web sitesi değişse bile kendini otomatik uyarlar. Gerçekten akıllı bir kütüphane.
→ https://t.co/qInXZC7Vq8
7. **AutoScraper** — Sadece örnek veri ver, geri kalanı kendisi öğrenir. Basit ama çok etkili.
→ https://t.co/HXuxl8UfZx
8. **curl-impersonate** — Gerçek tarayıcı gibi istek atarak en gelişmiş anti-bot korumalarını aşar.
→ https://t.co/AHZovaT1Zd
Bu araçlarla artık pahalı API’lere veya kısıtlı servislere bağımlı kalmadan, istediğin veriyi temiz ve hızlı şekilde çekebiliyorsun.
Sen hangi scraping aracını kullanıyorsun? Yorumlarda paylaş, birlikte değerlendirelim.
@DeepTechTR
Şu anda Claude ile çalışmanın en iyi yolu bu...
Yeni bir projeye başladığında (saas, içerik, app, ne olursa olsun) şunu yap:
Opus 4.8 ile yepyeni bir chat aç. Extended Thinking’i aç ve projen hakkında bildiğin her şeyi dök, hiçbir şeyi atlama.
Sonra şunu yaz:
"ask me 5 questions that would help you have a complete understanding of this project"
Bu sorulara detaylı cevap ver. Buraya bayağı zaman ayır, ACELE ETME.
Cevapları bitirdikten sonra şunu yapıştır:
"you're my co-founder. create a master plan with a knowledge base directory for each section. attach context markdown files to every part. you're building the skeleton that Claude Code will use to build everything 10x faster. suggest skills to integrate, automations to build or any tool that’d 10x our speed. suggest when to use a project or Claude Code"
Claude sana projenin bütün iskeletini, klasör yapısını ve dosyaları çıkaracak. Direkt Claude Code’a import et.
Artık projeni onunla birlikte kuruyorsun. Normal Claude'u chat gibi kullanıyorsun ama çok daha güçlü bi şekilde.
Claude sana ne zaman Claude Projects açman gerektiğini, hangi research’ü derinleştireceğini ve hangi MCP’leri kullanacağını söyleyecek.Tek bir planning seansı, kendi başına haftalarca uğraşmana bedel.
İşte AI ile proje yapmak böyle oluyor.
@ayts35 @MTanal Ayy bu kadar mı ya?:) ulan desene seçim otobüsünde şebeke elektriğinin işi ne? Bizi bu kadar mal yerine koydunuz yeter desene:) kamçılayın bizi tanal diyorsun ya
@MTanal Nasıl olsa kitle müsait:) olum inanmayın bu kadar ya. Bunların halkı keriz görmesi bu kadar normal mi? Seçim otobüsünde şebeke elektriğinin işi ne olum:))