Pregunta de entrevista de Microsoft

Q: Design a website crawler.